|
Basilio
|
|
GreenOne
|
|
|
|
|
|
|
Рег.: 14.10.2002
|
|
Сообщений: 13749
|
|
Из: Москва
|
|
Рейтинг: 3476
|
|
организация очереди на считалку
15.01.2011 22:13
|
|
|
задача - "кластер" на коленке.
пусть для начала это будет SMP 2 x quad-core xeon.
есть пачка пользователей, около 50, которые будут считать ( на самом деле - учиться считать  )
нужно как-то отделить пользовательские задачи от счетных. мне не представляется это реальным. запустит какой-нибудь умник make -j9 на свой gamess и превед.
наверное самым правильным будет организовать отдельную простенькую машину для компиляции и на ней софт по отправке на считалку.
какие есть готовые решения? хотелось бы с реальной очередью, с возможностью квотирования ядер, со статистикой и прикольными графиками
|
|
|
blind
|
|
still alive
|
|
|
|
|
|
|
Рег.: 16.01.2004
|
|
Сообщений: 23127
|
|
Из: Хамовники
|
|
Рейтинг: 16481
|
|
Re: организация очереди на считалку
[re: Basilio]
15.01.2011 22:20
|
|
|
>нужно как-то отделить пользовательские задачи от счетных. мне не представляется это реальным. запустит какой-нибудь умник make -j9 на свой gamess и превед.
а делов-то, возможностей cpuset и групповного шедулера на cpu-cgroup должно хватить.
|
13/37 =) |
|
|
green
|
|
|
|
|
|
|
|
|
Рег.: 28.11.2002
|
|
Сообщений: 20916
|
|
Из: MSU
|
|
Рейтинг: 5080
|
|
Re: организация очереди на считалку
[re: Basilio]
15.01.2011 22:25
|
|
|
Ну в кластерах для batch применяют всякие torque и подобное.
|
|
|
Basilio
|
|
GreenOne
|
|
|
|
|
|
|
Рег.: 14.10.2002
|
|
Сообщений: 13749
|
|
Из: Москва
|
|
Рейтинг: 3476
|
|
Re: организация очереди на считалку
[re: green]
15.01.2011 23:01
|
|
|
а к очереди есть веб-морда ?
|
|
|
green
|
|
|
|
|
|
|
|
|
Рег.: 28.11.2002
|
|
Сообщений: 20916
|
|
Из: MSU
|
|
Рейтинг: 5080
|
|
Re: организация очереди на считалку
[re: Basilio]
16.01.2011 00:03
|
|
|
В самом torque кажется не было. Там еще к нему шедуллер был "продвинутый" maui, но у него вроде тоже этого нет. А отдельно я этот вопрос не изучал. Может быть есть какие проекты это реализующие.
Еще у Sun вроде был тоже с PBS-интефейсом планировщик, название не помню... что-то а-ля "Grid Engine". Там не исключено, что и web-морда есть.
|
|
|
Jerry
|
|
Санек
|
|
|
|
|
|
|
Рег.: 14.03.2004
|
|
Сообщений: 1360
|
|
Из: Москва
|
|
Рейтинг: 501
|
|
Re: организация очереди на считалку
[re: Basilio]
16.01.2011 00:12
|
|
|
Quote:
а к очереди есть веб-морда ?
Есть ganglia, но я пока еще не пробовал ей прикручивать, все никак руки не доходят
|
|
|
Basilio
|
|
GreenOne
|
|
|
|
|
|
|
Рег.: 14.10.2002
|
|
Сообщений: 13749
|
|
Из: Москва
|
|
Рейтинг: 3476
|
|
Re: организация очереди на считалку
[re: Jerry]
16.01.2011 01:56
|
|
|
|
|
|
Leo
|
|
|
|
|
|
|
|
|
Рег.: 06.12.2002
|
|
Сообщений: 4547
|
|
Из: 51.5252 N, 0.1322 W
|
|
Рейтинг: 548
|
|
Re: организация очереди на считалку
[re: green]
16.01.2011 02:04
|
|
|
У torque/pbs к очереди есть не веб-морда, а в стопитсот раз круче! Гуй! 
Прикручивать maui для такой задачи - чистый overkill. Планировщик сана так и называется - Sun Grid Engine, только он не с PBS-интерфейсом он со своим, на примитивном уровне похожем. Еще из бесплатного есть Condor, но PBS/Torque, по-моему, настраивать проще. Slurm еще есть. Много их всяких.
Насчет морды по нагрузке - еще на munin смотреть имеет смысл.
|
// Leo |
|
|
green
|
|
|
|
|
|
|
|
|
Рег.: 28.11.2002
|
|
Сообщений: 20916
|
|
Из: MSU
|
|
Рейтинг: 5080
|
|
Re: организация очереди на считалку
[re: Leo]
16.01.2011 14:27
|
|
|
Quote:
Прикручивать maui для такой задачи - чистый overkill.
Я не настаивал, промто думал, мало ли - может там какая морда прилагается заодно.
Quote:
Планировщик сана так и называется - Sun Grid Engine
Ну я просто точно не был уверен в названии.
Quote:
только он не с PBS-интерфейсом он со своим, на примитивном уровне похожем.
Ну вроде cli-интерфейс был достаточно похож на pbs. Вернее они оба, кажется, реализуют один стандарт интерфейса. Где-то что-то я про это видел, кажется. Уже не помню точно.
|
|
|
Leo
|
|
|
|
|
|
|
|
|
Рег.: 06.12.2002
|
|
Сообщений: 4547
|
|
Из: 51.5252 N, 0.1322 W
|
|
Рейтинг: 548
|
|
Re: организация очереди на считалку
[re: green]
16.01.2011 16:22
|
|
|
Quote:
Ну вроде cli-интерфейс был достаточно похож на pbs. Вернее они оба, кажется, реализуют один стандарт интерфейса. Где-то что-то я про это видел, кажется. Уже не помню точно.
IEEE Std 1003.2d-1994 (он же POSIX.1-1994) Section 8: Batch Environment Option Services and Utilities.
В новой редакции, которая POSIX.1-2008, тоже есть, конечно.
|
// Leo |
|
Список
Плоский
Дерево
