PARALLEL.RU

Дискуссионный клуб по параллельным вычислениям
Текущее время: 6 дек 19 5:59

Часовой пояс: UTC + 4 часа [ Летнее время ]




Начать новую тему Ответить на тему  [ Сообщений: 31 ]  На страницу Пред.  1, 2, 3  След.
Автор Сообщение
 Заголовок сообщения:
СообщениеДобавлено: 8 окт 07 19:19 
Не в сети

Зарегистрирован: 2 окт 06 12:13
Сообщения: 4
Откуда: Новосибирск
задачи аэрогидродинамики и молекулярной динамики


Вернуться к началу
 Профиль  
 
 Заголовок сообщения:
СообщениеДобавлено: 9 окт 07 0:20 
Не в сети

Зарегистрирован: 18 июн 07 13:13
Сообщения: 47
Откуда: Москва
buzjura писал(а):
задачи аэрогидродинамики и молекулярной динамики


Смотрите бенчмарки софта, который вы используете.

Например для Fluent http://www.fluent.com/software/fluent/f ... nch_6.3.x/
Если софт самописный, разумеется будет надёжнее потестировать вашу типичную задачу на различном железе. На моих задачах (сверхзвуковые потоки с умеренными и большими Махами) на равночастотных процессорах наблюдается примерный паритет.


Вернуться к началу
 Профиль  
 
 Заголовок сообщения:
СообщениеДобавлено: 9 окт 07 10:26 
Не в сети

Зарегистрирован: 2 окт 06 12:13
Сообщения: 4
Откуда: Новосибирск
сами пишем ессно
было бы где тестировать, не так просто найти
спасибо


Вернуться к началу
 Профиль  
 
 Заголовок сообщения:
СообщениеДобавлено: 9 окт 07 13:32 
Не в сети

Зарегистрирован: 18 июн 07 13:13
Сообщения: 47
Откуда: Москва
buzjura писал(а):
сами пишем ессно
было бы где тестировать, не так просто найти
спасибо


Ну тогда либо экстраполируйте свои задачи на стандартный софт либо просите поставщика железо на тест.
Вообще по личному опыту если вендор действительно заинтересован в продаже оборудования то даёт его потестировать как удалённо так и локально.


Вернуться к началу
 Профиль  
 
 Заголовок сообщения:
СообщениеДобавлено: 16 окт 07 13:45 
Не в сети

Зарегистрирован: 29 июн 07 9:47
Сообщения: 19
Откуда: MSK
Мы тут рассматриваем не бюджетный вариант - SUN Blade 6000
http://www.sun.com/servers/blades/6000/

2x Intel Quad, >= 4Gb mem, HDD >= 73Gb (SAS or SATA), Infini 10G...

остальные сетки на 1Гб.

Что скажете?

_________________
;)


Вернуться к началу
 Профиль  
 
 Заголовок сообщения:
СообщениеДобавлено: 16 окт 07 14:14 
Не в сети

Зарегистрирован: 28 май 05 21:12
Сообщения: 217
Откуда: Москва
0xE5 писал(а):
Что скажете?

Задачи какие? Какая конкретно серия? Какая набивка? Ориентировочно какая сумма получается при конкретной конфигурации? После ответов на эти вопросы можно уже как то и проанализировать попробовать.

ИМХО, если стоит задача потратить как можно больше и как можно бесполезней, то блейды само то. Речь идет только про hpc, хотя и не в hpc блейды редко когда дешевле выходят.


Вернуться к началу
 Профиль  
 
 Заголовок сообщения:
СообщениеДобавлено: 16 окт 07 14:56 
Не в сети

Зарегистрирован: 29 июн 07 9:47
Сообщения: 19
Откуда: MSK
Andrew Sapronov писал(а):
0xE5 писал(а):
Что скажете?

Задачи какие? Какая конкретно серия? Какая набивка? Ориентировочно какая сумма получается при конкретной конфигурации? После ответов на эти вопросы можно уже как то и проанализировать попробовать.

ИМХО, если стоит задача потратить как можно больше и как можно бесполезней, то блейды само то. Речь идет только про hpc, хотя и не в hpc блейды редко когда дешевле выходят.


Использоваться будет для вычислений с большой размерностью.
К сожалению точных решаемых задач немогу...

А набивка - лезвий - на сколько хватит $ (~90.000$), на каждую, кроме управляющей по 2 Ксеона 1.6 Гц, 4гб оперативки, винт сата на 73Гб, 2 гигабитных лана, 10Гб инфинибанд. Управляющий (он и файловый) такой же но 4 винта по 146 Гб 10000 об.
ОС - сусе или шапка.

В идеале должно получиться (если докупить потом) 2 блейда - 19выч узлов и 1 главный.
Точная цена пока неизвестна...


Вообще думаю нафиг этот блейд... ну будет больше места занимать обычные серваки (1/2U).... зато дешвле и гибче...

_________________
;)


Вернуться к началу
 Профиль  
 
 Заголовок сообщения:
СообщениеДобавлено: 16 окт 07 16:17 
Не в сети

Зарегистрирован: 28 май 05 21:12
Сообщения: 217
Откуда: Москва
0xE5 писал(а):
Использоваться будет для вычислений с большой размерностью.

Тогда довольно странно смотряться всего 4Гб памяти на 8мь ядер. По 512М на ядро?

0xE5 писал(а):
Вообще думаю нафиг этот блейд... ну будет больше места занимать обычные серваки (1/2U).... зато дешвле и гибче...

Насчет больше места вопрос спорный. Есть вот такие одноюнитовые машины:
http://www.supermicro.com/products/syst ... T-INFV.cfm
Каждый юнит - четыре сокета т.о. в 10 юнитах - получится 40 шт, в то время как в обозначенных блейдах в два раза меньше.

А в остальном нужно внимательно считать. Блейды, если они не по акции, никогда не выходят дешевле простых серверов при равной вычислиельной мощности.


Вернуться к началу
 Профиль  
 
 Заголовок сообщения:
СообщениеДобавлено: 17 окт 07 17:18 
Не в сети

Зарегистрирован: 11 дек 02 19:37
Сообщения: 872
Откуда: НИВЦ МГУ
От задачи требуется знать:
1. Насколько часто и какими порциями данных будут обмениваться процессы - от этого зависит какую сеть ставить. Ethernet может буквально убить вашу задачу, если обменов много и они небольшие. Тогда на 20 процессорах можете получить двукратное ускорение...
2. Требования по памяти. Тут понятно. Просто блейды могут быть ограничены в объёме памяти, не знаю как конкретно эти...
3. Стратегия использования временных файлов. От этого зависит принципиально ли ставить локальные жёсткие диски.
4. Не забудьте сколько это всё будет потреблять и какие кондиционеры потребуются. Об этом часто вспоминают в последний момент...


Вернуться к началу
 Профиль  
 
 Заголовок сообщения:
СообщениеДобавлено: 19 окт 07 0:21 
Не в сети

Зарегистрирован: 18 июн 07 13:13
Сообщения: 47
Откуда: Москва
Andrew Sapronov писал(а):
0xE5 писал(а):
Использоваться будет для вычислений с большой размерностью.

Тогда довольно странно смотряться всего 4Гб памяти на 8мь ядер. По 512М на ядро?

0xE5 писал(а):
Вообще думаю нафиг этот блейд... ну будет больше места занимать обычные серваки (1/2U).... зато дешвле и гибче...

Насчет больше места вопрос спорный. Есть вот такие одноюнитовые машины:
http://www.supermicro.com/products/syst ... T-INFV.cfm
Каждый юнит - четыре сокета т.о. в 10 юнитах - получится 40 шт, в то время как в обозначенных блейдах в два раза меньше.

А в остальном нужно внимательно считать. Блейды, если они не по акции, никогда не выходят дешевле простых серверов при равной вычислиельной мощности.


Есть 2 неучтённых момента в пользу блейдов.

1) Указанная Вами конфигурация это 10 PSU по 980 Wt в сумме это 10KWt аналогичная система на блейдах получится порядка 7KWt

2) Вертикально расположенные модули удобнее вязать IB (короткие кабеля одинаковой длины). Вся система выходит более компактной

Вообще же "обыкновенные" блейды не очень годятся для HPC.

И еще. Не экономьте на процессорах. Лучше взять топ или около того но
меньшее количество. Легче потом добавить еще узлы чем апдейтить их
потом все целиком (фактически легче купить новую систему).


Вернуться к началу
 Профиль  
 
 Заголовок сообщения:
СообщениеДобавлено: 19 окт 07 13:41 
Не в сети

Зарегистрирован: 29 июн 07 9:47
Сообщения: 19
Откуда: MSK
Serg_Zhum писал(а):
От задачи требуется знать:
1. Насколько часто и какими порциями данных будут обмениваться процессы - от этого зависит какую сеть ставить. Ethernet может буквально убить вашу задачу, если обменов много и они небольшие.

Коммуникационная сеть - Infini/Mari 10G
Остальные - Ether 1G.
Serg_Zhum писал(а):
2. Требования по памяти. Тут понятно. Просто блейды могут быть ограничены в объёме памяти, не знаю как конкретно эти...

Там 8 пар слотов... Так что место есть :)
Serg_Zhum писал(а):
3. Стратегия использования временных файлов. От этого зависит принципиально ли ставить локальные жёсткие диски.

Вот это незнаю... Но думаю что при малом объеме оперативки своп нужен :)
Serg_Zhum писал(а):
4. Не забудьте сколько это всё будет потреблять и какие кондиционеры потребуются. Об этом часто вспоминают в последний момент...

Это уже продуманно, брали с запасом - по 15кв питалова и такой же кондей.
Единственно что думаю, возможно проще и эффективней в плане оптимизации нагрузок и времени аварийной работы всместо кучи УПСов 5000 (3.7кв) взять одну стойку типа нетры APCшной... Чуть дороже, но правильней :)

_________________
;)


Вернуться к началу
 Профиль  
 
 Заголовок сообщения:
СообщениеДобавлено: 21 окт 07 19:37 
Не в сети

Зарегистрирован: 28 май 05 21:12
Сообщения: 217
Откуда: Москва
Serge A. Suchkov писал(а):
1) Указанная Вами конфигурация это 10 PSU по 980 Wt в сумме это 10KWt аналогичная система на блейдах получится порядка 7KWt

Ну, в общем, это не конфигурация, а лишь пример того, что блейды не всегда занимают меньше места. Есть еще вот такой пример:
http://tyan.com/product_barebones_detail.aspx?pid=253

Что же касается мощности, то тут совсем не понятно. 980 это из даташита микры, а для блейдов, насколько я понял, это из power-калькулятора - т.е. потребляемая мощность, которую не совсем корректно сравнимать с мощностью БП. Мощность же БП для одного шасси (которых тут нужно будет два) - 1+1 PSU rating: 5600 W each power supply module (two 2800W cores). Итого 11200х2. Вот именно эту величину имеет смысл сравнивать с 10K.


Вернуться к началу
 Профиль  
 
 Заголовок сообщения:
СообщениеДобавлено: 22 окт 07 15:29 
Не в сети

Зарегистрирован: 11 дек 02 19:37
Сообщения: 872
Откуда: НИВЦ МГУ
0xE5 писал(а):
Коммуникационная сеть - Infini/Mari 10G
Остальные - Ether 1G.

Кто такие Mari не знаю, но догадываюсь :) Если будете ставить InfiniBand, то главное заранее продумать как будете прокладывать и крепить кабели.

Цитата:
Serg_Zhum писал(а):
3. Стратегия использования временных файлов. От этого зависит принципиально ли ставить локальные жёсткие диски.

Вот это незнаю... Но думаю что при малом объеме оперативки своп нужен :)

Не только для этого. Большие задачи нередко генерируют огромные временные файлы, которые на общий диск класть очень плохо. Поэтому локальный /tmp зачастую очень нелишний.

Цитата:
Это уже продуманно, брали с запасом - по 15кв питалова и такой же кондей.
Единственно что думаю, возможно проще и эффективней в плане оптимизации нагрузок и времени аварийной работы всместо кучи УПСов 5000 (3.7кв) взять одну стойку типа нетры APCшной... Чуть дороже, но правильней :)

Это хорошо. Нетра - действительно правильное решение, если бюджет позволяет, то лучше не экономить.


Вернуться к началу
 Профиль  
 
 Заголовок сообщения:
СообщениеДобавлено: 23 окт 07 10:39 
Не в сети

Зарегистрирован: 29 июн 07 9:47
Сообщения: 19
Откуда: MSK
Serg_Zhum писал(а):
0xE5 писал(а):
Коммуникационная сеть - Infini/Mari 10G
Остальные - Ether 1G.

Кто такие Mari не знаю, но догадываюсь :) Если будете ставить InfiniBand, то главное заранее продумать как будете прокладывать и крепить кабели.


А что там есть проблемы с кабелями?
Изначально планируется убрать все в обну стойку.
Все кабели и прочее - через кабельные организаторы, а с задней стороны на стяжки...


Возник вопрос про охлаждение:
Делать хорошо (но дорого будет) - кондер под фальшполом + другая стойка.
Или повесить кондей, из расчета блее-менее равномерной обдуваемости открытой стойки. Просто 42U равномерно обдуть несколько проблематично...

_________________
;)


Вернуться к началу
 Профиль  
 
 Заголовок сообщения:
СообщениеДобавлено: 23 окт 07 14:49 
Не в сети

Зарегистрирован: 11 дек 02 19:37
Сообщения: 872
Откуда: НИВЦ МГУ
0xE5 писал(а):
А что там есть проблемы с кабелями?
Изначально планируется убрать все в обну стойку.
Все кабели и прочее - через кабельные организаторы, а с задней стороны на стяжки...


Проблема ровно одна - они толстые и тяжёлые. Лучше заранее аккуратно продумать разводку. IB-свич, к примеру, не лишне будет поместить в середину стойки, чтобы к нему приходил не один большой жгут снизу(сверху), а два потоньше.

Цитата:
Или повесить кондей, из расчета блее-менее равномерной обдуваемости открытой стойки. Просто 42U равномерно обдуть несколько проблематично...


По опыту могу сказать, что кондишен в любом случае надо отодвинуть от стойки метра на 2-3 или дальше. А сзади хорошо бы вытяжку :) Под фальшпол кондишен засовывать ИМХО странно, т.к. холодный воздух на 2 метра подниматься будет с трудом... Но это только моё опасение.


Вернуться к началу
 Профиль  
 
Показать сообщения за:  Поле сортировки  
Начать новую тему Ответить на тему  [ Сообщений: 31 ]  На страницу Пред.  1, 2, 3  След.

Часовой пояс: UTC + 4 часа [ Летнее время ]


Кто сейчас на конференции

Сейчас этот форум просматривают: нет зарегистрированных пользователей и гости: 1


Вы не можете начинать темы
Вы не можете отвечать на сообщения
Вы не можете редактировать свои сообщения
Вы не можете удалять свои сообщения
Вы не можете добавлять вложения

Найти:
Перейти:  
cron
Создано на основе phpBB® Forum Software © phpBB Group
Русская поддержка phpBB