Суперкомпьютеры и их использование - особенно в России

lenivec> Ну как же! отпечатки "марсианских бактерий" из марсианских метеоритов.

Хм, где те достоверные отпечатки? И кто сказал, что они марсианские?

Ладно, фиг с ним. Немного в сторону. Изучаю тут деятельность организаций в нашем здании. Среди прочих есть такая штука как "Сибирский суперкомпьютерный центр", гляжу на итоги - рТПЕЛФЩ

Ага, комп НС-30Т (128 процессоров) за год наработал ажно 1181110,08 часов процессорного времени. Чешу репу, в году-то 365*24=8760 часов. Мнэ, видимо считают на каждый проц, ага, делим 1181110,08 на 128, в итоге 9227,4 часов. Эвона как - сисбирские ученые научились сжимать и растягивать время, за просто так добавили 20 дней в году Осеняет, что могли и в пересчете на одно ядро считаь (их на круг 512), тогда другая фигня - всего 2306 часов, т.е 75% времени дорогущее оборудование просто простаивало.


Теперь люботно, а че считали-то? Ага, вот рТПЕЛФЩ

ИВМиМГ СО РАН (2008):
Моделирование образования наночастиц (сажа, диоксид титана) в пламени горелки по методу Монте-Карло на НКС-160


ИВМиМГ СО РАН (2007)
Нанотехнологии в микроэлектронике


Инс-т астрономии РАН, ИВМиМГ СО РАН (2008)
Сценарии столкновения галактик


ИТПМ СО РАН
Расчёт обтекания космического корабля "Прогресс" - вот что его считать, давнолетает же, да даже и не возвращается..


А мы тут пытаемся деньги посчить, кда там деньги, и время-то не получается.


Во, не хухры-мухры

В.М.>...Осеняет, что могли и в пересчете на одно ядро считаь (их на круг 512), тогда другая фигня - всего 2306 часов, т.е 75% времени дорогущее оборудование просто простаивало...

Ну и что? у мужиков 95-99,999...% времени главный рабочий орган простаивает

и никто не поднимает заполошный хай "надо отобрать" из-за "ленивости" оного. Не пеняет сердчишком тем-же "работающим без выходных"

lenivec> Ну и что? у мужиков 95-99,999...% времени главный рабочий орган простаивает

За него столько платят??

В.М.> За него столько платят??

Если посчитать организм государством, то платят ещё больше.
Усилиями, затратами времени, работой других органов на износ за теньге, иногда телесными повреждениями...И всё для привлечения дырок под мимолётные нужды вышеописанного "лентяя"

В.М.> Осеняет, что могли и в пересчете на одно ядро считаь (их на круг 512), тогда другая фигня - всего 2306 часов, т.е 75% времени дорогущее оборудование просто простаивало.

Наши суперкомпьютерщики говорят, что такое время использования - это в общем приемлимо. В американских универах суперкомпьютеры используются в среднем примерно треть времени.
У нас, кажись, рекорд у МГУ-шных, что ли, кластеров "Чебышев" и еще чего-то у них там - вроде под 80% рабочего, это реально дофига. На физтеховском кластере что-то там типа 50-60, ЕМНИС, что очень хорошо считается.


P.S. Флуд про органы убедительно рекомендую прекратить, пока плюсомёт еще зачехлен.

Fakir> Наши суперкомпьютерщики говорят, что такое время использования - это в общем приемлимо. В американских универах суперкомпьютеры используются в среднем примерно треть времени.

Ага, и то в то время, когда на киношные рендер-фермы за бешеное бабло нужно еще и в очередь постоять? И, нахрена такие мощности (то бишь затраты) если их не исользовать? Бабло ничье?

В.М.> Ага, и то в то время, когда на киношные рендер-фермы за бешеное бабло нужно еще и в очередь постоять? И, нахрена такие мощности (то бишь затраты) если их не исользовать? Бабло ничье?

А теперь подумайте: а чего в тех же мериканьских универах киношники в очереди не стоят? Может, там в чём-то закавыка? Я вот не знаю, в чём. Но подозреваю, что может быть в легальности и цене соотв. софта. Наши суперкомпы под Юнихом в основном, НЯЗ, кстати, не удивлюсь, если большинство американских тоже. Что уже оченно может влиять.
Кроме того, отладка любого нового софта под параллельные вычисления - это всё не просто и далеко не мгновенно. Почему ни у кого и не получается 100% загрузки времени кластера. К примеру, сперва задачу/софтину параллелят, настраивают-гоняют на тестировочном мини-кластере (которые не суперы, т.к. качество соединений не то), а доведя до ума - переносят на "настоящий" кластер. Это всё время.

Fakir> А теперь подумайте: а чего в тех же мериканьских универах киношники в очереди не стоят? Может, там в чём-то закавыка? Я вот не знаю, в чём.

Видимо их универам не положено. Хотя - тот же МИТ шарашит на боинги, насы и прочих вовсю.

Fakir>Но подозреваю, что может быть в легальности и цене соотв. софта. Наши суперкомпы под Юнихом в основном, НЯЗ, кстати, не удивлюсь, если большинство американских тоже. Что уже оченно может влиять.

Вообще-то под линуксом Но прикладное ПО - да, недешево.

Fakir> Кроме того, отладка любого нового софта под параллельные вычисления - это всё не просто и далеко не мгновенно.

НРС-версии вычислительного софта давно отлажены.

Fakir>Почему ни у кого и не получается 100% загрузки времени кластера.

В СКЦ СО РАН с этим просто - они не обесечивают доступности сервиса в иное время кроме рабочих часов в будние дни. Итого 1/3 каждый день по 5 дней в неделю. В общем - для галочки и откатов штуковинка.

Fakir> P.S. Флуд про органы убедительно рекомендую прекратить, пока плюсомёт еще зачехлен.

тебя чтоли Vale покусал?

В.М.> Видимо их универам не положено. Хотя - тот же МИТ шарашит на боинги, насы и прочих вовсю.

Может не положено (хотя сомневаюсь), а может и технические или технико-экономические закавыки.

Fakir>> Кроме того, отладка любого нового софта под параллельные вычисления - это всё не просто и далеко не мгновенно.
В.М.> НРС-версии вычислительного софта давно отлажены.

На университетских компах обычно гоняют или оригинальный софт, под задачу и состряпанный (тактика постройки и эксплуатации суперкомпов в тамошних универах вообще писец, как рассказывают) или с нуля отлаживаемый под параллельность. Наши чуваки так говорят. Редко пользуются уже известным и под параллельность готовым, что вот только заливай да юзай (ах да, заливка нового софта на кластер - тоже немгновенная нехалява, плюс под соотв. Линух вроде тестить надо после заливки).

Fakir>>Почему ни у кого и не получается 100% загрузки времени кластера.
В.М.> В СКЦ СО РАН с этим просто - они не обесечивают доступности сервиса в иное время кроме рабочих часов в будние дни. Итого 1/3 каждый день по 5 дней в неделю. В общем - для галочки и откатов штуковинка.

Слушайте, а вот вам лично нужен суперкомп? Платить готовы в пределах пары-тройки килобаксов за сутки счёта кластера? Или там - тех же киношников подонгнать для рендеринга? Я вас хоть напрямую замкну на завкластером, проценты можете брать с обеих сторон
Люди очень даже готовы сотрудничать с теми, кому надо (тем более за деньги ), подскажут-помогут, время выделят в лучшем виде. Кстати, на рендеринг даже искали заказчиков, один даже нарисовался было, но вот что-то всё думает, не телится пока.

Fakir> P.S. Флуд про органы убедительно рекомендую прекратить, пока плюсомёт еще зачехлен.

Извини, какого ...?!

Я тут стараюсь подвести оппонента к мысли, что он только потому появился на свет, что все предки его секту скопцов-трудолюбов игнорировали.
хотя оное действо повышает трудоспособность наполовину а финансовый достаток почти на порядок.

И что "бездельная" наука не менее важна.

В.М.>...И, нахрена такие мощности (то бишь затраты) если их не исользовать? Бабло ничье?...

А кто орал на всю базу, что нех...хорошо считать теньги в чужом кармане?!

Запрыгнул панимаешь деляга в разрытый другими до него шурф (электротехнику с электроникой), выхватил мелькнувший самородок (написание прикладного ПО), и ещё и чморит этих других: лузеры дескать, жить и работать не умеете! А я! Ай да я!

Ежели бы все такие были, то наверное до сих пор носились бы с каменными топорами ультрамодерновыми. Выгодно оптимизировали старое проверенное вместо рискованной разведки чего-то нового.

А все почему? Потому что Малюх бенефиты за свои поделки получает, а потомки Ома, Фарадея, Ампера etc., etc ничего не получают с пользующего плоды трудов их предков в хвост и гриву Малюха.

Fakir> Может не положено (хотя сомневаюсь), а может и технические или технико-экономические закавыки.

Да запросто - у них бывает, что госорганизацифям нех зарабатывать.

В.М.>> НРС-версии вычислительного софта давно отлажены.
Fakir> На университетских компах обычно гоняют или оригинальный софт, под задачу и состряпанный (тактика постройки и эксплуатации суперкомпов в тамошних универах вообще писец, как рассказывают) или с нуля отлаживаемый под параллельность. Наши чуваки так говорят.

Не, в реальном промышленном вычислительном софте - не так. Это у нас "доморощенцы" воду мутят, а всякие ANSYS и даже "примкнувшие к ним" наши ТЕСИС (привет Саше 101:)) делают все лучше и правильнее чем универовские деятели.

В.М.>> В СКЦ СО РАН с этим просто - они не обесечивают доступности сервиса в иное время кроме рабочих часов в будние дни. Итого 1/3 каждый день по 5 дней в неделю. В общем - для галочки и откатов штуковинка.
Fakir> Слушайте, а вот вам лично нужен суперкомп?

Нам самим - нет. Нашим клиентам -бывает. Проще и надежнее купить сервис за рубежом. В чем и помогаем.

Fakir> Люди очень даже готовы сотрудничать с теми, кому надо (тем более за деньги ), подскажут-помогут, время выделят в лучшем виде.

Увы, "лучший вид" пока дома выходит не ахти. Плюс - эта дурацкая тендерная система заказов.

В.М.> Не, в реальном промышленном вычислительном софте - не так.

Только каким боком промышленный софт к университетским компам? Универские - они как-то всё больше задачки науки мелют, чем промышленности, как ни странно Ну вот созданы для этого

В.М.> Нам самим - нет. Нашим клиентам -бывает. Проще и надежнее купить сервис за рубежом. В чем и помогаем.

...итого резюмируем: спроса нет. Тем более платежеспособного.

В.М.> Увы, "лучший вид" пока дома выходит не ахти.

Я вам еще раз повторяю предложение: замкну напрямую на человека, вполне хорошо работающего. Попробуете хотя бы?

В.М.> Плюс - эта дурацкая тендерная система заказов.

Не будет вам тендерной системы Так чего, заказывать будете?

Fakir> Только каким боком промышленный софт к университетским компам? Универские - они как-то всё больше задачки науки мелют, чем промышленности, как ни странно Ну вот созданы для этого

При том, что уровень промышленного софта для физического моделирования давно (лет 20-30 как) выше чем академический.

Fakir> ...итого резюмируем: спроса нет. Тем более платежеспособного.

Срос есть. Отечественное предложение по уровню надежности и компетенции, за исключением редких случаев, да и то -частных а не академических, ниже плинтуса.

Fakir> Я вам еще раз повторяю предложение: замкну напрямую на человека, вполне хорошо работающего. Попробуете хотя бы?

Ну адрес давайте - вдруг онадобится.

Fakir> Не будет вам тендерной системы Так чего, заказывать будете?

В АН - будет, неминуемо, по закону.

В.М.> При том, что уровень ромышленного софта для физического моделирования лавно (лет 20-30 как) выше чем академический.

А причём тут Курский вокзал? Как тот ваш софт поможет исследователю, считающему звёздную динамику, или рассение высокоэнергичных частиц на мишени, или адгезию бактерий к графену?

В.М.> Срос есть. Отечественное предложение по уровню надежности и компетенции, за исключением редких случаев, да и то -частных а не академических, ниже плинтуса.

...категорично?:)

В.М.> Ну адрес давайте - вдруг онадобится.

Понадобится - пишите мне, сброшу тел.

В.М.> В АН - будет, неминуемо, по закону.

А я разве вам в АН предлагал? Где, покажите пальцем!:)

ценники тоже есть

Fakir> А причём тут Курский вокзал? Как тот ваш софт поможет исследователю, считающему звёздную динамику, или рассение высокоэнергичных частиц на мишени, или адгезию бактерий к графену?

Да к тому же. осмотрите, что реально исследователи ользуют - все те же Fluent, ANSYS и прочее. Уравнения-то те же. Да и софт в таких случаях росто даром дают.

Fakir> ...категорично?:)

Категорично. Без улыбок.

Fakir> Понадобится - пишите мне, сброшу тел.

Что мне-то понадобтся? Я (мы) не ищу таких заказов - это к нам обращаются за советом

В.М.> Бабло ничье?

Кажется я перестану о нём, на форуме, скоро говорить.
Народ, в основной массе, похоже, искренне не понимает, что это такое. За исключением того, что его можно украсть. И хорошо, когда оно есть.

В.М.> Да к тому же. осмотрите, что реально исследователи ользуют - все те же Fluent, ANSYS и прочее. Уравнения-то те же. Да и софт в таких случаях росто даром дают.

Какие исследователи, исследователи чего?

В.М.> Категорично. Без улыбок.

...я вам привёл пример - где и как можно. Вполне можно договориться, если кому-то нужно посчитать на суперкомьютере производительностью до 6,5 терафлопов. Единственный суперкомп, с мужиками с к-го я как-то контачу - и всё вроде как вполне. Что уже наводит на мысли.

В.М.> Что мне-то понадобтся? Я (мы) не ищу таких заказов - это к нам обращаются за советом

Ну откуда ж мне знать, что Вы же начали с того, что мол суперкомпы непростительно простаивают, когда спрос есть, и даже платежеспособный (ну или якобы есть, я без понятия насчёт спроса).

Fakir> Какие исследователи, исследователи чего?

Того же самого, газ- аэро гидродинамики, плазмы и проч. Ровно этот же софт стоит и в нашем СКЦ.

Fakir> ...я вам привёл пример - где и как можно. Вполне можно договориться, если кому-то нужно посчитать на суперкомьютере производительностью до 6,5 терафлопов.

Хы, и зачем? - комп этого местного СКЦ имеет примерну ту же мощность, находится в пяти шагах по коридору Я на это имею право, как научный сотрудник СО РАН хоть и на полставки.

Fakir> Ну откуда ж мне знать, что Вы же начали с того, что мол суперкомпы непростительно простаивают, когда спрос есть, и даже платежеспособный (ну или якобы есть, я без понятия насчёт спроса).

Спрос есть, но чтобы его удовлетворить - нужно озаботиться организацией услуги, ПО итп. А эти деятели "предсотавляют" сревис только в рабочие дни и только с 9.00 до 18.00. В остальное время - если работает, то рискуйте, но сбои фиксятся только в рабочее время. А чтобы усилить позиции к одну полупростаивающему кластеру прикупили год назад еще один, мудро, блин. Да и под лежачий камень вода не бежит, ктому же как написано в рПТСДПЛ ДПУФХРБ Л ТЕУХТУБН

Запрещается использование ресурсов ССКЦ в коммерческих целях и для разработки любых видов вооружения;

Вот кино, мультик, рекалмный ролик отрендерить - это коммерческие цели. Дунуть Фоменке его "Марусю" - коммерческие цели. Если кто с моей родной кафедры сунется что-то из нашизх изделий посчитать - это уже разработка любых вооружений.

В.М.> Того же самого, газ- аэро гидродинамики, плазмы и проч. Ровно этот же софт стоит и в нашем СКЦ.

Не знаю как там ваши поступают, но знаю, что наши вычматщики часто софт ваяют под задачу. Не просто используют уже готовые пакеты - даже математические - в которую загоняют матмодель, а и именно вычислительную схему преобразования диффуров тащат с нуля под конкретную задачу.

В.М.> А эти деятели "предсотавляют" сревис только в рабочие дни и только с 9.00 до 18.00.

Еще раз: так - не везде

Fakir> ... - в которую загоняют матмодель, а и именно вычислительную схему преобразования диффуров тащат с нуля под конкретную задачу.

А ародинамические трубы под каждый самолет они не строят?

В.М.>> А эти деятели "предсотавляют" сревис только в рабочие дни и только с 9.00 до 18.00.
Fakir> Еще раз: так - не везде

Конечно не везде

В.М.> А ародинамические трубы под каждый самолет они не строят?

Под каждый самолёт не строят, а вот под всякие специфические задачки очень даже строят специальные трубы.