https://www.opennet.ru/openforum/vsluhforumID3/13145.html Опубликовано (http://www.nkj.ru/interview/1589/) интересное интервью с Сергеем Михайловичем Абрамовым (http://www.botik.ru/~abram), научным руководителем и исполнительным директором суперкомпьютерной Программы "СКИФ (http://skif.pereslavl.ru/)".<br><br><br>URL: http://www.nkj.ru/interview/1589/<br>Новость: http://www.opennet.ru/opennews/art.shtml?num=6708<br> https://www.opennet.ru/openforum/vsluhforumID3/13145.html#27 Thu, 29 Dec 2005 17:48:53 GMT Собственно вопрос<br>Если нужны деньги, а продать железо трудно то<br>почему не продовать машинное время?<br>На мой взгляд и клиентов найти легче (намного большему колличеству<br>предприятий и организаций требуется супер время от времени)<br>и не требуется получать местные разрешения на пиобретения Российской<br>техники, а INTERNET2 доступен , если я не ошибаюсь и в России <br>(чтоб гонять данные)<br> https://www.opennet.ru/openforum/vsluhforumID3/13145.html#26 Thu, 29 Dec 2005 14:18:03 GMT Я действитеьно смешал термины SMP и NUMA зря, но таково мое воспряитие ;-).<br><br>По моему не особо квалифицированному мнению, двухканальная память хорошо, но сколько еще каналов реально можно породить? И как себя будет чувствоать контроллер памяти(аля езернет коммутация), когда с одной стороны сядут куча процессоров, с другой множество банков памяти. Думаю такое решение сильно не растянешь. Где сильно - многие сотни процессоров. <br>NUMA сейчас популярна на тяжелых серверах, но там тоже не все замечательно, и платишь изрядно. При этом нет факт, что увеличение количества узлов приведет к увеличению производительности, так как ПО должно учитывать разницу в стоимости запроса к памяти, а оно это не всегда делает нормально.<br><br>Проблема в том, что народ просто заворожен магией букв SUN, HP, IBM совершенно не понимая, что чудес не бывает. После определенного порога увеличение мощности серверов дается большим трудом и деньгами.<br><br>Купить SuperDOM , и бездумно водрузить на него с десяток БД - великая глупость, за редким https://www.opennet.ru/openforum/vsluhforumID3/13145.html#25 Thu, 29 Dec 2005 10:53:07 GMT &gt;Теоретически возможны все девять вариантов сочетаний; естественно, одни используются чаще, другие реже. <br>&gt;<br> SMP подразумевает UMA (иначе Symmetric не получится), так что не стоит цепляться к таким формулировкам.<br><br>&gt;Производительность системы SMP+UMA можно было бы поднять при использовании многобанковой памяти (большое <br>&gt;количество модулей памяти), если чипсет подобно Ethernet-коммутатору может одновременно рассылать запросы <br>&gt;в разные банки памяти. К сожалению, AFAIK, писюковые системы имеют общую <br>&gt;шину (адреса и данных) ко всем модулям памяти, что не позволяет <br>&gt;наращивать производительность подсистемы памяти. Впрочем, первый шаг в этом направлении сделан <br>&gt;- двухканальная память. <br>&gt;<br> Существуют Opteron-ы с TyperTransport - каждый лазит в свою память напрямую, но может залезать и к соседям (NUMA). Однако проблемы тут не снимаются до конца. Да и стоимость... Сравните 64-процессорный SuperDom и 64-процессорный кластер (любой).<br> https://www.opennet.ru/openforum/vsluhforumID3/13145.html#24 Thu, 29 Dec 2005 10:40:34 GMT &gt; SMP архитектура до 8 процессов, NUMA до сотни с небольшим.<br><br>Простите, но Вы путаете яркое со сладким.<br>Есть три вида многопроцессорности: SMP (симметричная), AsMP (асимметричная) и MPP (массово-параллельная).<br>Есть три вида доступа к памяти: UMA (униформенный), NUMA (неуниформенный) и NonMA (нет доступа к чужой памяти, как на кластерах).<br>Теоретически возможны все девять вариантов сочетаний; естественно, одни используются чаще, другие реже.<br><br>Если рассмотреть обычный современный "однопроцессорный" писюк, то в нём есть куча процессоров: на жёстком диске, на сетевой карте, на видеокарте и даже в клавиатуре. Взаимодействие процессоров: AsMP (хотя на видеокарте м.б. несколько процессоров, взаимодействующих между собой по схеме SMP или MPP). Распределение памяти - NonMA (центральный процессор не может обратиться к памяти на брюхе жёсткого диска, а процессор на брюхе жёсткого диска не может обратиться к DIMM'ам); исключение - видеокарта, там NUMA (для PCI - в одну сторону для обеспечения доступа процессора к https://www.opennet.ru/openforum/vsluhforumID3/13145.html#23 Thu, 29 Dec 2005 08:04:32 GMT Что Вы имеете ввиду под "настоящими большими машинами" ?<br>Вообще эти сравнения кластеров с "большими" крайне натянуто, Вы просто попробуйте представить как будет работать сотня процессоров в единой памяти ?<br>Ответ простой - очень плохо.<br>SMP архитектура до 8 процессов, NUMA до сотни с небольшим. Это все более менее распространненые решения. Numa дорогостоящая штука, и требует специального подхода в ПО, так как стоимость запроса к памяти другого процессора крайне высока (в разы если не в десятки раз), и это придется учитывать. Сколько по этому поводу грязи вылили производители тяжелых серверов друг на друга, отдельная тема. В любом случае, такие решения связаны с разработкой специализированных чипов..... не наш конек....<br> <br>Кластер сделать проще, есстественно что более слабая связь между узлами будет ограничивает круг задач, но это реальный числодробилки и могут решать реальные задачи, недосегаемые для "больших" серверов. Наличие большого количества клстерных систем в TOP500, говорит о востребованности HPC https://www.opennet.ru/openforum/vsluhforumID3/13145.html#22 Thu, 29 Dec 2005 07:49:53 GMT &gt;Кластер есть кластер, дешевая замена настоящим большим машинам А кластер на основе <br>&gt;Xeon 2.8 (Скиф) это оприходование бюджетных средств, потому как стоит не <br>&gt;намного дешевле ( в тех масштабах, которых реализуется ) тех самых <br>&gt;больших машин. <br><br> Например каких? Хочется, чтобы Вы сами цены сравнили на реальном примере...<br><br>&gt;Стоит много, а 32-битный, со всеми вытекающими ограничениями - вот те нате <br>&gt;... 128Гб памяти,а что с ними он может сделать? Вуществующие расширения <br>&gt;адресного пространства, при их активировании, сожрут добрую треть производительности... Вобщем вы <br>&gt;и так это знаете... <br><br> Сейчас СКИФ и на Opteron делают, внимательнее смотрите. А насчёт производительности - ну почитайте статью, там данные LINPACK есть. Потом будете про треть говорить... https://www.opennet.ru/openforum/vsluhforumID3/13145.html#18 Wed, 28 Dec 2005 14:43:36 GMT Кластер есть кластер, дешевая замена настоящим большим машинам. А кластер на основе Xeon 2.8 (Скиф) это оприходование бюджетных средств, потому как стоит не намного дешевле ( в тех масштабах, которых реализуется ) тех самых больших машин.<br>Стоит много, а 32-битный, со всеми вытекающими ограничениями - вот те нате ... 128Гб памяти,а что с ними он может сделать? Вуществующие расширения адресного пространства, при их активировании, сожрут добрую треть производительности... Вобщем вы и так это знаете... https://www.opennet.ru/openforum/vsluhforumID3/13145.html#17 Wed, 28 Dec 2005 12:46:45 GMT Спасибо, посмеялся :)<br><br>Как раз таки не стереотипы, а продуманный выбор.<br><br>Мы были в центрах и на заводах SUN, они в состоянии очень быстро выпустить<br>суперкомьютеры любой произодительности, были бы заказчики.<br><br>Причем из компонентов и систем, которые развивись в течение<br>многих лет реального производства и эксплуатации.<br><br>Открытая архитектура SPARC, совместимые FUJI и многое другое ...<br>Сотни работающих установок, тысячи исправленных ошибок,<br>миллионы накопленных практических ситуаций, миллиарды человеко-часов ...<br><br>Российское в сравнении с Западным<br>- это как сравнение ребенка и взрослого человека.<br><br>Ребенок оперирирует отдельными поверхностными максималисткими критериями,<br>взрослый оперирует более широкими, глубокими и целостными понятиями,<br>причем испытанными на опыте.<br><br>Любить родину можно по-разному, и чем меньше о этом говорят тем лучше любят. Слова ничего не значат, хуже того обычно ими прикрываются.<br><br>Мы усвоим все лучшее западное и потом только с этих позиций будем<br>смотреть на российское.<br> https://www.opennet.ru/openforum/vsluhforumID3/13145.html#15 Wed, 28 Dec 2005 09:54:33 GMT Начальник мой бывший.. работал я как раз в ЦИМС ИПС РАН... Мужик умный но лучше бы с разработчиками поговорили... С тем же Рогановым Володей, вот уж действительно для тезнарей бы дал более интересное интервью.