От sergе ts
К All
Дата 25.11.2009 14:55:32
Рубрики Современность; ВВС;

ВВС США покупают ещё 2200 игровых приставок PS3

к уже 336 имеющимся. Приставки будут использоватся для постоения кластеров (на Линуксе) - дешёвых суперкомпьютеров. Сейчас это модная тема - использование дешёевых графических карт в качестве векторных процессоров(GPGPU) и построение кластеров с их использованием. Плюс помимо графического главный процессор PS3 имеет мощную векторизацию "в железе"(в отличие от интела). Кластеры будут использоваться для обработки радарных изображений (хороший снимок из многих плохих с использованием фазы -synthetic aperture), обработки видео и посторения искуственных нейронных сетей.
Всё это к тому что "высокие технологии" сейчас всё больсэ используют бытовую технологичекую базу, и суперкомпьютеры может строить кто угодно, хоть из игровых приставок. Хотя тут стоимость квалифицированных специалистов больше стоимости железа. 2000 PS3 стоят примерно столькоже сколько год работы группы из 10 человек - специалистов по кластерам, обработке и тп.

http://games.slashdot.org/story/09/11/25/0527205/US-Air-Force-Buying-Another-2200-PS3s?art_pos=2
От Steven Steel
К sergе ts (25.11.2009 14:55:32)
Дата 26.11.2009 04:57:47

Давным-давно сообщали о покупку 4000 PS2 Ираком при Садаме для тех же целей.

Всегда думал, что история про покупку 4000 PS2 Ираком при Садаме это байка.
Ан нет! Оказывается, американцы тщательно разыскивают и реквизируют все PS2.
Фотография 2005 года.

http://www.defendamerica.mil/images/photos/jan2005/articles/ai011105d4.jpg


От Rwester
К Steven Steel (26.11.2009 04:57:47)
Дата 26.11.2009 06:44:55

если включить логику, то Ирану стоит погруснеть(-)
От Steven Steel
К Rwester (26.11.2009 06:44:55)
Дата 26.11.2009 07:15:22

Какая связь? (-)
От VVS
К sergе ts (25.11.2009 14:55:32)
Дата 25.11.2009 20:19:32

Re: ВВС США...

>к уже 336 имеющимся. Приставки будут использоватся для постоения кластеров (на Линуксе) - дешёвых суперкомпьютеров.

В реальности расставят приставки по их звездно-полосатым уголкам. Потому как замены не будет - новая версия PS3 Slim, уже везде продающаяся - БЕЗ линукса, только игры.
От Иван Уфимцев
К VVS (25.11.2009 20:19:32)
Дата 27.11.2009 02:05:14

Ещё как с линуксом. (-)
От Vold
К sergе ts (25.11.2009 14:55:32)
Дата 25.11.2009 17:00:02

Вести с полей

Наш ответ Чемберлену. Супер компьютер "Ломоносов"

http://www.lenta.ru/news/2009/11/25/comp1/

В Американском флоте тоже есть popilЪ

http://www.lenta.ru/news/2009/11/25/fake/

(или это в разряд "попила" не попадает?)
От Казанский
К sergе ts (25.11.2009 14:55:32)
Дата 25.11.2009 16:00:46

Re: ВВС США...

Не понятно,что процессоры сразу у производителя купить сложно,чем покупать игровые приставки?
От Ktulu
К Казанский (25.11.2009 16:00:46)
Дата 25.11.2009 16:05:14

И что с этим процессором после этого делать?

>Не понятно,что процессоры сразу у производителя купить сложно,чем покупать игровые приставки?

Свой компьютер ваять?
А так из обычной готовой PS3 получается узел кластера. Под готовой ОС (Linux). С готовым кластерным
софтом с поддержкой этого самого Cell.

--
Алексей
От Казанский
К Ktulu (25.11.2009 16:05:14)
Дата 25.11.2009 16:23:32

Re: И что...

>>Не понятно,что процессоры сразу у производителя купить сложно,чем покупать игровые приставки?
>
>Свой компьютер ваять?
>А так из обычной готовой PS3 получается узел кластера. Под готовой ОС (Linux). С готовым кластерным
>софтом с поддержкой этого самого Cell.

>--
>Алексей
 Я прочитал что этим занимается ВВС США,а собирать фермы это любительский уровень.Потому и удивился.
От Alexeich
К Казанский (25.11.2009 16:23:32)
Дата 25.11.2009 18:30:32

Re: И что...

> Я прочитал что этим занимается ВВС США,а собирать фермы это любительский уровень.Потому и удивился.

Да-да, помню годах эдак 90-х дружный, продолжительный, но не принесший удовлетворения никому из участников, включая представителей фирмы изготовителя, группенсекс со специализированным параллельным компьютером Maspar в University College Dublin :) А потом купили на грант EU 8 4-процессорных "альф", соединили Ethernet'om, поставили за пару недель свободное ПО для параллельных вычислений - и "счастье пришло в кишлак". Кстати, когда бы в том лабе в 2001 году, это старье все еще весело тарахтело. Вот атк практика посрамляет теорию :)
От nonr
К Казанский (25.11.2009 16:23:32)
Дата 25.11.2009 17:50:23

Re: И что...


>
>>--
>>Алексей
> Я прочитал что этим занимается ВВС США,а собирать фермы это любительский уровень.Потому и удивился.

Да врядли им нужны фермы. У них настоящие машины загружены на 30-40%, редко
50%. Это скорее всего проект какой-то относительно массовой считалки. А может
вообще будут использовать для какого-то виртуального тренажера с максимальным
использованием возможностей визуализации PS.
От Ktulu
К Казанский (25.11.2009 16:23:32)
Дата 25.11.2009 17:24:18

Re: И что...

> Я прочитал что этим занимается ВВС США,а собирать фермы это любительский уровень.Потому и удивился.

Так ВВС США и может заниматься этим только на любительском уровне, а на профессиональном -- специально обученные
специалисты коммерческих предприятий, за большие деньги, естественно. Ну а собрать кластер из готовых
узлов под готовый софт -- тут и специалисты ВВС справятся.

--
Алексей
От Antenna
К Ktulu (25.11.2009 16:05:14)
Дата 25.11.2009 16:19:29

Хотят Сони обанкротить.

У Сони основная прибыль сейчас идет с приставочного бизнеса.
Приставки, железки сами, продаются практически в убыток. Прибыль идет уже с продаж игр для приставки и с подписки на онлайн сервисы. Происки мелкомягких, не иначе.
От Слава Макаров
К Antenna (25.11.2009 16:19:29)
Дата 26.11.2009 15:29:44

Re: Хотят Сони...

>Приставки, железки сами, продаются практически в убыток.

Уже вышли в плюс.
От Ktulu
К Antenna (25.11.2009 16:19:29)
Дата 25.11.2009 17:21:51

Re: Хотят Сони...

>У Сони основная прибыль сейчас идет с приставочного бизнеса.
>Приставки, железки сами, продаются практически в убыток. Прибыль идет уже с продаж игр для приставки и с подписки на онлайн сервисы. Происки мелкомягких, не иначе.

Это справедливо только для первых пары-тройки лет цикла жизни приставки. Потом себестоимость резко
падает, и приставки начинают приносить прибыль. А в первые годы, да, и у Сони и у Майкрософт
само оборудование приносит одни убытки.

--
Алексей
От writer123
К sergе ts (25.11.2009 14:55:32)
Дата 25.11.2009 15:35:58

Re: ВВС США...

>Всё это к тому что "высокие технологии" сейчас всё больсэ используют бытовую технологичекую базу, и суперкомпьютеры может строить кто угодно, хоть из игровых приставок.
Дык проблема построения кластеров, особенно такого класса, сводится не столько к вопросу о собсно вычислительных единциах, сколько к вопросу их интеграции (как архитектурно так и технически), управления, мониторинга, жизнеобеспечения, софта и т.п. Кто владеет этим - тот владеет технологией высокопроизводительных вычислений.
Закупка плэйстейшн под это - попил как он есть, поделка уровня самых убогих наших ВЦ (есть тоже умельцы в той же РАН, собирающие кластера из бытовых компов в обычных дешёвых корпусах, составленных на полочки). Купили бы нормальные блэйды и стойки под них - был бы другой разговор...
Само же железо, пригодное для построения кластеров, вполне доступно и достаточно стандартно. Только без софта это - гора недешёвого мусора.
От Андрей Белов
К writer123 (25.11.2009 15:35:58)
Дата 27.11.2009 10:43:40

+1

>Дык проблема построения кластеров, особенно такого класса, сводится не столько к вопросу о собсно вычислительных единциах, сколько к вопросу их интеграции (как архитектурно так и технически), управления, мониторинга, жизнеобеспечения, софта и т.п. Кто владеет этим - тот владеет технологией высокопроизводительных вычислений.
>Закупка плэйстейшн под это - попил как он есть, поделка уровня самых убогих наших ВЦ (есть тоже умельцы в той же РАН, собирающие кластера из бытовых компов в обычных дешёвых корпусах, составленных на полочки). Купили бы нормальные блэйды и стойки под них - был бы другой разговор...
>Само же железо, пригодное для построения кластеров, вполне доступно и достаточно стандартно. Только без софта это - гора недешёвого мусора.


Кластеры на видеокартах- скорее НИОКр чем нормальная работа.
Все очень сырое еще и надо ковырять.
Если блейды (Red Hat от IBM) , ROcks овские кластеры вполне поднимаемы и на Ethernete и на Myrinete
То с видеокартами - темный
От Андрей Белов
К Андрей Белов (27.11.2009 10:43:40)
Дата 27.11.2009 10:47:19

.. продолжение

лес ...

Пройдет лет так пять после того как оно будет работать .
От Дмитрий Ховратович
К writer123 (25.11.2009 15:35:58)
Дата 26.11.2009 14:16:07

Вообще-то Playstation в качестве кластера достаточно активно используется

Во всяких там открытых проектах, в том числе университетских.
От writer123
К Дмитрий Ховратович (26.11.2009 14:16:07)
Дата 26.11.2009 20:51:09

Re: Вообще-то Playstation...

>Во всяких там открытых проектах, в том числе университетских.
Угу, университетских, но не военных.
В РФ в университеты, кстати, всё же кластеры из блэйдов предпочитают брать.
От Дмитрий Ховратович
К writer123 (26.11.2009 20:51:09)
Дата 26.11.2009 22:33:47

Может, им некритично

>Угу, университетских, но не военных.

Или опыт есть.

>В РФ в университеты, кстати, всё же кластеры из блэйдов предпочитают брать.

Думаю, речь идет о локальном кластере.
От Иван Уфимцев
К Дмитрий Ховратович (26.11.2009 22:33:47)
Дата 27.11.2009 02:03:06

Скорее потренироваться на кошках.

Доброго времени суток.

>Думаю, речь идет о локальном кластере.

см. сабж.
Полноценный HPC-кластер минимум на порядок больше. Там и с нормальными блейдами можно начать заморачиваться. А пока то да сё, покрутиться на игрушечном, оценить задачу (может, дальше не понадобится ничего делать), подготовить софт. А потом, если понравится, можно и "переехать".

--
CU, Ivan
От Д2009
К Дмитрий Ховратович (26.11.2009 14:16:07)
Дата 26.11.2009 17:32:26

Re: Вообще-то Playstation...

>Во всяких там открытых проектах, в том числе университетских.

http://www.3dnews.ru/cpu/cell/print/

"Что же значат его слова? Cell может работать не только в качестве, собственно, процессора, но и в качестве элемента большой системы. Путём объединения различной техники, содержащей чипы Cell, можно построить единую сеть, которая будет функционировать, как одно "устройство"".
От sergе ts
К writer123 (25.11.2009 15:35:58)
Дата 25.11.2009 15:57:25

У блэйдов нет графических карт и векторных сопроцессоров, на то они и блэйды

Как я уше сказал фишка здесь в двойной векторизации - за счёт GPU и сопроцессоров самого Cell. Можно конечно строить GPGPU кластер на NVIDIA CUDA но это и дороже и менее технологично.
От Грозный
К sergе ts (25.11.2009 15:57:25)
Дата 26.11.2009 08:31:47

блэйды разные бывают

В т.ч. есть блэйды и с Теслой (уже есть), и с Ферми (скоро будут). Для Ферми сделали DVI-порт, специально по заявкам. Для сборки в кластера GPGPU частоты занижают, плюс сделали ECC и производительность арифметики плавающих с двойной точностью подняли в 10 раз.

1U на Тесле: http://www.nvidia.com/object/product_tesla_s1070_us.html

===> dic duc fac <===
От writer123
К sergе ts (25.11.2009 15:57:25)
Дата 25.11.2009 17:03:34

Re: У блэйдов...

>Можно конечно строить GPGPU кластер на NVIDIA CUDA но это и дороже и менее технологично.
Не только можно, но и нужно, придумать что-то менее технологичное чем кластер из игровых приставок вообще сложно.
От Ktulu
К writer123 (25.11.2009 17:03:34)
Дата 25.11.2009 17:16:54

Наоборот

>>Можно конечно строить GPGPU кластер на NVIDIA CUDA но это и дороже и менее технологично.
>Не только можно, но и нужно, придумать что-то менее технологичное чем кластер из игровых приставок вообще сложно.

Ввиду приставочной специфики (одна и та же абсолютно совместимая модель выпускается 10 лет)
приставки больше подходят в качестве узлов кластера. Только залить готовый образ на жёсткий диск -- и всё работает.
А в PC оборудовании раз в полгода появляется новая модель, обратная совместимость соблюдается
не всегда и т.п.

--
Алексей
От writer123
К Ktulu (25.11.2009 17:16:54)
Дата 25.11.2009 22:56:43

Re: Наоборот

>Ввиду приставочной специфики (одна и та же абсолютно совместимая модель выпускается 10 лет)
>приставки больше подходят в качестве узлов кластера. Только залить готовый образ на жёсткий диск -- и всё работает.
Как вы собираетесь этот зоопарк охлаждать, мониторить, обслуживать и т.п.?

>А в PC оборудовании раз в полгода появляется новая модель, обратная совместимость соблюдается
>не всегда и т.п.
Если говорить о малых кластерах, то там используются вполне стандартизированные варианты интерфейсов для интерконнекта, вплоть до обычного гигабитного ethernet'а. И какие пробелмы с совместимостью чего-либо вы здесь ожидаете? Архитектурно сами узлы были, есть и будут одинаковы в рамках используемой платформы.
Ну видеокарточное направление это отдельная тема, оно молодое очень ещё. Но и тут совместимость на примере обычных писюков очень даже обеспечивается и более того - на её обеспечение между поколениями карточек затрачиваются немалые силы.
От nonr
К sergе ts (25.11.2009 14:55:32)
Дата 25.11.2009 15:10:18

Re: ВВС США...

>к уже 336 имеющимся. Приставки будут использоватся для постоения кластеров (на Линуксе) - дешёвых суперкомпьютеров. Сейчас это модная тема - использование дешёевых графических карт в качестве векторных процессоров(GPGPU) и построение кластеров с их использованием. Плюс помимо графического главный процессор PS3 имеет мощную векторизацию "в железе"(в отличие от интела). Кластеры будут использоваться для обработки радарных изображений (хороший снимок из многих плохих с использованием фазы -synthetic aperture), обработки видео и посторения искуственных нейронных сетей.


"Дешевых суперкомпьютеров" не бывает по определению. Либо они дорогие,
но обслуживаются 1-2 людьми. Либо они дешевые, но нужна толпа обезъян
для их обслуживания.
Вполне возможно у них есть какой-то типовой проект считалки на PS-ах,
которую они хотят размножить. Но супер на ней собирать -- самоубийство
для персонала.
А желающим начать обсуждение темы для начала предлагаю подумать
о процедуре включения-выключения (и ее надежности) 2000+ корпусов
PS, поиске сбойной PS (допустим память), и процедуре настройки биос на
узлах т.е. PS.
От sergе ts
К nonr (25.11.2009 15:10:18)
Дата 25.11.2009 16:03:05

Я не думау что это будет один кластер на 2000

Скорее 20 кластеров на 100
От AFirsov
К nonr (25.11.2009 15:10:18)
Дата 25.11.2009 15:37:49

Вы думаете у Крейя лет ...цать назад надежность была выше?

Вообще там технология давно отработано. Несколько лет назад
на обычных писишках со скоростной сеткой американцы уже
демонстрировали вскрытие кодов высокой стойкости :-)
От nonr
К AFirsov (25.11.2009 15:37:49)
Дата 25.11.2009 16:59:15

Re: Вы думаете...

смотря у какого Крея. Их было целое семейство. У параллельных
Cray T3D/E с диагностикой узлов все было в порядке.

>Вообще там технология давно отработано.

Вот беда, а мужики то и не знали....

>Несколько лет назад на обычных писишках со скоростной сеткой американцы уже
>демонстрировали вскрытие кодов высокой стойкости :-)

Вы просто немного не в теме. Вскрытие кода высокой стойкости
путем тупого/интеллектуального перебора ключей относится к весьма
специфичному виду параллельных задач. В них взаимодействие между
параллельными кусками кода либо вообще отсутствует, либо сведено
к минимуму. Далеко не все задачи сводятся к постановкам в которых
не нужно вообще никакой синхронизации. Увы.
От Alexeich
К AFirsov (25.11.2009 15:37:49)
Дата 25.11.2009 16:19:45

Re: Вы думаете...

>Вообще там технология давно отработано. Несколько лет назад
>на обычных писишках со скоростной сеткой американцы уже
>демонстрировали вскрытие кодов высокой стойкости :-)

Вы путаете, вскрытие кода было произведено в системе распределенных вычислений, а не на кластере - это совсем другое дело.
От Ktulu
К Alexeich (25.11.2009 16:19:45)
Дата 25.11.2009 17:11:45

Re: Вы думаете...

>>Вообще там технология давно отработано. Несколько лет назад
>>на обычных писишках со скоростной сеткой американцы уже
>>демонстрировали вскрытие кодов высокой стойкости :-)
>
>Вы путаете, вскрытие кода было произведено в системе распределенных вычислений, а не на кластере - это совсем другое дело.

Кластер -- тоже система распределённых вычислений. Отличается только скоростью обмена данными между узлами
(как правило на несколько порядков выше по сравнению с Интернет-системами).

--
Алексей
От Alexeich
К Ktulu (25.11.2009 17:11:45)
Дата 25.11.2009 18:23:49

Re: Вы думаете...

>Кластер -- тоже система распределённых вычислений. Отличается только скоростью обмена данными между узлами
>(как правило на несколько порядков выше по сравнению с Интернет-системами).

Вот тут по сути ответ.

https://www.vif2ne.org/nvk/forum/0/co/1920870.htm

Вы сами отметили разницу - если в задаче критична скорость обмена между узлами - система распределенныз вычислений не пригода.
От AFirsov
К Ktulu (25.11.2009 17:11:45)
Дата 25.11.2009 17:41:04

Re: Вы думаете...


>Кластер -- тоже система распределённых вычислений. Отличается только скоростью обмена данными между узлами
>(как правило на несколько порядков выше по сравнению с Интернет-системами).

Угу. Сколько я помню ключевыми словами того проекта были: "терабайтная сеть",
сотни компьютеров, Lunix, спецматобеспечение для векторных вычислений...

Многие из них совпадают с корневым сообщением...
От Ktulu
К AFirsov (25.11.2009 15:37:49)
Дата 25.11.2009 15:58:58

Не высокой стойкости, а обычный DES (-)
От И. Кошкин
К nonr (25.11.2009 15:10:18)
Дата 25.11.2009 15:17:08

"ну тупы-ы-е!" (-)
От Иван Уфимцев
К И. Кошкин (25.11.2009 15:17:08)
Дата 27.11.2009 01:59:04

Да. Тупые.

Доброго времени суток.

Вот только кто-то (не юудем тыкать пальцами) видимо не подозревает, шо PS3, включая обновлённую (slim, или как там её) и наиболее интересную (без допю медиа-процессора) продаётся по себестоимости, если не дешевле. И не наблюдал, к примеру, процесс превращения ящика юзверьских модемов в пару 19" ящиков (процесс "лущенья устриц" выглядит весьма забавно со стороны). Если оную приставку взять по правильной цене (не более $200), то получается весьма и весьма интересный много функциональный полуфабрикат.

Вот если бы они собирали действительно полноценный кластер, то имело бы смысл делать это не на игрушках, а как положено. Причинем к носу. В один четырёхвершковый 19" ящик влазит десяток бутербродов (да, бутерброды пока не в моде, но уже пару лет производятся серийно). Каждый бутерброд состоит из двух плат, на каждой 2 (два) или 4 (четыре) процессора. Ладно, ограничимся двумя. Для простоты примем шо в одной 42-вершковой стойке находится 8 (восемь) вышеупомянутых ящиков полезной нагрузки. Итого: 8*20*2=320. Считаем дальше. Допустим, в ангаре 10 рядов по 20 стоек в каждом (более мелких датацентров лично я не видел, это скорее даже на гараж похоже). Итого получаем всего лишь 200 стоек по 320 процессоров в каждой. 64к процессоров и 32к материнских плат, вполне укладывается в спецзаказ фоксконю или DFI.

--
CU, Ivan
От Иван Уфимцев
К И. Кошкин (25.11.2009 15:17:08)
Дата 27.11.2009 01:39:46

Да. (-)