1 Sun Modular Datacenter S20 Он же Project Blackbox Павел Анни Директор по маркетингу Sun Microsystems Russia & CIS

2 Актуальные вопросы для ЦОД Где взять электричество? Сколько платить за помещение? Как охлаждать? Сколько времени на постройку ВЦ? Как расширяться? Где разместить резервный центр данных? Как развиваться в регионах?

3 Помещение, охлаждение и электропитание Офисные площади в Москве: $ /кв.м/год Складские площади в Москве: $ /кв.м/год Что делать, если системы охлаждения не было в проекте здания? Как устанавливать оборудование? > краном через окно 7-го этажа? > через пролом в стене? > какова высота кабины лифта в вашем офисе? > насколько узкие лестницы в подвал? источник: arendator.ru > Потери энергии при передаче от электростанции к вычислительному центру – 35-85% > Важна уже не стоимость, а доступность электроэнергии

4 Знакомо?

ЧТО ДЕЛАТЬ?

А что, если взять контейнер... 8 стандартных монтажных шкафов, по 25 кВт каждый Эффективная система охлаждения 305 RU на 15 кв.м. Можно ставить разное оборудование Можно собрать на заводе Можно внедрить на месте

Sun Modular Datacenter S20 Виртуализированный Вычислительный Центр

Быстрое и легкое введение в эксплуатацию Высокая вычислительная плотность на 15 кв.м. До 500 CPU, до 2000 ядер либо до потоков Гибкость и разнообразность использования Высокоэффективное решение с точки зрения экономии, масштабирования, плотности вычисления и экологии Быстрое и легкое введение в эксплуатацию Высокая вычислительная плотность на 15 кв.м. До 500 CPU, до 2000 ядер либо до потоков Гибкость и разнообразность использования Высокоэффективное решение с точки зрения экономии, масштабирования, плотности вычисления и экологии Computer + Storage + Network + Power + Cooling + Software = Sun MD

Быстрое внедрение В 10 раз меньше времени на внедрение по сравнению с обычным ВЦ Модульное решение > Стандартный форм-фактор > 20-футовый контейнер > Легко транспортируемый > Корабль, самолет, грузовик > Легко подключается к источникам энергии, холодной воды, телекоммуникациям Собрано однажды, работает везде

Развитие Вычислительного Центра Year 3 Появление площади в рамках здания Появление площади в рамках здания Использование Sun MD Data Processing Power Year 6Year 9 Избыток площади Площадь ЦОД Достаточная площадь Недостаток площади Year 0

Что такое Sun MD? Sun MD это масштабируемое решение по построению ЦОД в рамках стандартного контейнера 6м х 2.5м Основные особенности: > восемь19 стоек, около 300 rack units в рамках 15 кв.м. > Кастомизируемое построение – возможность использования продуктов других производителей > Возможность подавать питание и отводить тепло до 25 кВт на одну стойку, благодаря водяному охлаждению

Sun Proprietary/Confidential: Internal Use Only 12 Совместимость оборудования Любое оборудование от Sun или 3 их производителей, которое удовлетворяет условиям: > Входит в стандартную 19 стойку > 30 ¾ = 78 см глубина (включая кабели) > Front to back-охлаждение Sun MD может быть модернизирован > Опции контейнера включают уровни, сейсмодатчики и пр.

Охлаждение Потоки холодного воздуха циркулируют внутри Sun MD Стойки установлены в затылок друг другу Вентиляторы и радиаторы установлены для каждой стойки Computer Rack Heat Exchanger Gas Flow Computer Rack Радиатор Air Flow Модуль вентиляторов Стойка Front Back Радиатор охлаждения

14 Эффективность охлаждения Экономия – порядка 40% Sun Modular Datacenter Traditional Datacenter Охлаждение.65W*.38W ** Оборудование 1W > 40% экономия * Cooling load estimate from Lawrence Berkeley Labs & PG&E Datacenter Efficiency Report June **Sun Modular Datacenter cooling load data derived per Sun benchmark testing Обычный ВЦ

Sun Proprietary/Confidential: Internal Use Only 15 Водяное охлаждение (чиллер) Размеры чиллера зависят от потребляемой мощности и тепловыделения > Типичная конфигурация потребляет не более 100kW (~340K BTUs), что требут 30-тонного чиллера > Чиллеры можно ставить с запасом и наращивать в дальнейшем 30-тонный чиллер (расширяемый до 60 т) с баком на 305 галлонов (Menlo Park, CA)

Стойки и доступ к оборудованию Обслуживание производится в центральном проходе Все коммуникации и каблирование – по потолку

Используемые стойки Восемь 40RU стоек, 495 mm W x 781 mm > Семь стоек для ИТ-оборудования (servers, storage, etc.) > Одна (наполовину) – для сетевого оборудования и оборудования контроля Тележка для обслуживания Амортизирующее основание Racks lock to floor for transportation

Sun Proprietary/Confidential: Internal Use Only 18 Запуск Требования к месту > Электрика: стандартные международные параметры: > 208VAC, 380VAC, и т.д. > Охлаждение: водяное > температура входа 13º C > Сеть: стандартные > Ethernet, FС, iSCSI, InfiniBand. > Место: ровная площадка > минимум > 9.5м x 4.5м Внутри или снаружи > обычно: > Складское помещение > Охраняемая огороженная зона

Sun Proprietary/Confidential: Internal Use Only 19 Физические параметры Контейнер ISO-стандарта > 6.09м x 2.43м x 2.59м (Д x Ш x В) > Внутренние технологические элементы и изоляция > Встроенные кабельные каналы и внутреннее освещение; внешие разъемы для сети, охлаждения и питания ~ 9,000 кг в полной комплектации 8 стоек (по 4 в 2 ряда) > Доступ через проход в центре Двери спереди и сзади > Задняя дверь – для доступа к электрощитам и пр.

Sun MD

21 Sun Fire X2200 M2 Servers Cisco Catalyst 6509 NEBS Switches Cisco Catalyst Switches Digi EtherLite 32 Terminal Switches Quantity RU per Total RU Sun MD Configuration Example High Performance Computing Solution 2.5 TFlop performance on Linpack (HPL) with GbE interconnect * Additional examples in the appendix

22 Sun MD Configurations Web-scale computing solution Sun Fire T5120 Servers Sun StorEdge 3510 Dual Raid Arrays Sun StorEdge 3510 JBOD Arrays Brocade Silkworm 4100 Switches Cisco Catalyst 6509 NEBs Switches Quantity RU per Total RU >450,000 web operations per second

23 Sun Fire X4500 Servers Cisco Catalyst 4948 Switches Cisco Catalyst Switches Quantity 6373 RU per 411 Total RU Sun MD Configurations 3 Petabyte data warehouse solution >100 GB/s bandwidth

24 Sun Fire E2900 Servers Sun Fire V490 Servers Sun Fire V245 Servers Cisco Catalyst Switches Quantity RU per Total RU Sun MD Configurations CRM solution (with fiber connection to external disk farm)

Первое внедрение в мире: компания МТС Дефицит площадей в помещении Дефицит разведенного электропитания Дефицит времени 22 дня от получения контейнера до запуска

27 Sun Modular Datacenter S20 Он же Project Blackbox Павел Анни