Создание ЦОД - ответы на основные вопросы CIO/CEO/инвестора - или немного о том, как стать для своего Заказчика Trusted Advisorом Алексей Солодовников, директор по развитию бизнеса
© 2004 APC corporation. ISX = Datacenter?? Или ?? Современная классификация (Tiering Concept) инженерных систем ЦОД Ресурсы, требуемые при строительстве ЦОД Деньги Время Площади... Какие интегральные характеристики инженерной инфраструктуры получает Заказчик в зависимости от вложенных средств? Бесперебойное охлаждение (uninterruptible cooling) Стандарт ANSI 942 Программа доклада
© 2004 APC corporation. Датацентр vs. ISX solution Электропитание ISX = STS + UPS + UPS PDU + Power Whips + RM PDUs + rack- level ATS Datacenter: (all the above) + ДГУ + (АВРы + РЩ/ГРЩ = ВРУ ) + кабельная продукция, шинопроводы Прецизионное кондиционирование ISX = APC CRAC/CRAH + CDU Datacenter: (all the above) + piping + valves + pumps + chillers + water tanks + dry/wet coolers + coolants + water preparation/treatment… Стойки для размещения оборудования Газовое пожаротушение Дымоудаление + приточно-вытяжная вентиляция CCTV (видеонаблюдение) Access control (контроль доступа)
© 2004 APC corporation. Датацентр vs. ISX solution - 2 Общая система управления объектом (aka инженерная диспетчеризация, она же «интеллектуальное здание» и т.п.) – ISX Manager Фальшпол, фальшпотолок, стены Выбор/строительство и подготовка площадки: обеспечение необходимой энергетики, анализ прочности здания, общестроительные работы Проектирование: выбор, сопряжение, размещение оборудования Проектная/исполнительная документация в соответствии с ГОСТами/ЕСКД Монтаж Испытания основного оборудования под нагрузкой Пуск объекта в эксплуатацию, согласования и разрешения (Энергонадзор, пожарники, СЭС, Архитектура, Связьнадзор....) Обслуживание
© 2004 APC corporation. Датацентр vs. ISX solution - резюме Электропитание ISX = STS + UPS + UPS PDU + Power Whips + RM PDUs + rack-level ATS Datacenter: (all the above) + ДГУ + (АВРы + РЩ/ГРЩ = ВРУ ) + кабельная продукция, шинопроводы Прецизионное кондиционирование ISX = APC CRAC/CRAH + CDU Datacenter: (all the above) + piping + valves + pumps + chillers + water tanks + dry/wet coolers + coolants + water preparation/treatment… Стойки для размещения оборудования СКС (структурированная кабельная система) Газовое пожаротушение Дымоудаление + приточно-вытяжная вентиляция CCTV (видеонаблюдение) Access control (контроль доступа) Общая система управления объектом (aka инженерная диспетчеризация, она же «интеллектуальное здание» и т.п.) – ISX manager Фальшпол, фальшпотолок, стены Выбор/строительство и подготовка площадки: обеспечение необходимой энергетики, анализ прочности здания, общестроительные работы Проектирование: выбор, сопряжение, размещение оборудования Проектная/исполнительная документация в соответствии с ГОСТами/ЕСКД Монтаж Испытания основного оборудования под нагрузкой Пуск объекта в эксплуатацию, согласования и разрешения (Энергонадзор, пожарники, СЭС, Архитектура, Связьнадзор....) Обслуживание
© 2004 APC corporation. Выводы ISX ЦОД ! ISX solution end-user price средствам, которые должен потратить Заказчик на создание ЦОДа Если мы хотим быть в глазах Заказчика Trusted Advisorом, мы должны быть способны хотя понимать (не обязательно = уметь решать!!) весь комплекс инженерных систем, задач и мероприятий при создании ЦОД
© 2004 APC corporation. Три основных вопроса ЛПР Деньги? Время? А как все это построить? Какими должны быть технологии?? И какие характеристики площадки важны для решения бизнес-задач?..
© 2004 APC corporation. Реальная история из жизни...
© 2004 APC corporation. Классификация датацентров по функциональности инженерных систем Приводится с любезного разрешения Uptime Institute, Inc. ©
© 2004 APC corporation. ДГУ N ВРУ/ГРЩ РЩ ИБП ИБП N Нагрузка Кондиционирование Устройство системы электроснабжения – 1й уровень
© 2004 APC corporation. Устройство системы электроснабжения – 2й уровень
© 2004 APC corporation. Устройство системы электроснабжения – 3й уровень
© 2004 APC corporation. Устройство системы электроснабжения – 4й уровень
© 2004 APC corporation. Время, деньги, а также прочие основные характеристики, или
© 2004 APC corporation. Табличка Для Инвестора: Приводится с любезного разрешения Uptime Institute, Inc. ©
© 2004 APC corporation.
~=5кВт/стойку =75…90 см
© 2004 APC corporation.
Классификация датацентров по функциональности инженерных систем Приводится с любезного разрешения Uptime Institute, Inc. ©
© 2004 APC corporation.
ВАЖНО: это – статистические данные. > 20 площадок, несколько лет наблюдений. Итоговые показатели – СРЕДНИЕ по группе площадок (варьируются относительно средних для каждой конкретной площадки)
© 2004 APC corporation.
Назначение различных площадок на сегодня Tier I. Средний и малый бизнес, где ИТ обслуживают в первую очередь внутренние процессы компании; Компании, использующие интернет-сайт в качестве пассивного маркетингового средства; Интернет-ориентированный бизнес на начальном этапе развития, при отсутствии серьезных штрафов за качество предоставляемого сервиса. Tier II. Tier III. Tier IV.
© 2004 APC corporation. Назначение различных площадок на сегодня Tier I. Tier II. компании, работающие в интернет-бизнесе, не связанном с серьезными штрафами за качество предоставляемого сервиса; мелкий бизнес, чьи требования к ИТ системам обычно ограничены рамками работоспособности на протяжении нормального рабочего времени («5Х8»), и когда есть возможность производить плановую остановку ИТ систем для проведения регламентных работ; коммерческие фирмы, работающие, например, в области разработки ПО, которые, как правило, не предоставляют каких-либо услуг в режиме «он-лайн». Tier III. Tier IV.
© 2004 APC corporation. Назначение различных площадок на сегодня Tier I. Tier II. Tier III. Компании, обслуживающие как внутренних, так и внешних заказчиков в режиме «7Х24», например, сервис-центры, call-центры, имеющие возможность запланировать кратковременные промежутки, в течение которых сервис доступен в ограниченном режиме; Компании, чьи ИТ-системы поддерживают автоматизированные бизнес-процессы, так, что простой ИТ-систем имеет заметное влияние на бизнес; Компании, чьи сотрудники и заказчики находятся в многочисленных часовых поясах и регионах. Tier IV.
© 2004 APC corporation. Назначение различных площадок на сегодня Tier I. Tier II. Tier III. Tier IV. Компании с присутствием на международных рынках, предоставляющие свои услуги в режиме 24х365 в высококонкурентном рыночном окружении; Компании, занимающиеся е-коммерцией, финансовыми транзакциями; Крупные глобальные компании, чьи сотрудники и заказчики находятся в многочисленных часовых поясах и регионах, и их доступ к ИТ-ресурсам дает заметное конкурентное преимущество.
© 2004 APC corporation. Прогрев машзала при остановке системы охлаждения Длительность теста, мин. Температура воздуха на входе в стойки, °С ~ 2 кВт/стойку ~ 1 кВт/стойку
© 2004 APC corporation.
Бесперебойное охлаждение l Применяется в зависимости от термонагруженности стоек и объема воздуха в расчете на 1 стойку l Class A – вентиляторы кондиционеров машзала и циркуляционные водяные насосы питаются от ИБП; наличие гидроаккумулятора в водяной петле l Class B – электроснабжение вентиляторов кондиционеров от ИБП l Class C – традиционное электроснабжение системы охлаждения от гарантированного электропитания (с перебоем на время запуска дизеля и перезапуска системы охлаждения) l Обеспечивает адекватную сегодняшней энергететической плотности бесперебойную работу обеих основных инженерных систем ЦОДа
© 2004 APC corporation. 365main.com LA: 12,300 кв.м./7,000 кв.м. машзал Проект Tier III/IV (N+1+, redundant distribution) ~2.8 кВт/стойку, 60 см фальшпол 1,030 $/кв. фут машзала - ср. с $900/$1,100 для Tier III/IV у Uptime Institute
© 2004 APC corporation. 365main.com SF: 21,000 кв.м./14,000 кв.м. машзал Проект Tier II/III (N+2+, non-redundant distribution) ~2.5 кВт/стойку, 60 см фальшпол 1,300 $/кв. фут машзала - ср. с $900/$1,100 для Tier III/IV у Uptime Institute (California!)
© 2004 APC corporation.
А как это все работает у нас?.. 2 истории из жизни
© 2004 APC corporation. М-1, Москва, Варшавское ш., 125 2,000 кв.м. машзала Tier II, судя по описанию $15M инвестиций $7,500 за кв.м. – ср. с $6,500 для Tier II у Uptime Institute
© 2004 APC corporation. Выводы Работает! В том числе и у нас! Даны оценки в нулевом приближении до ±30%; Uptime Institute дает сегодня более точные методики: $/кв.м. + $/кВт (± %) Можно, имея посчитанный проект для Tier A, с большой точностью оценить создание площадки по Tier B, C, D Остерегайтесь чересчур заманчивых предложений!
О стандартах, описывающих создание ЦОД
© 2004 APC corporation. ANSI/TIA Не считая телекоммуникаций, свыше 200 (!) параметров инженерных систем ЦОД, в разбивке на 4 уровня (tiers): Архитектурные Электроснабжение Кондиционирование (mechanical) Прочее: контроль доступа, видеонаблюдение, и т.д и т.п