Консолидация серверов: видение Data Centre Advisory Council (DCAC) и инициативы Microsoft Владимир Бахметьев специалист по системной архитектуре, MCSE, МСТ Microsoft Corporation

Содержание DCAC и наши проблемы DCAC и наши проблемы Видение «нового» мира и дорога в него Видение «нового» мира и дорога в него Консолидация как процесс Консолидация как процесс Опора на решения Microsoft System Architecture Опора на решения Microsoft System Architecture Масштабируемость и надёжность Windows Масштабируемость и надёжность Windows Реальные примеры консолидации Реальные примеры консолидации

Data Centre Advisory Council (DCAC) DCAC – форум, имеющий постоянное взаимодействие с Microsoft в Европе и США по управлению Windows- инфраструктурами DCAC – форум, имеющий постоянное взаимодействие с Microsoft в Европе и США по управлению Windows- инфраструктурами Опираясь на реальный опыт крупнейших инсталляций Windows-систем, члены DCAC показали необходимость создания руководства по консолидации серверов Опираясь на реальный опыт крупнейших инсталляций Windows-систем, члены DCAC показали необходимость создания руководства по консолидации серверов Microsoft, в свою очередь, с уважением принимает накопленную крупными корпорациями экспертизу, и предоставляет её со своими комментариями и дополнениями широкому кругу клиентов Microsoft, в свою очередь, с уважением принимает накопленную крупными корпорациями экспертизу, и предоставляет её со своими комментариями и дополнениями широкому кругу клиентов

А что у нас «не так»? У меня в семь раз больше серверов, чем два года назад и каждое прикосновение к ним стоит времени и денег. (CIO, Pharmaceuticals)У меня в семь раз больше серверов, чем два года назад и каждое прикосновение к ним стоит времени и денег. (CIO, Pharmaceuticals) Содержать людей, обученных всем платформам на свете слишком дорого. (CFO, Manufacturing)Содержать людей, обученных всем платформам на свете слишком дорого. (CFO, Manufacturing) В филиалах, которые мы не можем централизовать, нам требуется лучшая стратегия управления имеющимися ресурсами. (CIO, Fin. Services)В филиалах, которые мы не можем централизовать, нам требуется лучшая стратегия управления имеющимися ресурсами. (CIO, Fin. Services) 30% компаний из списка Global 2000 уже начали консолидацию серверов и хранилищ данных, другие 40% планируют консолидацию на ближайшие 5 лет Meta Research (Gartner) 2001 Слишком дорого эксплуатировать большое и растущее количество различных серверов (CFO) Слишком дорого эксплуатировать большое и растущее количество различных серверов (CFO) Развёртывание новых приложений на существующей инфраструктуре занимает слишком много времени (IT Director)Развёртывание новых приложений на существующей инфраструктуре занимает слишком много времени (IT Director) Требуются слишком большие усилия для установки обновлений на все серверы, которые при этом имеют различные версии ОС (IT Director)Требуются слишком большие усилия для установки обновлений на все серверы, которые при этом имеют различные версии ОС (IT Director)

Как мы к этому пришли? Сервер легко умещается под столом !!! Сервер легко умещается под столом !!! Объявление. Прежде чем полить цветок, снимите горшок с сервера !!!! Объявление. Прежде чем полить цветок, снимите горшок с сервера !!!! Нет никаких правил, кто мне может это запретить? Нет никаких правил, кто мне может это запретить? Как же просто я добираюсь до оборудования и ПО! Как же просто я добираюсь до оборудования и ПО! А, это был WEB-сервер Зато чайник смогли включить! А, это был WEB-сервер Зато чайник смогли включить! Что-то жарковато у нас в комнате … Что-то жарковато у нас в комнате … А мой «любимый продукт» - другой! А мой «любимый продукт» - другой! Мой сын лучше знает, с чем мне работать Мой сын лучше знает, с чем мне работать Мне нужен новый домен Windows NT 4.0 для каждого нового сегмента сети Мне нужен новый домен Windows NT 4.0 для каждого нового сегмента сети Оборудование опять не справляется !!! Оборудование опять не справляется !!! Какие еще лицензии ????? Какие еще лицензии ????? Добавьте сюда Ваши любимые причины… Добавьте сюда Ваши любимые причины…

Каков же «новый» мир? Стандарты! Минимизация количества производителей там, где это возможно Минимизация количества производителей там, где это возможно Минимизация перечня используемых моделей, использование «корпоративных» моделей Минимизация перечня используемых моделей, использование «корпоративных» моделей Стандартные конфигурации оборудования и ПО Стандартные конфигурации оборудования и ПО Использование технологии APF (Automatic Provisioning Framework) и Microsoft SMS для быстрого разворачивания/ переустановки/ замены серверов Использование технологии APF (Automatic Provisioning Framework) и Microsoft SMS для быстрого разворачивания/ переустановки/ замены серверов Опора на технологии, предусматривающие возможность консолидации: SAN, быстродействующие серверы и сетевые устройства большой ёмкости Опора на технологии, предусматривающие возможность консолидации: SAN, быстродействующие серверы и сетевые устройства большой ёмкости Создание политик, предотвращающих внедрение избыточного количества серверов Создание политик, предотвращающих внедрение избыточного количества серверов

Бизнес-факторы, требующие перемен Снижение затрат Снижение затрат Снижение проблем при эксплуатации больших серверных «ферм» Снижение проблем при эксплуатации больших серверных «ферм» Оптимизация использования физических и человеческих ресурсов Оптимизация использования физических и человеческих ресурсов Увеличение гибкости бизнеса и его способности отвечать внешним требованиям Увеличение гибкости бизнеса и его способности отвечать внешним требованиям

IT-факторы «ЗА» Снижение сложности непрерывно растущей инфраструктуры Снижение сложности непрерывно растущей инфраструктуры Максимизация надёжности и доступности систем Максимизация надёжности и доступности систем Нехватка высокопрофессиональных всесторонне обученных IT-специалистов Нехватка высокопрофессиональных всесторонне обученных IT-специалистов Слишком много «тонких мест», ведущих к ошибкам, особенно в области безопасности Слишком много «тонких мест», ведущих к ошибкам, особенно в области безопасности

Консолидация, как ответ на требования… Централизованное управление Централизованное управление Консолидация приложений Консолидация приложений Стандартизация платформ и процессов Стандартизация платформ и процессов Оптимизация использования ресурсов Оптимизация использования ресурсов Оптимизируйте вашу инфраструктуру в соответствии с текущими требованиями вашего бизнеса и, конечно же, с учётом его развития

Типы консолидации серверов по DCAC ЛОГИЧЕСКАЯ Централизованное управление критическими для бизнеса системами и приложениями Пример : Создание центра мониторинга и управления всеми географически распределенными системами Перемещение серверов в ограниченное количество географических мест Пример : Физическое перемещение серверов из восьми городов в два ГЕОГРАФИЧЕСКАЯ ГОМОГЕННАЯ Объединение единого приложения, функционирующего на многих серверах, на меньшем количестве серверов Пример: Консолидация пяти Exchange- серверов на два сервера Объединение множества приложений на множестве серверов на нескольких серверах Пример: Слияние серверов Exchange, SQL и приложений SAP на 2 серверах ГЕТЕРОГЕННАЯ

Консолидация серверов, что это? Решение Сокращение количества серверов Файлы /печать Файлы /печать Exchange Exchange SQL SQL Домены Домены Сокращение количества конфигураций Малочисленность HW/SW конфигураций Малочисленность HW/SW конфигураций Сокращение количества платформ Другие ОС Другие ОС Другие БД Другие БД Другие почтовые системы Другие почтовые системы Windows Windows SQL Server SQL Server Exchange Exchange Цена вопроса Консолидация серверов Уменьшение ССВ за счёт сокращения количества серверов, платформ, конфигураций

Неужели надо свести всё к одному?!!!

Почему нет? Необходима изоляция приложений: Необходима изоляция приложений: По причинам безопасности По причинам безопасности По административным / организационным причинам По административным / организационным причинам Несовместимость с другими службами Несовместимость с другими службами Плохое качество приложения Плохое качество приложения Для некоторых приложений и сценариев лучше подходит горизонтальное (scale-out) масштабирование Для некоторых приложений и сценариев лучше подходит горизонтальное (scale-out) масштабирование Некоторые приложения созданы для горизонтально масштабируемых сред Некоторые приложения созданы для горизонтально масштабируемых сред Web-фермы: Web-фермы: Web-серверы оптимизированы для горизонтально масштабируемых сред Web-серверы оптимизированы для горизонтально масштабируемых сред Их производительность и пропускная способность быстрее растут при горизонтальном расширении, нежели при консолидации Их производительность и пропускная способность быстрее растут при горизонтальном расширении, нежели при консолидации Требования разумной избыточности для отказоустойчивости Требования разумной избыточности для отказоустойчивости Многие типы ресурсов не работают через медленные каналы связи («близость к пользователям») Многие типы ресурсов не работают через медленные каналы связи («близость к пользователям»)

Сценарии консолидации: примеры Базы данных: Базы данных: Базы данных обычно разрабатываются так, что производительность увеличивается при вертикальном (scale-up) масштабировании (если только приложение не использует Partitioned View / Clustering ) Базы данных обычно разрабатываются так, что производительность увеличивается при вертикальном (scale-up) масштабировании (если только приложение не использует Partitioned View / Clustering ) Дизайн SQL Server 2000 позволяет осуществлять поддержку больших баз данных на одном «монолитном» сервере Дизайн SQL Server 2000 позволяет осуществлять поддержку больших баз данных на одном «монолитном» сервере Один сервер может содержать несколько экземпляров (instances) одновременно работающих SQL-серверов Один сервер может содержать несколько экземпляров (instances) одновременно работающих SQL-серверов Почтовые системы: Почтовые системы: Консолидация Exchange 2000 становится преобладающей Консолидация Exchange 2000 становится преобладающей Расширения Exchange 2000 делают его более подходящим для серверной консолидации Расширения Exchange 2000 делают его более подходящим для серверной консолидации Файлы/печать Файлы/печать Файлы/печать – наиболее распространённый сценарий консолидации Файлы/печать – наиболее распространённый сценарий консолидации Польза для IT-процессов от консолидации нагрузки типа «файлы/печать» в переходе на одну единую версию ОС и уменьшении количества серверов Польза для IT-процессов от консолидации нагрузки типа «файлы/печать» в переходе на одну единую версию ОС и уменьшении количества серверов Не забудьте про Backup, Restore (!) и антивирусную защиту !!!!! Не забудьте про Backup, Restore (!) и антивирусную защиту !!!!!

Возможности консолидации Оптимизация IT-инфраструктуры Прямаяконсолидация Обратнаяконсолидация Миграция с UNIX/Netware Взаимодействие на разных уровнях Взаимодействие Взаимодействие Преимущества эксплуатации и управления Улучшение управления Файловые серверы Базы данных Снижение количества серверов

Прямая и обратная консолидация УменьшениесложностиАнализ Разработка Внедрение Обратнаяконсолидация Возможности платформы Стандарты и архитектура Функциони- рование СозданиестандартовПрямаяконсолидация

Scale Up Datacenter Распределённые системы Централизованное управление ++ Внедрение Полный комплект услуг жизненного цикла Эксплуатация Microsoft Operations Framework Планирование QuickStartREJ Определение целей Разработка Планирование миграции Тестирование СозданиеРазвёртывание Миграция пользователей и данных Подход Microsoft: Rightsizing и консолидация

Определение целей АнализПланирование Планирование миграции Разработка Создание и тестирование Разработка Внедрение в производство Миграция поль- зователей и данных План миграции поль- зователей и данных Внедрение Управление/ MOF-review Эксплуатация 9 шагов процесса

Compute Element MIC 1/2 Server I/O Processor MIC SCSI NIC CPU Memory MIC CPU Memory MIC Создание/тестирование/ внедрение новой службы Разработка консолидированных служб Планиро- вание миграции служб Процесс обратной консолидации Развертывание в промышленной среде Консолидированная система Оценка существующих сред и идентификация целей Миграция пользователей и данных

Прямая консолидация и стандарты – MSA Малый/Средний бизнес MSA объединяет все технологии, требуемые для создания корпоративных центров обработки данных Серверы Сети Software Хранилища Мы документируем эти конфигурации и как единые центры обработки данных, и как отдельные модули специализированного функционала Поддержка безопасных удалённых соединений даёт возможность интеграции разрозненных звеньев цепи производства Включая возможности хостинга такие как гео-кластеры, биллинг и др. мы предоставляем поддержку хостинговых сред Вместе с нашими партнёрами мы в лабораториях создаём и тестируем конфигурации центров обработки данных и затем оптимизируем их под Windows Корпоративная среда Филиал Предприятие Internet Отдел Extranet Хостинг

21 Пример. MSA EDC Логическая архитектура

22

Microsoft Systems Architecture (MSA) Объединение передового опыта строительства вычислительных центров и архитектур в КОМПЛЕКСНОЕ решение Объединение передового опыта строительства вычислительных центров и архитектур в КОМПЛЕКСНОЕ решение Протестированные, рекомендованные Microsoft конфигурации Протестированные, рекомендованные Microsoft конфигурации Рекомендуемые и предопределенные архитектуры, руководства, скрипты … Рекомендуемые и предопределенные архитектуры, руководства, скрипты … Основанные на MOF операционные процедуры Основанные на MOF операционные процедуры Расширенная поддержка Расширенная поддержка Предложения, интегрированные с консалтингом Предложения, интегрированные с консалтингом Руководства, позволяющие использовать решение частично Руководства, позволяющие использовать решение частично Программа сертификации вычислительных центров на соотв. MSA Программа сертификации вычислительных центров на соотв. MSA Сокращение рисков - это уже испытано! Сокращение рисков - это уже испытано! Сокращение времени внедрения Сокращение времени внедрения Адресовано IT-профессионалам Адресовано IT-профессионалам ПРЕДОСТАВЛЯЕТСЯ БЕСПЛАТНО (но не консалтинг!) ПРЕДОСТАВЛЯЕТСЯ БЕСПЛАТНО (но не консалтинг!)

Бизнес-преимущества MSА Снижение затрат Централизованное управление Надежность Улучшенная безопасность Улучшенная безопасность Надежная унифицированная инфраструктура Надежная унифицированная инфраструктура Меньшее количество точек отказа Меньшее количество точек отказа Улучшенная надежность Улучшенная надежность Повышенная доступность Повышенная доступность Лучшая масштабируемость и отказоустойчивость Лучшая масштабируемость и отказоустойчивость Более высокая производительность Более высокая производительность Снижение затрат на управление и администрирование Снижение затрат на управление и администрирование Снижение стоимости простоев Снижение стоимости простоев Лучшее использование ресурсов – хранилища, процессоры, память и ПО Лучшее использование ресурсов – хранилища, процессоры, память и ПО

IT-преимущества MSА Лабораторно реализовано и оттестировано Ускоренное внедрение Ускоренное внедрение Предсказуемые затраты Предсказуемые затраты Сниженные риски Сниженные риски Кратчайшее время отдачи Кратчайшее время отдачи Модульная архитектура Управление затратами Управление затратами Последовательное внедрение, а не «большой взрыв» Последовательное внедрение, а не «большой взрыв» Инфраструктура та, что требуется Инфраструктура та, что требуется Гибкая ёмкость Поддержка различных стратегий создания хранилищ данных, включая SAN, NAS, непосредственные Поддержка различных стратегий создания хранилищ данных, включая SAN, NAS, непосредственные Высокая ёмкость сетевой инфраструктуры для доступа к централизованным хранилищам данных Высокая ёмкость сетевой инфраструктуры для доступа к централизованным хранилищам данных Наивысшая безопасность Оптимизированная на продуктовом уровне безопасность всей инфраструктуры Оптимизированная на продуктовом уровне безопасность всей инфраструктуры Всеобъемлющая защита обеспечивающая максимум безопасности на каждом уровне Всеобъемлющая защита обеспечивающая максимум безопасности на каждом уровне

Что даст Windows.Net Server и MSA 2.0 ? IA64 и поддержка больших объёмов ОЗУ IA64 и поддержка больших объёмов ОЗУ 8-узловая кластеризация 8-узловая кластеризация Windows Resource Manager Windows Resource Manager IIS 6.0: поддержка множественности IIS 6.0: поддержка множественности Улучшенная вдвое производительность файловых служб Улучшенная вдвое производительность файловых служб Shadow Copy Snapshot backups Shadow Copy Snapshot backups Virtual Disk Service Virtual Disk Service Поддержка GEO-кластеров Поддержка GEO-кластеров Полностью удалённое управление Полностью удалённое управление Инструменты миграции, доверительные отношения между лесами Инструменты миграции, доверительные отношения между лесами Расширенная поддержка SAN Расширенная поддержка SAN Улучшенное качество драйверов, CHKDSK Улучшенное качество драйверов, CHKDSK Поддержка расширений NUMA Поддержка расширений NUMA Зеркалирование памяти Зеркалирование памяти Новые возможности для консолидации Дальнейшие улучшения

Масштабируемость Windows – доказано на всех уровнях Результаты Scale-Up Результаты Scale-Out ТестРезультатТестРезультат TPC-C Non-Clustered v5 165,218 tpmC $21.33/tpmC. Available 3/10/02 TPC-C Clustered v5 709,220 tpmC $14.96/tpmC. Available 10/15/01 SAP-SD Three-Tier 26,000 users 12,995 qphH $199.00/qphH. Available 6/20/02 TPC-W 100,000 items 10,439 WIPS $106.73/WIPS. Available 7/10/01 22,361 qphH $255.00/qphH. Available 6/20/02 PeopleSoft 8.4 CRM SSCS 22,500 users 21,053 qphH $291.00/qphH. Available 6/20/02 Results as of Sources:

Windows 2000 в крупных компаниях работает надёжно, …со временем доступности реальных систем стремящемся к 99,99% Заметим, что эта статистика отражает доступность отдельных серверов, и представляет результаты ранее достижимые лишь… на кластерных системахЗаметим, что эта статистика отражает доступность отдельных серверов, и представляет результаты ранее достижимые лишь… на кластерных системах Источник : Aberdeen Group - Proving-the-Point: Interviews with Next-Generation Windows 2000 dot.coms, Feb 01 Готовность систем на базе Windows 2000 Server за 6-месячный период Пользователь (номер) Доступ- ность (%) Время работы (лет) Среднее время простоя (часов в год) Всего: Надёжность Windows 2000

Географическая консолидация Географическая консолидация Централизация служб для филиалов и региональных нужд Централизация служб для филиалов и региональных нужд Консолидация хранилищ данных Консолидация хранилищ данных Консолидация сетевых устройств Консолидация сетевых устройств Консолидация серверов Консолидация серверов Какие сценарии консолидации поддерживаются MSA?

На собственном примере: Проблемы: Проблемы: Рост бизнеса Рост бизнеса Управление слишком большим количеством почтовых серверов Управление слишком большим количеством почтовых серверов Почтовые серверы требуют слишком большого времени для резервного копирования Почтовые серверы требуют слишком большого времени для резервного копирования Microsoft ® Operations Technology Group (OTG) обслуживает более 59, 000 почтовых ящиков Microsoft ® Operations Technology Group (OTG) обслуживает более 59, 000 почтовых ящиков Управление потоком сообщений, который превышает 4 млн. сообщений в день Управление потоком сообщений, который превышает 4 млн. сообщений в день

8 8-процессорных серверов + SAN Backup: 1 час на сервер 3500 пользователей на сервер 100 MB на пользователя 35 4-процессорных серверов Backup: 8 часов на сервер пользователей на сервер 50 MB на пользователя Результаты миграции на Exchange 2000

Уменьшение штата обслуживания серверов на 11% Сокращение ССВ на 17%, количества серверов – на 50% Сокращение штата на 50% Сокращение затрат на $550K Сокращение ССВ на 26% Сократила штат на 33% Экономия $1.4M 25% уменьшение количества Ф/П-серверов сэкономило $500K Уменьшение количества серверов на 30%, рост производительности приложений на 30% Лучшие ССВ / значимость для бизнеса

33 Инструменты анализа и управления для консолидации 1 – Штатный Performance Monitor 1 – Штатный Performance Monitor Windows 2000 Data Center: Process Control Tool Windows 2000 Data Center: Process Control Tool Собственные разработки: Использование Win32 Job API Собственные разработки: Использование Win32 Job API Windows.Net Enterprise & Datacenter Server – WSRM, Windows System Resource Monitor Windows.Net Enterprise & Datacenter Server – WSRM, Windows System Resource Monitor Инструменты третьих фирм: Инструменты третьих фирм: Aurema ARMTech for Windows: для покупателей Windows 2000 Datacenter – бесплатно!!!! Aurema ARMTech for Windows: для покупателей Windows 2000 Datacenter – бесплатно!!!! HP ProLiant Essentials Workload Management Pack, HP ProLiant Essentials Workload Management Pack, ….. …..

Дополнительные ресурсы Российский веб-сервер компании Microsoft Российский веб-сервер компании Microsoft Информация о консолидации серверов Информация о консолидации серверов Data Centre Advisory Council (DCAC): передовой опыт консолидации серверов Data Centre Advisory Council (DCAC): передовой опыт консолидации серверов Microsoft QuickStart for Planning Server Consolidation Microsoft QuickStart for Planning Server Consolidation Microsoft Systems Architecture Microsoft Systems Architecture

Вопросы?