Технология Data Warehouse от Sybase Компания SQL-Solutions SQL-Solutions - Украинский Sybase Мастер-дистрибьютор: три года на рынке Украины, осуществляя. - презентация

1

2 Технология Data Warehouse от Sybase

3 Компания SQL-Solutions SQL-Solutions - Украинский Sybase Мастер-дистрибьютор: три года на рынке Украины, осуществляя поставку и поддержку продуктов Sybase; консалтинговые услуги по созданию проектов информационных систем на базе продуктов Sybase ; разработка пилотных проектов; сертифицированное обучение; выгодные финансовые условия, удовлетворяющие специальные требования заказчика для крупных корпоративных заказчиков.

4 Компания SQL-Solutions РЕАЛИЗОВАННЫЕ ПРОЕКТЫ: информационные системы на базе продуктов Sybase построены в Проминвестбанке, ПриватБанке, 1-м Украинском Международном банке, Укринбанке и ряде других банков; в рамках тендера Мирового банка произведена поставка продуктов Sybase в Госкомитет Украины по статистике; специалисты SQL-Solutions осуществляют здесь постоянную консалтинговую поддержку; Национальный Банк Украины выбрал продукты Sybase для реализации проекта системы массовых электронных платежей; продукты Sybase используют порт «Южный» (Одесса), CK Jonson, MacDonalds Украина, Daewoo Украина, Госавтоинспекция Украины, Верховный Совет Украины и многие другие.

5 Содержание Развитие технологии Data Warehouse Компоненты технологии Data Warehouse

6 Sybase - технология Data Warehouse PowerDimensions PowerStage Power Designer WarehouseArchitect Power Designer WarehouseArchitect 6.1 Warehouse Control Center

7 3 ключевых позиции Data Warehouse Sybase предлагает: Гибкое, интегрированное решение, которое Вы можете развернуть как вы хотите и где Вы хотите Масштабируемая, мощная, высоко- производительная технология, которая полностью удовлетворяет запросам пользователя Решение, которое призвано быстро вернуть вложенные средства, за счет уменьшения времени и стоимости разработки

8 Data Warehousing - Что было раньше? Централизованные хранилища Нацеленные на корпоративную модель Долгое время разработки Высокая цена Ограниченый доступ

9 Data Warehousing - Что сейчас? Централизованные хранилища Нацеленные на корпоративную модель Долгое время разработки Высокая цена Ограниченый доступ Децентрализированные хранилища Направленные на потребности подразделений Ориентированные на специфику подазделений приложений Ограниченный доступ к данным

10 Дилемма хранения данных Догма многих хранилищ... Многи источников много приемников... Догма общего хранилища... Один источник…Много приемников Достоинства Недостатки Единый вид Сложность на даные… в построении Быстрота построения Нет единого взгляда на данные, сложности с администри- рованием

11 Data Warehousing - Куда мы стремимся? 1998 и в дальнейшем Интегрированное хранение данных Хранилища данных подразделений с центральной консолидацией / распределенная инфраструктура Нужная информация для большого числа пользователей Упрощенная инфраструктура для администрирования и поддержки

12 Распределенный анализЦентральная консолидация Функции Data Warehouse Функции Data Warehouse Перспективная инфраструктура Сбор данных и интеграция с точки зрения организации Хранится только актуальная информация Многопредметные области Пакетный ввод информации Небольшое количество пользователей Модель, зависящая от данных Предметные приложения Сервера предметного анализа и сбора информации Хранение всей истории изменений Специализированные области данных Интерактивный анализ Много активных пользователей Предметно зависимая модель

13 Требования к построению Вашего Data Warehouse Быстрое построение Ваших хранилищ при помощи легко управляемой, промышленной Архитектуры Эффективность и масштабируемость в хранении сотен тысяч транзакций в Вашем хранилище Создание простого, понятного конечному пользователю ( без помощи IТ- специалиста) интерфейса для доступа к данным и их анализа Обеспечение рентабельного и быстрого осуществления доступа к данным

14 Технология Data Warehouse: Обзорная схема СУБД (Sybase ASE, Oracle, Informix,Mainframe) Data Access, Transformation, and Change Data Capture Financial Accounting Customer Service Manufacturing Sales Order/Entry Mfg Quality Data Mart Cust. Svc. Data Mart Consolidation Warehouse Marketing Data Mart Financial Data Mart Работа с данными - Sybase PowerStage Масштабируемая, Эффективная, Быстрая RDBMS Sybase Adaptive Server масштаба предприятия Предметноориентированный подход к данным - Sybase PowerDimensions Adaptive Server IQ Intellidex - Метаданные и управление хранилищем Power Designer

15 Sybase: Организация работы Data Warehouse Полностью интегрированное решение

16 Power Dimensions Power Dimensions PowerStage PowerStage Sybase Replication Server DirectCONNECT Anywhere Omni CONNECT Adaptive Server for the Warehouse

17 Содержание Sybase - технология Data Warehouse Компоненты технологии Data Warehouse

18 Компоненты технологии Data Warehouse от Sybase Adaptive Server PowerDesigner Warehouse- Architect 6.1 PowerStage PowerDimension Intellidex

19 Семейство продуктов Sybase Adaptive Server Общий языковой процессор Общие сервисы Администрирование Перемещение данных Запросы Web-генерация Общие сервисы Администрирование Перемещение данных Запросы Web-генерация AdaptiveServerIQAdaptiveServerAnywhereAdaptiveServerEnterprise Специализи- рованные хранилища Другие хранилища

20 Аналити- ческое хранилище Консолиди- рованное хранилище Интегрированная разработка приложений Общие справочники Оптимизация нагрузки хранилища Сбор данных, консолидация, интеграция и распределение в реальном времени Интерактивный анализ для специализированных пользователей Общие справочники для всех источников и типов данных ASE, ASIQ, Warehouse Architect Adaptive Server (Enterprise / IQ) Переодическое обновление ASEASIQ

21 Возможности Adaptive Server ( Enterprise / IQ) Данные о продажах в этом квартале OLTP (Смешаная нагрузка) Ввод данных о продажах Данные о продажах за пос- ледние 5 лет (история) IQ Служба интеграции Запрос о выдаче отчета о продажах по регионам в этом квартале. Управлющий Сравнить полученый результат с объемом продаж за последние 3 года.

22 Running your Business Adaptive Server Enterprise Running your Business Adaptive Server Enterprise Высокопродуктивная, наиболее эффективная OLTP база данных на рынке Предсказуемая эффективность для разнообразных и непредсказуемых нагрузок Многочисленные параллельные возможности Сканирование таблиц/индексов, сортировка, объединение, агрегирование Оптимизатор параллельной работы Загрузка и выгрузка, создание индексов Выгрузка и загрузка баз данных Адресация с возможностью расширения Прозрачность распределенных запросов Специальные хранилища данных Высокая устойчивость Моментальное восстановление Кластерная поддержка с прозрачностью для приложений

23 IQ Data Store IQ заслуживает внимания ЛЮБОГО, способного оценить возможности СУБД. Рич Финкельштейн (Rich Finkelstein), Performance Computing Inc. Adaptive Server IQ: Оптимизация Аналитических СПР Поразительная скорость Молниеносные запросы Быстрая загрузка Неограниченная гибкость Любые запросы Любые схемы Колосальная экономия Сжатие базы данных Поддержка большого числа пользователей

24 Adaptive Server IQ 1 M Rows10M100M1B Общий размер базы 100 GB 50 GB 200 GB Terabyte Традиционные RDBMS объем данных ASIQ Обычно 1/3-1/7 объема традиционных RDBMS Количество строк (чистый размер данных)

25 Уменшение временных затрат пользователя в Telecel Требования Уменьшить временные затраты пользователя Получить отчет о наиболее продаваемых продуктах Получить отчет о наиболее выгодных покупателях Эффективо объединить многие источники данных Решения/Выгоды Adaptive Server (Enterprise, IQ), Replication Server, Enterprise Connect, Warehouse Architect Проффесиональные пользователи получили полный доступ к данным Интеграция с Oracle, Informix and Sybase Доход удвоился за год Используя IQ, запросы, на которые ранее тратилось 3-4 часа, теперь можно получить за 3-4 минуты. На наш взгляд Sybase- это просто чудо. Lucien Costa, Data Warehouse Mgr. Telecel

26 Годовой анализ потока пасажиров в American Airlines Требования Анализ 125 миллионов пасажирских билетов ежегодно База транспорта, обработка, обслуживание отчетов по запросам пасажиров Осуществление аналитического доступа к данным для построения бизнес решений Решения/Выгоды Adaptive Server IQ Объем данных для онлайн анализа возрос в 4 раза Мы не смогли найти ничего, сравнимого с Sybase IQ. Эта система работает от 4 до 6 раз быстрее, чем любая другая система, которую мы тестировали. Плюс к этому Sybase IQ в 15 раз быстрее, чем наша предыдущая система Teradata. Джон Хаген (John Hagen) Главный финансовый аналитик American Airlines

27 Компоненты технологии Data Warehouse от Sybase Adaptive Servers PowerDesigner Warehouse- Architect 6.1 PowerStage PowerDimension Intellidex Power Designer WarehouseArchitect Power Designer WarehouseArchitect 6.1

28 PowerDesigner: Интегрированый проектировщик Доступ ко всем источникам данных (ссылочным и измененным) Определение и построение схемы хранилища Управление любыми ссылочными или агрегирующими схемами Разработка приложений Центральный репозиторий метаданных

29 WarehouseArchitect WarehouseArchitect: Загружает оперативную информацию об источниках Разрабатывает и генерирует модели баз данных внутри DW Многомерные модели Схема звезда Схема снежинка Разделяемость Имеет интерфейс к продуктам сторонних разработчиков Генерирует отчеты Поддерживает генерацию индексов для IQ

30 Загрузка внешних источников Рабочая БД P o w e r D e s i g n e r W a r e h o u s e A r c h I t e c t Внешние объекты RDBMS Mainframe Плоские файлы

31 Взаимодействие с инструментами извлечения данных и генерация соответствующих скриптов Рабочая БД Инструменты извлечения Рабочая БД P o w e r D e s i g n e r W a r e h o u s e A r c h I t e c t Внешние объекты Метаданные и скрипты извлечения

32 Моделирование и генерация схемы DW и скриптов Рабочая БД Инструменты извлечения Хранилище данных Рабочая БД DataMart DataMart DataMart P o w e r D e s i g n e r W a r e h o u s e A r c h I t e c t Внешние объекты DW / DM Схема Главные БД Оптимизированные БД Метаданные и скрипты извлечения

33 PowerDesigner 6.1 поддерживает продукты сторонних разработчиков Cognos Impromptu MicroStrategy DSS Agent Arbor Software EssBase Application Oracle Express Database Power Designer WarehouseArchitect Power Designer WarehouseArchitect 6.1

34 Генерация инструментов для конечного пользователя Рабочая БД Инструменты извлечения Хранилище данных OLAPEngine Рабочая БД Инструменты запросов DataMart DataMart DataMart DSS / EIS инструменты P o w e r D e s i g n e r W a r e h o u s e A r c h I t e c t Внешние объекты DW / DM Схема OLAP скрипты и метаданные Конечный пользователь Инструменты анализа Метаданные и скрипты извлечения

35 Преимущества WarehouseArchitect Совмещение обеих конструкций DW Поддержка всех архитектур моделирования сечений Генерация оптимизированных схем индексирования Интерфейс компонентами DW сторонних разработчиков Поддержка всевозможных отчетов Сохранение моделей в справочнике PowerDesigner

36 Компоненты технологии Data Warehouse от Sybase Adaptive Servers PowerDesigner Warehouse- Architect 6.1 PowerStage PowerDimension Intellidex

37 Подготовка данных Выборка, Изменение, Пересылка В среднем около 80% времени, потраченного на построение хранилища данных, было потрачено на: Выборку, Чистку, и Загрузку данных. По Биллу Инмону (Bill Inmon)... По Meta Group... В среднем 80% стоимости хранилища приходится на подготовку данных.

38 Server Repository Designer Director Repository Manager Sequential Oracle SQL Server Sybase Informix UniVerse Applications Operational Data Warehouse Data Administrator ExtractCleanseTransformIntegrate Визуальная модель для проектирования потоков данных и процессов Стандартизация помогает быстрой разработке Масштабируемость Простое развертывание PowerStage: Гибкая трансформация Sybase ASE Sybase IQ Oracle Informix RedBrick

39 PowerStage: Описание Поддерживает родные драйвера для массовой загрузки Sybase, вставки в IQ, Open Client для Sybase, Oracle, DB2 визуальное моделирование процессов обработки данных интеграция средств развертывания, преобразования, и загрузки данных в одном продукте доступ через ODBC к другим базам Удаленно изменяет данные, используя Sybase Replication Server

40 WHITELIGHT Компоненты технологии Data Warehouse от Sybase Adaptive Servers PowerDesigner Warehouse- Architect 6.1 PowerStage PowerDimensions Intellidex Power Dimensions Power Dimensions

41 Scalable Performance Adaptable Rapid Analysis Гибкое быстрое OLAP решение, которое легко интегрируется в существующие DSS системы PowerDimensions PowerDimensions интегрированное решение PowerDimensions Analyst Быстрое построение моделей, проверка и анализ PowerDimensions NetPublish Интерактивное публикование в Интернет

42 Сервер приложений PowerDimensions Analyst Highgate Grid Highgate Chart Highgate Graph Highgate Report Highgate Grid Highgate Chart Highgate Graph Highgate Report Highgate Grid Highgate Cha Highgate Gr Highgate Rpt Highgate Grid Highgate Gr Highgate Rpt API к продуктам сторонних разработчиков PowerDimensions NetPublish Browser Highgate Grid Highgate Chart Highgate Graph Highgate Report Highgate Grid Highgate Chart Highgate Graph Highgate Report Highgate Grid Highgate Cha Highgate Gr Highgate Rpt Highgate Grid Highgate Gr Highgate Rpt Хранилище Данных Highgate Grid Highgate Chart Highgate Graph Highgate Report Highgate Grid Highgate Chart Highgate Graph Highgate Report Highgate Grid Highgate Cha Highgate Gr Highgate Rpt Highgate Grid Highgate Gr Highgate Rpt Шаблоны Приложений Архитектура PowerDimensions

43 Быстрое аналитическое моделирование, анализ, проверка и публикация разработанная для предметных аналитиков Мгновенный анализ Context-Based Modeling Правила типа Если-то Запросы по исключениям и атрибутам Интегрированная проверка и аудит моделей

44 Открытые интерфейсы и гибкая адаптация к существующим DSS системам Легко адаптирующийся Гетерогенные RDBMS Произвольная схема Поддержка тензорного API Открытая интеграция метаданных Сервер приложений Unix and NT Анализ Win95/NT

45 Высоко эффективная, гибкая архитектура сервера приложений Гибкие характеристики SMP/Распределяет все Максимальное использование ресурсов MultiCache TM Subsecond response to queries, self tuning Кеширование данных, не отчетов MultiOptimizer TM 18 оптимизаций для распределеной обработки запросов 100% поддержа Java Никаких ограничений на HTML/CGI

46 White Light Multidimensional View Adaptive Server IQ PowerDimensions OLAP Многомерность Eliminates Disk Space Considerations Optimized IQ data store removes speed and flexibility traditional RDBMS limitations

47 Компоненты технологии Data Warehouse от Sybase Adaptive Servers PowerDesigner Warehouse- Architect 6.1 PowerStage PowerDimension Intellidex

48 Meta Data Exchange Imports from Design Tools and Transform engines Publishes to Query Tools Exchange API Meta Data Standardization Leader in standards effort... Meta Data Replication Changes in meta data propagated easily... Meta Data Synchronization One version of the truth Meta Data Versioning Exchange API Checkin/Checkout Intellidex provides the HUB of a metadata strategy...IntellidexCentralized Meta Data Directory Warehousedatabases Independent Data Marts