New sql server2008r2
- 1. Обновленный SQL Server 2008 R2: новые возможности платформы управления данными и бизнес анализа Совместный семинар Microsoft и HP, посвященный выходу новых продуктов 17 июня 2010 г.
- 2. Программа семинара Платформа управления данными Microsoft SQL Server 2008 R2 – готовность к критическим нагрузкам. Представление новой версии 10:00 — 10:50 продукта Олег Буравцов, Microsoft Новые возможности решений бизнес анализа на SQL Server 2008 R2: 10:50 – 11:20 самостоятельные BI решения, аналитика в реальном времени, богатые возможности визуализации данных, Максим Войцеховский, Microsoft Пример построения комплексной системы бизнес-анализа в ОАО «Меткомбанк» 11:20 – 12:00 Андрей Понкин, ИТ Директор, ОАО «Меткомбанк» 12:00 — 12:30 Кофе Платформы HP для решений бизнес-аналитики на основе SQL Server 2008 R2 12:30 — 13:30 Александр Светлаков, HP 13:30 — 14:30 Обед
- 3. Платформа управления данными Microsoft SQL Server 2008 R2 – готовность к критическим нагрузкам. Представление новой версии продукта Совместное мероприятие HP и Microsoft 17 июня 2010 Олег Буравцов менеджер по продукции Microsoft [email protected]
- 4. Содержание Что мы объявляем Готовность R2 к высоким нагрузкам Масштабируемость Рекомендованные конфигурации Fast Track Параллельное хранилище данных Аналитика в потоке данных: StreamInsight Управление нормативно-справочной информацией Master Data Services Централизованное управление серверами БД в организации Облачная СУБД Редакции , ценность R2 для бизнеса Вопросы и ответы
- 5. Немного истории R2 SQL 6.0 SQL 6.5 SQL 7.0 SQL 2000 SQL CE 64-bit SQL 2005 SQL 2008 SQL 2008 1995 1996 1998 2000 2000 2001 2005 2008 2008 R2 Scalability to Платформа Small Server 64-bit Megaserver + Enterprise 256 cores Auditing для Backup/Restore Log Shipping Failover Clustering Database Mirroring Datacenter Edition Replication Enterprise Class ETL Policy-Based Scripting GUI Management Studio Parallel Data Management Relational SQL-CE Device and Desktop Warehouse данных XML Типы Files XML (SQL-XML) BLOB Objects Spatial Разработ- ODBC Data Tier ADO.NET Data Services ка ПО OLE DB ADO.NET Applications XQuery CLR Functions, Procedures in DBMS Engine Multi Server Entity Framework Management OLAP and ETL DW Scale Self Service BI Data Mining Partitioning Data Profiling StreamInsight BI Managed Reporting Ad-hoc Reporting Data Visualizations Master Data Data Warehousing Multiple sources VS Integration Office Integration Services KPIs
- 6. Надежность, проверенная временем Финансовая компания PREMIER Bankcard, кредитные карты Хранилище данных 4 TB, аналитические кубы OLAP 4 million кредитных карт, поддерживаемые SQL Server 16 – процессорный сервер HP Integrity Социальная Военно-страховая компания (ВСК) Платформа консолидации данных и бизнес-аналитики для отслеживания всей цепочки взаимодействия с клиентом Размер базы: 1 Тбайт, в перспективе до 5 Тбайт 1,4 млн страховых договоров за год ERP Монолит Всего узлов: 6 рабочих, 4 сервера отчетов Общий объем ERP-данных: 2 терабайта 5 лет назад немногие предприятия могли поддерживать терабайтные БД с помощью SQL Server в критических приложениях. Сегодня сотни предприятий имеют 10 Тб и более транзакционные СУБД на SQL Server. Отчет Forrester , 2009 г.
- 7. SQL Server - не только СУБД Конечные бизнес-пользователи Бизнес- Приложения Интренет - КПК приложения MS Office браузер Платформа для Управления Данными и Бизнес-анализа SQL Server SQL Server Reporting Services Analysis Services SQL Server StreamInsight SQL Server Database Engine (СУБД) Master Data Services SQL Server Integration Services СУБД LOB Файлы
- 8. Что мы представляем с появлением R2 Новые возможности СУБД класса Enterprise для визуализации жизненно важных приложений Самостоятельное создание BI решений Stream Insight – BI в реальном времени Параллельная обработка данных УПРАВЛЕНИЕ нормативно- справочными данными Новые возможности СУБД в облаке администрирования
- 9. Далее …
- 10. Готовность R2 к высоким нагрузкам
- 11. Задачи обработки данных , стоящие перед заказчиками Примерный объем Хранилища Данных • Увеличивающиеся объемы Сегодня Через 3 года данных Снижение стоимости 21% • < 500 GB 5% • Необходимо иметь гибкое 20% решение для разного типа 500 GB – 1 TB 12% нагрузок 21% 1 – 3 TB • Желателен анализ данных 18% real-time 3 – 10 TB 19% 25% • Качество данных имеет важное значение > 10 TB 17% 34% 2% Не знаю 6% Источник: TDWI Report – Next Generation DW 11
- 12. Возможности масштабирования платформы СУБД Возможности SQL Server 2008 R2
- 13. Проблемы согласования производительности SQL SERVER CPU CORES DIS DIS FC SWITCH SERVER WINDOWS FC A K K A CACHE CACHE HBA B STORAGE LUN A A DIS DIS FC A B CONTROLLER B K K HBA B B LUN CPU Feed Rate SQL Server HBA Port Rate Switch Port Rate SP Port Rate LUN Read Rate Disk Feed Rate Read Ahead Rate • Разные принципы оптимизации под OLTP и DataWarehouse • Не сбалансированы(CPU, IO, HDD) • Нет гарантии положительного результата масштабирования (1Тб 20ТБ)
- 14. Архитектура Fast Track DataWarehouse • Метод разработки оптимальных по цене, сбалансированных систем для задач ХД • Рекомендованные конфигурации аппаратного обеспечения, разработанные совместно с партнерами • Лучшие практики организации данных, загрузки и управления Поддерживаю Системы хранения Системы Преимущества Fast Track Сбалансированы между всеми компонентами щие системы аналитических презентационного данных уровня Подробно описаны Пакеты загрузки Кубы Analysis Services Основаны на последовательном вводе/ Integration выводе и нагрузке, характерной для ХД Данные для отображения Services Инструменты веб- Путь данных анализа Reporting Services Ниже стоимость владения (TCO) Масштабируемость и производительность Выделенный SAN, Массив Хранилище данных, хранения Промежуточная область, Пакетная загрузка SharePoint Services Область действия Microsoft Office SharePoint рекомендованных архитектур PerformancePoint (пунктиром) Excel Services
- 15. Конфигурации Fast Track для серверов HP Максима Количество Начальн Ядра льная Сервер Процессор SAN жестких ая CPU емкость дисков емкость* ** HP Proliant (2) AMD Opteron Istanbul 12 (3) HP (24) 300GB 6TB 12TB DL 385 G6 six core 2.6 GHz MSA2312 15k SAS HP Proliant (2) AMD Opteron Istanbul 12 (3) EMC (24) 300GB 6TB 12TB DL 385 G6 six core 2.6 GHz AX4 15k FC HP Proliant (4) AMD Opteron Istanbul 24 (6) HP (48) 300GB 12TB 24TB DL 585 G6 six core 2.6 GHz MSA2312 15k SAS HP Proliant (4) AMD Opteron Istanbul 24 (6) EMC (48) 300GB 12TB 24TB DL 585 G6 six core 2.6 GHz AX4 15k FC HP Proliant (8) AMD Opteron Istanbul 48 (12) HP (96) 300GB 24TB 48TB DL 785 G6 six core 2.8 GHz MSA2312 15k SAS HP Proliant (8) AMD Opteron Istanbul 48 (12) EMC (96) 300GB 24TB 48TB DL 785 G6 six core 2.8 GHz AX4 15k FC * Core-balanced compressed capacity based on 300GB 15k SAS not including hot spares and log drives. Assumes 25% (of raw disk space) allocated for tempdb. ** Represents storage array fully populated with 300GB15k SAS and use of 2.5:1 compression ratio. This includes the addition of one storage expansion tray per enclosure.
- 16. Scale out : Parallel Data Warehouse (доступность во 2 половине 2010 г) • Масштабируемость от 10 до 100-тен TB • Принцип Massively Parallel Processing (MPP) • Выбор поставщика аппаратуры • Стандартные серверы с невысокой стоимостью • Глубокая интеграция с Microsoft BI
- 17. Parallel Data Warehouse - архитектура Серверы БД Узлы СХД Управляющие узлы SQL Active / Passive SQL Client Drivers SQL SQL SQL Серверы мониторинга Dual Fiber Channel SQL Dual Infiniband Data Center Monitoring SQL Серверы ETL SQL SQL ETL Load Interface SQL Резервный укел SQL Corporate Backup Solution Запасной сервер БД Corporate Network Частная сеть
- 18. Пример проекта : First Premier Bankcard Существующее Трудности Параллельное хранилище хранилище Hardware Скорость загрузки Ускорение на 300% 16 CPU HP 8620 Itanium данных Hitachi Storage 27TB Raw SATA 21 LUNS Объемы данных 30TB/160 Cores Software Скорость Ускорение Windows 2003 SP2 обработки OLAP запросов в 70 раз SQLServer 2008 SSIS/SSRS Смешанные типы Concurrency Mixed Data Warehouse нагрузки Workload 18 Terabytes Star Schema Стоимость Снижение ТСО на 80 Fact Tables 500 + Dimensions владения (ТСО) 50%
- 20. Платформа для анализа событий Complex Event Processing (CEP) Аналитические результаты должны отражать изменения бизнеса и допускать реакцию на них с минимальной временной задержкой СУБД Приложения, упр. событиями (CEP) Парадигма Запросы выполнятся по Запросы обрабатываются запросов требованию непрерывно Задержка Секунды, часы, дни Милисекунды или меньше Пропускная Сотни записей/сек Десятки тысяч записей/сек или способность больше Событие запрос выходной поток входной ответ поток
- 21. Бизнес аналитка в режиме Online. Технология StreamInsight ИСТОЧНИКИ СОБЫТИЙ ПРИЕМНИКИ СОБЫТИЙ ПРИЛОЖЕНИЕ Выходные адаптеры Устройства, датчики Входные адаптеры Пейджеры и устройства мониторинга Подсистема MSFT CEP Веб-серверы Панели мониторинга KPI, интерфейс SharePoint Хранилища событий Торговые посты и базы данных Биржевые телеграфные Справочные данные Хранилища событий аппараты и каналы и базы данных новостей
- 24. Архитектура решения Baltic Soft для телеком операторов с использованием StreamInsight Было : типовое решение для Абонент оператора на основе Linux/MySQL Тарификация 1 раз в минуту Маршру- 100 тыс транзакций в минуту тизатор Стало: Непрерывный поток данных из маршрутизатора в SQL Server 2008 R2 Учет потребленных услуг 1 раз в секунду 1 млн. транзакций в минуту Точный учет трафика на канале в 40 Мб/с Сниженные требования к аппаратным ресурсам решения Пятьдесят 2x-процессорных серверов для традиционной архитектуры Два 4x-процессорных сервера с архитектурой StreamInsight
- 25. Управление нормативно-справочной информацией Master Data Services
- 26. Управление основными данными ПАРАМЕТРЫ СЛИЯНИЕ/СОПОСТАВЛЕНИЕ РОЛЕВОГО ДОСТУПА УПРАВЛЕНИЕ УПРАВЛЕНИЕ ИЕРАРХИЕЙ ВЕРСИЯМИ УТВЕРЖДЕНИЕ РАБОЧИХ ПРОЦЕССОВ CRM Приобретение БД Управление активами ERP Кадровые документы
- 27. Пример управления НСИ в ГК «Роснано» Источники НСИ Потребители НСИ Роснано, НСИ НСИ OIM Администратор Бизнес подразделение PowerP ivot Почта Система Управления НСИ Master Data Services Отчеты 1С CRM Домен Портал
- 28. Централизованное управление серверами БД в организации
- 29. Тенденции Неиспользованные вычислительные мощности Перегруженные администраторы 1990 2000 2010
- 30. Единая Точка Контроля Utility Control Point (UCP) SQL02 SQL01 Единая точка управления Единая стратегия оценки, SQL03 SQL05 распространения, DBA действия и анализа производительности SQL04 Просто установить и UCP использовать Управляемые экземпляры SQL сервера
- 31. Демо – единая точка контроля (UCP), регулятор ресурсов (resource governor)
- 32. СУБД в Облаке как сервис: SQL Azure • Доступность сервиса: • Более чем в 40 странах мира • в России пока не доступен: ждите новостей в течение года • Преимущества перед «своим» SQL Server: • нет оборудования и необходимости его поддержки • «автоматическое» администрирование, отказоустойчивость • масштабирование по запросу • оплата по мере роста • Что нужно иметь в виду: • Размер облачной СУБД пока ограничен 50 Гб • SQL Azure почти такой же как SQL Server 2008 R2, однако некоторые свойства не поддерживаются (http://azure.com) • Например , гео пространственные данные • Переход на SQL Azure может означать маленький проект миграции
- 33. Особенности редакций R2 Standard Enterprise Datacenter Оперативная 64GB RAM 2TB RAM OS Max память Поддержка >8 4 до 8 процессоров До 256 логических Лицензирование виртуализации 1 ВМ на лицензию 4 ВМ на лицензию Не ограничено Поддержка Hyper-V Live Migration Hyper-V Live Migration Hyper-V Live Migration виртуализации Управление более 25 OLTP Сжатие резервных Управление до 25 экземплярами Управление копий экземплярами Новый Расширение функций PowerPivot для SharePoint PowerPivot для SharePoint функционал службы отчетов (SSRS, Master Data Services Master Data Services картография) Сжатие в Unicode Сжатие в Unicode Stream Insight Базовый Базовый Расширенный Лицензирование Server+CAL или Server+CAL или Только по процессорам по процессорам по процессорам
- 34. Ценность для бизнеса SQL Server 2008 R2 обеспечивает прогнозируемый уровень производительности при росте нагрузки на критически важные приложения Повышение эффективности управления за счет быстрой реакции на изменяющиеся условия Повышает эффективность обработки данных в организации (качество данных) за счет унификации и централизованного изменения данных. Снижение расходов на ИТ- поддержку за счет использования единого централизованного средства администрирования всех СУБД в организации Возможность снизить или исключить затраты на оборудование при гарантированном времени отклика СУБД.
- 35. Спасибо за внимание! Вопросы … http://technet.microsoft.com/ru-ru/sqlserver/default.aspx http://www.microsoft.com/sqlserver/2008/ru/ru/default.aspx http://www.microsoft.com/sqlserver/2008/en/us/white-papers.aspx http://www.techdays.ru/