Управление системами хранения Fujitsu ETERNUS DX Сергей Дудковский 07-2013 2013 FUJITSU TECHNOLOGY SOLUTIONS Немного о FUJITSU 2013 FUJITSU TECHNOLOGY SOLUTIONS Экспертиза в производстве – завод Fujitsu, Аугсбург, Германия Производство в день единиц продукции Производственные площади Складские Сборка и тестирование Персональные компьютеры 9.000 Ноутбуки 6.000 Серверы (архитектура х86) 1.000 Стоечные шкафы 50 Системные платы Клавиатуры Серийное производство 12.000 12.000 8.000 м² 26.000 m² Производство серверов/шкафов Производство Системных плат Производство Управление качеством оптимизированная система управления Склад Компонентов Управление компонентами Специальное производство Управление объемом Современный завод и тестовая лаборатория Сертификация ISO Японские инновации и немецкие стандарты качества 2 2013 FUJITSU TECHNOLOGY SOLUTIONS Продукты Fujitsu ИТ-инфраструктуры Для эффективного решения любых задач Наиболее подходящее по цене, производительности и эффективности Широкий спектр серверов и систем хранения System Size High-end Mainframe UNIX Servers Linux/Windows Servers Business Servers BS2000/OSD SPARC Enterprise Fujitsu M10 PRIMEQUEST PQ1800E2 Storage ETERNUS DX8000 Mid-range ETERNUS DX400 PRIMERGY [MSP/XSP] Volumerange [Solaris] ETERNUS DX60/DX80/DX90 [Linux/Windows] 4 2013 FUJITSU TECHNOLOGY SOLUTIONS FUJITSU ETERNUS DX 2013 FUJITSU TECHNOLOGY SOLUTIONS СХД от Fujitsu: 40 лет опыта и 7 поколений PB ETERNUS DX8700 ETERNUS8000 ETERNUS6000 2TB/3.5” 5,456 TB/System TB ETERNUS GR740 F6427 750 GB/3.5” 2,047 TB/System 500 GB/3.5” 503 TB/System F6421 GB 146 GB/3.5” 27 TB/System F479 1.89 GB/8” 7.56 GB/Unit 446 MB/10.5” 896 MB/Unit Для открытых систем MB 200 MB/14” 400 MB/Unit '70 Для мэйнфреймов '80 '90 6 2000 2010 2013 FUJITSU TECHNOLOGY SOLUTIONS ETERNUS DX S2: кто делает Продукция Разработка: Падерборн, Мюнхен / Германия + Кавасаки / Япония Тестирование: Падерборн / Германия + Нумацу / Япония Производство: Аугсбург / Германия + Комацу / Япония Люди Более 1000 инженеров в Японии и Германии Лаборатория в Германии: Центр компетенции, демонстрационные образцы продуктов и решений на площади ~450 м² в Падерборне Организация нагрузочных тестирований Всемирная база знаний по продуктам и технологиям ETERNUS 7 2013 FUJITSU TECHNOLOGY SOLUTIONS Семейство продукции ETERNUS DX Экономичный ETERNUS DX60 S2 Начальный ETERNUS DX80 S2/DX90 S2 Средний Уровень предприятия ETERNUS DX410 S2 ETERNUS DX440 S2 ETERNUS DX8700 S2 Концепция эффективной взаимозаменяемости компонентов внутри семейства Единые компоновочные блоки, унифицированное управление Same disk types Same mgmt. SW Same disk shelves Сохранение инвестиций, простое обновление Эффективное администрирование Взаимодействие между любыми уровнями 8 2013 FUJITSU TECHNOLOGY SOLUTIONS ETERNUS DX S2: что внутри Полностью зарезервированная архитектура Процессоры Intel XEON Работает ОС реального времени – VxWorks Количество задач ограничивается только памятью 256 уровней приоритетов задач Где применяется: Phoenix Mars Lander, телекоммуникационное оборудование, медицинское оборудование, интеллектуальные транспортные системы Большее количество кэша: Средний уровень: до 96 ГБ (DX440 S2) High-End: до 1152 ГБ (DX8700 S2) Интерфейс внутренних межсоединений: 6G SAS Интерфейсы подключения хостов: 1/10Gbit/s iSCSI, FC (8/16Gbit/s), FCoE, SAS Диски: Поштучно Разные в одну полку 9 2013 FUJITSU TECHNOLOGY SOLUTIONS ETERNUS DX S2: единые средства управления Репликация Remote Equivalent Copy Automated Storage Tiering Эффективность Thin Provisioning Disk based Encryption Шифрование Controller Encryption Надежность и отказоустойчивость Reliability / RAID Protection Redundant Controller and Components Функционал DX60 S2 DX80 S2 DX90 S2 DX400 S2 DX8700 S2 ETERNUS SF Express ETERNUS SF (Storage Cruiser, Advanced Copy Manager) Гибкая система управления Единая продуктовая линейка – оптимальная стоимость эксплуатации 10 2013 FUJITSU TECHNOLOGY SOLUTIONS ETERNUS DX S2: связность и совместимость Можно копировать данные между различными по уровню моделями, что позволяет организовать копирование нескольких маленьких систем на одну большую Резервная площадка Производственные площадки SAN SAN ETERNUS DX90 S2 WAN ETERNUS DX90 S2 ETERNUS DX410 S2 ETERNUS DX8700 Единая продуктовая линейка – высокая гибкость и вариативность 11 2013 FUJITSU TECHNOLOGY SOLUTIONS ETERNUS DX S2: поддерживаемые ОС Поддержка UNIX и серверов стандартной архитектуры Windows/Linux UNIX PRIMEPOWER PRIMEQUEST Company D Company E server SPARC Enterprise PRIMERGY SAN (FC/FCoE/iSCSI/SAS) Company A server Company B server Company C server ETERNUS DX S2 series Oracle Solaris (SPARC) Windows Server 2003 / 2008 (including Hyper-v) Oracle Solaris(x86) Windows Storage Server HP-UX ® VMware AIX 12 Red Hat Ent Linux AS/ES SUSE Linux Ent Server Citrix XenServer 2013 FUJITSU TECHNOLOGY SOLUTIONS Средства контроля: уведомления о событиях Уведомление о событиях без дополнительного ПО Поддерживается три типа внутренних уведомлений, уведомления на удаленный сервер поддержки (детализированная информация о сбое) и уведомления по e-mail Mail server E-Mail SNMP server SNMP Syslog server Syslog REMCS Remote support center ETERNUS DX S2 series 13 2013 FUJITSU TECHNOLOGY SOLUTIONS ETERNUS SF v15 2013 FUJITSU TECHNOLOGY SOLUTIONS Проблемы связанные управлением СХД ИТ администраторы консолидируют свои системы хранения Постоянный рост объемов данных Необходимость минимизировать затраты Консолидация увеличивает объемы данных на каждой системе Увеличение нагрузки по управлению СХД Используемые инструменты должны улучшить уровень обслуживания Больше данных на каждой системе хранения Большие объемы консолидированных данных Виртуализация серверов Различные приложения с различными требованиями Облачные инфраструктуры Управление непрерывностью бизнеса Катастрофоустойчевые решения для инфраструктуры 15 2013 FUJITSU TECHNOLOGY SOLUTIONS Функциональность ETERNUS SF V15 ETERNUS DX range Entry Mid-range High-end DX440 S2 DX8700 S2 DX90 S2 Functions DX80 S2 DX410 S2 DX60 S2 Advanced Copy - Disk-to-disk Backup/Restore - Disk-to-disk Replication ETERNUS SF AdvancedCopy Manager 15 Создание быстрых копий для резервного копирования, управление репликацией. - Конфигурация систем для создания быстрых копий Storage system Management ETERNUS SF Storage Cruiser 15 - Серверы, FC switch, LTO Library, конфигурация и управление - Визуализация ресурсов - Управление производительностью - Управление сбоями Конфигурация СХД, мониторинг производительности, управления сбоями 17 2013 FUJITSU TECHNOLOGY SOLUTIONS Единый интерфейс для любых операций ETERNUS DX Web GUI Интеграция в систему ETERNUS DX Начальные установки Central Storage Infrastructure Mgmt. ETERNUS SF Web Console ETERNUS SF (installed on server) ETERNUS SF Web console Управление инфраструктурой ETERNUS SF Ежедневные операции Storage Management User Interface Connected over LAN Standard Internet Browser Secure Connection ETERNUS DX Web GUI ETERNUS DX Web GUI ETERNUS DX Web GUI Local Storage Device Management 18 2013 FUJITSU TECHNOLOGY SOLUTIONS ETERNUS DX Web GUI Начальные установки при помощи мастера Операции по администрированию Конфигурация системы Подключения Компоненты Volumes RAID группы Thin provisioning AdvancedCopy Визуализация статуса системы и компонентов Информация о сбоях 19 2013 FUJITSU TECHNOLOGY SOLUTIONS ETERNUS SF Web Console Решение для всей инфраструктуры хранения Управление всеми дисковыми системами ETERNUS DX от начальных до корпоративных Компоненты SAN сети (FC) Серверы подключенные к SAN (НВА) Виртуализированные серверы Management PC Web console ETERNUS SF Management Server LAN Storage Infrastructure Server HBA NIC FC, FCoE, iSCSI, SAS host interface visualization Tape library SAN disk array SAN disk array (iSSCI connection) SAN disk array 20 2013 FUJITSU TECHNOLOGY SOLUTIONS Универсальный интерфейс управления ETERNUS SF Легкий в использовании Эргономичный Интуитивно понятный интерфейс Нет высоких требований к администратору Древовидная структура ресурсов Обзор состояния систем Детализированная информация о компонентах и событиях Снижение затрат Устойчивая работа Улучшенная доступность Простая лицензионная политика Выполнение сложных операций 21 2013 FUJITSU TECHNOLOGY SOLUTIONS Поддержка мастеров на этапах управления Поддержка различных мастеров для Конфигурированию Полное конфигурирование за три шага Простое расширение при помощи мастера Управления Выбор мастера для каждой задачи One touch backup Устранения неисправности Информативные сообщения Объяснения процедуры устранения неисправности 1 Choose from menu 2 Check status 3 Define action 22 2013 FUJITSU TECHNOLOGY SOLUTIONS Начните с ваших задач ETERNUS SF Express ETERNUS SF Поставляется с системами начального уровня Простое обновление лицензионным ключом Рост системы вместе с системами Расширение в соответствии с требованиями Оплата только необходимых функций Структурированные функции о обновляемые модули Интегрированный лицензионный менеджер Использование текущей среды без модификации 2013 FUJITSU TECHNOLOGY SOLUTIONS Операции управления в ETERNUS SF SAN management Performance management Application I/O prioritization Fault management Thin provisioning Tiered storage The green data center AdvancedCopy 2013 FUJITSU TECHNOLOGY SOLUTIONS Операции для всего функционала средствами ETERNUS SF Единая концепция управления для всего диапазона систем ETERNUS DX Поддержка основных функций по управлению системами Управление и контроль за всеми компонентами SAN инфраструктуры Disaster Recovery Репликация Remote Equivalent Copy Local Advanced Copy Automated Storage Tiering Эффективность Thin Provisioning Disk based Encryption Шифрование Controller Encryption Защита данных Reliability/Raid Protection Отказоустойчивость Redundant Controller and Components Functionality DX60S2 Управление системами хранения DX80S2 DX90S2 DX400S2 DX8700S2 ETERNUS SF Express ETERNUSS SF 25 2013 FUJITSU TECHNOLOGY SOLUTIONS Управление инфраструктурой SAN Управления путями доступа Проверка путей Автоматическое и ручное определение Сообщения об ошибках и сбоях Отображение состояния подключений Между компонентами Устройств хранения Физических подключений Серверов Виртуальных машин 26 2013 FUJITSU TECHNOLOGY SOLUTIONS Мониторинг производительности Графическое отображение информации о производительности Дисковых систем и FC коммутаторов Получение информации по SNMP Отображение исторической информации Выявление узких мест Установка порогов и генерация предупреждений Создание отчетов в формате CSV Threshold setting Raid reconfiguration Migration, etc. Performance management Lifecycle Monitoring Threshold alarm log Check resources and trends 27 2013 FUJITSU TECHNOLOGY SOLUTIONS Управление приоритетами (QoS) Требования к качеству обслуживания (QoS) СХД (I/O, cache) используется для разнотипных нагрузок На одной системе могут находиться продуктовые данные и разработка Возможны пиковые нагрузки связанные с регламентными работами, резервным копированием, реорганизацией баз данных… Server A (High priority) Server B (Low priority) Server C (Low priority) I/O is processed in the received order No suitable performance for each server priority Without Host-LU QoS Throughput A Throughput B Throughput C 28 Server A: Insufficient performance when Server B/C generate heavy I/O workloads Server B: More-than-expected performance through low priority Server C: Sufficient performance though low priority 2013 FUJITSU TECHNOLOGY SOLUTIONS Функция Host-LU QoS Включение нескольких уровней для приложений Установка приоритетов на доступ к данным Управление вводом-выводом Установка шаблонов ввода-вывода для приложений, таких как random, sequential, read, write, read and write Использование расписания для применения различных настроек QoS Server A (High priority) Server B (Low priority) Server C (Low priority) Control amount of I/O from servers based on the specified QoS performance level Without Host-LU QoS Throughput A Throughput B Throughput C Set QoS performance levels (IOPS/MBPS) 29 Server A: Sufficient performance Server B: Lower performance than the specified QoS performance level Server C: Lower performance than the specified QoS performance level 2013 FUJITSU TECHNOLOGY SOLUTIONS Управление сбоями Опрос устройств по сети используя SNMP, ping уникальные протоколы Настраиваемый конфигурационный файл Проверка вручную Отображение состояния устройства Уведомление по Email Постоянный мониторинг устройств Ранее обнаружение неисправностей Немедленные действия по устранению ошибки Troubleshooting assistant Пояснения действий Server node (host) Manager SNMP Trap Receive SNMP Trap Analyze SNMP Trap Agent XML definition file Set event levels Display events logs Fibre Channel switch/ hub/router Display device events Centric Mgr. linkage Change icon colors Display revolving light icon Storage device 30 2013 FUJITSU TECHNOLOGY SOLUTIONS Тонкое выделение ресурсов (Thin provisioning) Виртуализация емкости системы хранения Физические диски управляются как общий пул Виртуальные тома выделяются серверам Эффективное использование дискового пространства Улучшение утилизации ресурсов дисков Сокращение не используемого объема дисков Возможность начать с минимального объема и покупать по мере расширения ETERNUS SF поддерживает Пороги Статус предоставленного объема Оценка недостающего пространства Изменения утилизации Сбор данных ETERNUS DX Add disks Eternus DX8700 Pool#10 Eternus DX8700 Pool#10 More free space Alert Free Space Threshold Threshold Free Space 31 2013 FUJITSU TECHNOLOGY SOLUTIONS Многоуровневое хранение (Storage Tiering) Random access performance Tiered Storage Существуют диски различного типа: Nearline-SAS, SAS, SSD (Solid State Disk) Возможность оптимизации хранения Fujitsu comparison between SSD and Fibre channel disc drivers (15,000 rpm). FC-HDD Эффективность использования SSD дисков SSD для Tier 0 малого объема Высокая производительность но дорогая технология Для данных с высоким требованиям к IOPS Многоуровневое хранилище перемещает медленные данные на медленные диски Даже малый объем SSD способен увеличить производительность СХД в целом В SSD дисках отсутствует движущиеся части и низкое энергопотребление Поддержка защиты данных ECC SDD About 14 times The above chart is based on the use of ETERNUS DX400/DX8000 series. Power consumption Fujitsu comparison between SSD and Fibre channel disc drivers (15,000 rpm) in operation. FC-HDD SDD About by 40% The above chart is based on the use of ETERNUS DX400/DX8000 series. 32 2013 FUJITSU TECHNOLOGY SOLUTIONS Automated Storage Tiering (AST) Автоматизация на ETERNUS DX Позволяет управлять несколькими уровнями как единым целым Автоматическая классификация данных и применение политик Нужные данные на своем месте Высокая производительность Мониторинг ETERNUS SF Управление иерархией СХД Управление назначением и расположением данных Автоматическое перемещение данных Прозрачно для серверов и приложений Не требует изменений на серверах LAN ETERNUS SF Access frequency is monitored and optimization is applied ETERNUX DX Management Server Access frequency Automated relocation during business operation SSD Fastest – reliable High Fast response time Online disk Fast – reliable Nearline disk Large – cheap Low 33 Low cost, high capacity 2013 FUJITSU TECHNOLOGY SOLUTIONS Green Data Center ETERNUS SF Мониторинг активности сервера и СХД Отображение энергопотребления и температуры ETERNUS DX с функцией Eco-mode Технология MAID (Massive Array of Idle Disk) Eco-mode включается для RAID группы Включение выключение по расписанию или согласно политик Сценарии Резервное копирование Использование для специфических задач Green Policy Innovation ETERNU S SF Business operations Start disk rotation Backup Business volumes Business volumes 600 GB SAS disk (20 units) RAIDS (3+1), 8.0 TB1 Third generation backup End disk operation Business operations Business volumes Backup command ETERNU S SF Backup volumes Off Off Disk rotation Backup volumes Off 1 TB nearline SAS disk (36 units) RAIDS (3+1), 24.1 TB1 Rotation start/stop command 34 Backup volumes Off Off Off Annual saving: app. 7300 kWh CO2 saving: 324 kg 23 cedar trees2 All disks (36) ON for 4 hours 2013 FUJITSU TECHNOLOGY SOLUTIONS AdvancedCopy 2013 FUJITSU TECHNOLOGY SOLUTIONS Централизованное управление с AdvancedCopy ETERNUS DX предлагает встроенную функциональность AdvancedCopy для поддержки сервисов 24 × 7 Широкий выбор snapshot Синхронная и асинхронная репликация Локальная репликация Автоматические функции восстановления Поддержка различный вариантов для резервного копирования и архивирования Поддержка миграции данных на ленты Поддержка виртуализации Интеграция с приложениями и базами данных Web console LAN ETERNUS SF AdvancedCopy Manager (Agent) ETERNUS SF AdvancedCopy Manager (Manager) Business server Management server Copy command Copy ETERNUS DX Business Business Replication Business Backup (business interruption time) AdvancedCopy: close to 0:00 36 2013 FUJITSU TECHNOLOGY SOLUTIONS ETERNUS DX S2: эффективное копирование QuickOPC OPC + Источник + Адресат Полная копия (клон) Дифф. копия После первого резервного копирования всех данных, копируются только обновленные блоки Копируются все данные с источника SnapOPC / SnapOPC+ Источник Адресат Источник EC / REC Источник Адресат Изменения Адресат Копирование Копия Непрерывное копирование (зеркалирование) всех данных с источника на адресат Фиксируются только изменения 38 38 2013 FUJITSU TECHNOLOGY SOLUTIONS Сценарии использования AdvancedCopy 2013 FUJITSU TECHNOLOGY SOLUTIONS Резервное копирование и архивирование на диски Nearline-SAS Disk-to-disk backup Nearline-SAS для временного хранения и быстрого восстановления Long-term storage Nearline-SAS для редко используемых данных (e-mail archives, multi-media files, CAD, Office documents) Резервное копирование Disk-toDisk-to-Tape Server SAN Data management for generations Advanced copy function High speed copy Original data Online disk drive Backup data High speed recovery Reference data Backup Nearline disk drive Tape library ETERNUS DX disk storage systems 40 2013 FUJITSU TECHNOLOGY SOLUTIONS Аварийное восстановление с Remote Copy Удаленная репликация данных без сервера Быстрое восстановление на основной системе Поддержка FC и WAN подключений Main site Backup site ETERNUS SF AdvancedCopy Manager ETERNUS SF AdvancedCopy Manager Copy source Disaster recovery using Remote Copy ETERNUS DX Disk storage systems Copy destination ETERNUS DX Disk storage systems 41 2013 FUJITSU TECHNOLOGY SOLUTIONS Поддержка Disk-to-disk для различного окружения Одинаковые операции для нескольких виртуальных сред Снижение сложности и уменьшение затрат VMware Windows Server Hyper-V Создание клонов без остановки базы данных Oracle DB2 Symfoware Microsoft SQL Server Microsoft Exchange Server Virtualized environments Backup server Host OS Guest OS1 ETERNUS SF AdvancedCopy Manager Guest OS2 Disk-to-Disk ETERNUS DX disk storage systems 42 2013 FUJITSU TECHNOLOGY SOLUTIONS ETERNUS SF на первый взгляд ETERNUS SF Управление всеми системами ETERNUS DX в инфраструктуре хранения данных Виртуализация соединений между системами хранения и физическими или виртуальными серверами Мониторинг и раннее выявление проблем с производительностью Уменьшение начальных затрат с функцией thin provisioning Управление сбоями и мастер разрешения неисправностей Оптимизация ресурсов с функцией AST Уменьшение энергозатрат с Eco-mode Централизованное управление функциями AdvancedCopy 43 2013 FUJITSU TECHNOLOGY SOLUTIONS Демонстрация 2013 FUJITSU TECHNOLOGY SOLUTIONS Схема стенда 45 2013 FUJITSU TECHNOLOGY SOLUTIONS В заключении 2013 FUJITSU TECHNOLOGY SOLUTIONS Почему ETERNUS DX Высокое качество Изначально высокие требования к системам хранения Fujitsu Национальная специфика производства Большой опыт Долгосрочная стратегия развития Разработка аппаратного и программного обеспечения собственными силами внутри Fujitsu Устойчивость и предсказуемость избранного технологического решения Доступность и полнота охвата Производство расположено в EMEA Второй и третий уровень поддержки – в EMEA Полнота решений по хранению и управлению хранением данных Все необходимое от одного поставщика Унифицированное ПО для управления системами хранения Единая среда управления Одни раз выучил, управляешь любой системой СХД от Fujitsu – передовое решение по производительности и функциональности 47 2013 FUJITSU TECHNOLOGY SOLUTIONS Гарантия и техническая поддержка Гарантия для систем ETERNUS DX составляет 3 года Возможны варианты расширения поддержки, уменьшения сроков реакции, продления поддержки. 48 2013 FUJITSU TECHNOLOGY SOLUTIONS http://www.fujitsu.com/fts/products/computing/storage/software/eternus ETERNUS SF Search 2013 FUJITSU TECHNOLOGY SOLUTIONS 2013 FUJITSU TECHNOLOGY SOLUTIONS 2013 FUJITSU TECHNOLOGY SOLUTIONS