środowiskach z pe łną - poland.emc.com · Obniżenie kosztów eksploatacji przez: •Ułatwienie...
Transcript of środowiskach z pe łną - poland.emc.com · Obniżenie kosztów eksploatacji przez: •Ułatwienie...
1 Copyright 2011 EMC Corporation. All rights reserved.
Jak zreorganizować składowanie danych w skonsolidowanych środowiskach z pełną automatyzacją. FAST VP w praktyce
Tomasz Badurka, Zbigniew Brysiak (Bank Pekao S.A.), Paweł Albert (EMC)
EMC Forum 2011, Warszawa
2 Copyright 2011 EMC Corporation. All rights reserved.
Agenda
Krótki wstęp
Odrobina teorii
Praktyka – w Banku Pekao S.A.
Co dalej z FAST VP?
3 Copyright 2011 EMC Corporation. All rights reserved.
Wyzwania projektowe = sztuka balansowania
• Skonsolidowane zasoby storage, heterogeniczne środowisko
• Odświeżenie technologii
• Konieczność zapewnienia skalowalnej platformy, gotowej na ciągły rozwój systemów i przyrost danych
• Konieczność utrzymania dyscypliny budżetowej w IT
• Optymalizacja wykorzystania zasobów
• Zapewnienie odpowiednich SLA (wydajność, dostępność) i reakcja na zmienność obciążenia
• Dostępność klasy Enterprise vs. prostota zarządzania
Private cloud
4 Copyright 2011 EMC Corporation. All rights reserved.
Nasz wybór – EMC Symmetrix VMAX • Klasa światowa – High-end/Enterprise
• Przewidywalna wydajność i potężna skalowalność
• Dostępność 7x24 – dla najbardziej krytycznych aplikacji
• Pełne spektrum technologii do wyboru – dyski EFD, FC (SAS), SATA, poziomy RAID
• Narzędzia migracyjne
• Intuicyjne zarządzanie
• Thin provisioning
• Automatyczna optymalizacja wydajności – FAST VP
The world’s most trusted storage
platform
5 Copyright 2011 EMC Corporation. All rights reserved.
Fully Automated Storage Tiering (FAST VP)
• Stworzony z myślą o optymalizacji storage – Najwyższa wydajność – Największa pojemność – Najniższy koszt
• Dynamicznie rozlokowuje informacje – Dane “Hot” na ultra-szybkim tierze Flash – Dane “Cold” na tanim, pojemnym tierze SATA
• Optymalizuje utylizację zasobów dyskowych, adekwatnie do zdefiniowanych polityk
• Zapewnia gwarantowane poziomy SLA – Dane zawsze znajdą się w odpowiednim tierze, o
oczekiwanych parametrach – Jest adaptacyjny – obserwuje zachowanie
systemu i „żyje” wraz z nim
SATA
Fibre Channel
Flash
6 Copyright 2011 EMC Corporation. All rights reserved.
FAST VP w praktyce
FAST: Tiery FAST: Polityki Storage Grupy
PROD 5%
100%
100%
TEST 20%
100%
Ultra High Performance Tier 200 GB EFD RAID 5 (7+1)
High Performance Tier 146 GB 15K FC RAID 1
High Capacity Tier
1 TB SATA RAID 6 (6+2)
SAP_SG
Oracle_SG?
Dev_SG?
Krok po kroku – nie ma nic prostszego!
Przygotowanie zasobów
Definicja polityk
Przypisanie dla aplikacji
8 Copyright 2011 EMC Corporation. All rights reserved.
FAST VP w praktyce,
czyli jak to było w Banku Pekao S.A.
9 Copyright 2011 EMC Corporation. All rights reserved.
Stan przed migracją
SRDF /S
DMX 3 – Ośrodek I DMX 3 – Ośrodek II
Serwery Serwery
Sieć SAN
10 Copyright 2011 EMC Corporation. All rights reserved.
Opis środowiska
Sieć SAN dual-fabric
PowerPath – multipathing i load-balancing
Replikacja synchroniczna SRDF • Klastry rozległe (HP MetroCluster, MSCS - EMC SRDF/Cluster
Enabler, AIX HACMP/PowerHA)
Host-based mirroring – LVM obsługujący wolumeny logiczne z obu macierzy w RAID-1
11 Copyright 2011 EMC Corporation. All rights reserved.
Stan przed – dyski
Fizyczne grupy dyskowe
Hypery stałej wielkości – 8.74GB, z których budowane wolumeny logiczne
Wszystkie przestrzenie w protekcji RAID-10
Dyski BCV, na potrzeby backupu – bez protekcji RAID
12 Copyright 2011 EMC Corporation. All rights reserved.
Założenia projektu
Dostosowanie technologii macierzy dyskowych do bieżących potrzeb systemów informatycznych
Zachowanie dotychczasowych funkcjonalności: replikacji danych SRDF, tworzenia kopii zasobów dyskowych TimeFinder BCV
Obniżenie kosztów eksploatacji przez: • Ułatwienie zarządzania zasobami macierzowymi • Wdrożenie technologii pozwalającej na podniesienie wydajności, przy
jednoczesnym obniżeniu zużycia energii elektrycznej i poprawie wykorzystania zasobów dyskowych
13 Copyright 2011 EMC Corporation. All rights reserved.
Analiza stanu obecnego – narzędzia
Tier Advisor Narzędzie „wewnętrzne” EMC
Porady i rekomendacje, jak przygotować/przebudować poszczególne tiery storage
Pozwala interaktywnie modelować optymalną konfigurację, umożliwia manipulowanie konfiguracją fizyczną, tierów, polityk storage, itp.
Analizy porównawcze wariantów
• Wariant najtańszy możliwy? • Najbardziej zorientowany na wydajność? • Zbalansowany – price/performance? • Najprostsza konfiguracja? • Możliwość oferowania różnych SLA?
Doskonały jako inicjalny krok przed uruchomieniem FAST-a
14 Copyright 2011 EMC Corporation. All rights reserved.
Proces analizy środowiska
Wprowadzone dotychczasowe konfiguracje DMX3 jako „Base”
Stworzone różne warianty modelu tierowego – porównanie parametrów (na czym zależy nam najbardziej?)
Dodatkowe zasoby – zapas na rozwój środowiska
Wybór i wycena
15 Copyright 2011 EMC Corporation. All rights reserved.
Przebieg projektu
Ilość migrowanych systemów: 47
Migrowane aplikacje: • na dedykowanych
grupach dysków - 7 • na
współdzielonych grupach dysków - 40
Według typu OS:
• HP-UX - 12 • AIX - 23 • Linux - 4 • Windows - 8
Czas trwania
migracji -cztery
miesiące
Ilość transz migracyjnych
- 12
16 Copyright 2011 EMC Corporation. All rights reserved.
Stan obecny – po migracji
2 macierze VMAX, 2 ośrodki DC
Obie konfiguracje identyczne sprzętowo • 2x VMAX Engine: 4 pary FA, 4 pary DA, 128GB
cache • Dyski – o tym nieco dalej • Zachowaliśmy dyski i mechanizmy BCV dla
potrzeb backupowych (RAID-5)
17 Copyright 2011 EMC Corporation. All rights reserved.
Dyski, ale już w pulach. Pojawiły się
tiery
VMAX A (Ośrodek I) VMAX B (Ośrodek II)
Typ dysków (disk pool) Protekcja Typ dysków (disk pool) Protekcja
EFD RAID5 (7+1) EFD RAID5 (7+1)
FC 15k 2-Mir FC 15k 2-Mir
SATA RAID6 (6+2) SATA RAID6 (6+2)
FC 10k RAID5 (7+1)
18 Copyright 2011 EMC Corporation. All rights reserved.
FAST VP – cel ten sam, inne metody
Symmetrix DMX-3:
grupy dyskowe, LUN-y
Symmetrix VMAX:
pule dyskowe (tiery), wirtualne LUN-y, polityki FAST
vs.
19 Copyright 2011 EMC Corporation. All rights reserved.
No i esencja – FAST VP Daliśmy mu swobodę działania – operuje od samego początku, jeszcze przed rozpoczęciem migracji
Dla całego środowiska, podział aplikacji wg SLA
Ustalone inicjalne polityki, potem czas na przegląd i modyfikacje – zbieramy doświadczenia
100/100/100 – black box?
Nazwa polityki % dyski EFD % dyski FC % dyski SATA
Polityka_premium 30 (obecnie - 16) 100 10 (obecnie - 50)
Polityka_standard 5 70 100
20 Copyright 2011 EMC Corporation. All rights reserved.
FAST VP też się zmienia
My też się go uczymy i „podkręcamy”
Obserwacja efektów działania FAST, zmian na macierzy, utylizacji pul
To mamy obecnie • Premium • Standard
Rozważane propozycje zmian • Premium – obniżenie udziału EFD • Standard – obniżenie udziału FC • Nowa polityka „Lite” – bez udziału EFD
21 Copyright 2011 EMC Corporation. All rights reserved.
Virtual Provisioning
Czyli thin provisioning
Znacznie mniejsza rzeczywista zajętość zasobów dyskowych – nawet do 20% w stosunku do DMX3
Co oznacza, że wcześniej aplikacje alokowały znacznie więcej przestrzeni niż w rzeczywistości wykorzystywały - wielki plus dla VP
22 Copyright 2011 EMC Corporation. All rights reserved.
Zarządzanie zasobami – DMX3 …
SYMCLI
Control Center
+
23 Copyright 2011 EMC Corporation. All rights reserved.
... vs. zarządzanie zasobami – VMAX
SMC =
Symmetrix Management
Console
24 Copyright 2011 EMC Corporation. All rights reserved.
Monitoring zasobów
Symmetrix VMAX z FAST VP - SMC, SPA
vs
Symmetrix DMX-3 - Control Center, Performance Manager
25 Copyright 2011 EMC Corporation. All rights reserved.
Monitoring zasobów – dashboards
26 Copyright 2011 EMC Corporation. All rights reserved.
Monitoring zasobów – w kontekście wybranej aplikacji
27 Copyright 2011 EMC Corporation. All rights reserved.
Monitoring zasobów – trendy
28 Copyright 2011 EMC Corporation. All rights reserved.
Monitoring zasobów – diagnostyka
29 Copyright 2011 EMC Corporation. All rights reserved.
Monitoring zasobów – real-time performance
30 Copyright 2011 EMC Corporation. All rights reserved.
Rozwój, rozbudowy i planowanie
Jest bardziej elastycznie
Jak sprawnie planować? • Przestrzeń dyskowa • Cache • Kwanty rozbudowy
31 Copyright 2011 EMC Corporation. All rights reserved.
Pracochłonność vs tradycyjne podejście
Czy jest teraz: • Łatwiej? • Szybciej? • Mniejsze ryzyko błędu? • Bezpieczniej? • Inaczej?
Czy mamy więcej czasu?
32 Copyright 2011 EMC Corporation. All rights reserved.
FAST VP – czy warto? Czy się sprawdził?
Tak! FAST VP działa zgodnie z założeniami:
• Daje elastyczność konfiguracji • Dynamiczną optymalizację wydajności • Oddzielenie od fizycznej warstwy dysków • Zwolnienie niewykorzystywanych obszarów
dyskowych – Virtual Provisioning
Dla każdego (skonsolidowanego) środowiska!
33 Copyright 2011 EMC Corporation. All rights reserved.
A co na to właściciele aplikacji?
Zasoby pul dyskowych (tiery) pozwalają na strojenie wydajnościowe aplikacji
Dynamiczne podążanie za potrzebami aplikacji poprzez polityki i dostępne zasoby
Potencjał całej macierzy jest dostępny dla poszczególnych aplikacji
34 Copyright 2011 EMC Corporation. All rights reserved.
Project Lightning
Serwer to czy już storage? Jeszcze więcej wydajności. Automatyczny tiering.
35 Copyright 2011 EMC Corporation. All rights reserved.
Lightning Distributed Cache
Module (DCC)
Project Lightning
• Serwer i storage pracujące razem nad obsługą IO
• Pamięć cache dla serwerów
• Inteligentny software
• Automatyzacja FAST – Tier -1
• Turbodoładowanie przezroczyste dla aplikacji
• Skalowalność wraz z liczbą hostów
• Jesteśmy w fazie beta testów
DCC DCC DCC DCC DCC
37 Copyright 2011 EMC Corporation. All rights reserved.
Co z tym FAST-em począć? Podsumowanie • Doskonale sprawdza się w instalacjach w środowiskach produkcyjnych
• Ponad 50% instalowanych nowych VMAX-ów zakupionych z licencją FAST VP
• FAST VP pociąga za sobą również i większe wykorzystanie technologii SATA i EFD
– 92% macierzy VMAX z licencją FAST VP wyposażonych w dyski EFD
– Z drugiej strony – 91% macierzy z tej grupy (FAST VP) wyposażonych w dyski SATA
– Klienci zauważają benefity ...