Data Centre pod kontroląMonitoring infrastruktury, procesy i

narzędzia wspomagające zarządzanie data centre

Opracował: Paweł Wawrzyniak, Nordea Bank Polska S.A., 2012

Data Centre Services Teamw Nordea BP S.A.

Data Centre Services TeamZakres odpowiedzialności• Zespół 6 osób• Odpowiedzialność za:

– Utrzymanie infrastruktury data centre w Polsce, w tym:• Primary Data Centre – utrzymanie za pomocą zasobów własnych• Service Management i nadzór nad jakością usługi Disaster Recovery Centre• Service Management i nadzór nad jakością usługi Primary Data Centre (nowy ośrodek)• Obsługa zleceń serwisowych dotyczących infrastruktury technicznej serwerowni w placówkach

na terenie Polski, a także bieżące utrzymanie (planowe przeglądy).– Definiowanie standardów w dziedzinie data centre w ramach Organizacji (Polska, Kraje Bałtyckie).– Wsparcie projektów (przedsięwzięć) realizowanych w powyższych obszarach odnośnie definicji

wymagań, definicji standardów i zgodności projektów oraz ich wykonania z wymaganiami Banku– Wsparcie procesów outsourcingowych związanych z data centre

• Realizacja zmian w zakresie infrastruktury technicznej IT (zasilanie gwarantowane, klimatyzacja serwerowni, okablowanie) na terenie całej Polski

• Współpraca w ramach powyższych obszarów z innymi jednostkami w ramach Grupy Nordea

Data Centre Services TeamWyzwania

• Bardzo szeroki zakres odpowiedzialności

• Ogromna ilość dokumentów powstających w czasie pracy (w różnych formatach: .docx, .xlsx, .pdf, .dwg, .jpg itd.), dokumentacje projektowe, wykonawcze i powykonawcze, protokoły z przeglądów, harmonogramy prac, specyfikacje wymagań, raporty z awarii, ekspertyzy

• Bieżąca dokumentacja infrastruktury data centre – tworzenie, aktualizacja i utrzymanie

• Efektywna komunikacja, przekazywanie informacji, planowanie i rejestracja działań

Data Centre Services TeamKontekst zmian vs pomysły i narzędzia wsparcia• Od roku 2008 w Organizacji:

– Rozbudowa Podstawowego Ośrodka Przetwarzania– Szybki rozwój Banku w zakresie otwieranych placówek na terenie całej Polski (docelowo

– utrzymanie całości)– Budowa nowego Disaster Recovery Centre– Początki projektu budowy nowego Primary Data Centre

• Ponadto:– Rozbudowa systemów monitorowania infrastruktury, sieci i systemów– Dedykowany Zespół (24/7) odpowiedzialny za monitorowanie (integracja systemów

monitorowania, wspólny punkt zbierania alarmów i kontaktu)– Dojrzewanie procesów w IT – zwiększenie świadomości w zakresie ITIL v3 pośród

wszystkich pracowników IT

Data Centre Services TeamKontekst zmian vs pomysły i narzędzia wsparcia

• W ramach Zespołu DCS:– Dalsza rozbudowa i rozszerzenie funkcjonalności systemu monitorowania

infrastruktury – SNMPc. Integracja z systemem Zabbix (poziom Organizacji)

– Wdrożenie systemu BMS – TAC Vista – w Primary Data Centre

– Wdrożenie systemu zarządzania infrastrukturą fizyczną data centre – DCPIM, Data Centre Physical Infrastructure Manager

Data Centre Physical Infrastructure Manager

Uporządkować chaos

Data Centre Physical Infrastructure ManagerPoczątki…

• Wymagania zdefiniowane przez Zespół Data Centre Services• System wdrożony i uruchomiony pierwszego dnia pracy przebudowanego Primary Data

Centre• Ciągły rozwój i zmiana funkcjonalności w miarę definiowania nowych wymagań. Obecnie

praktycznie brak zmian – ustabilizowana funkcjonalność• Gromadzenie całości wiedzy i dokumentacji na temat podległego obszaru• Wsparcie realizacji i planowania prac:

– Awarie, zmiany, prace planowane, przeglądy zgodne z harmonogramem itp.– Dane historyczne na potrzeby analiz– Aktualna dokumentacja ośrodków

• System pierwotnie wdrożony – na próbę – w ramach Zespołu (in-house development), obecnie znaczne rozwinięty, jeżeli chodzi o zakres funkcjonalności, architekturę rozwiązania i zasięg

• Bardzo łatwa modyfikacja i możliwość integracji z innymi narzędziami

Data Centre Physical Infrastructure ManagerOgólna architektura aplikacji

Data Centre Physical Infrastructure ManagerObecny stan systemu

• Zasięg geograficzny systemu:– Wszystkie ośrodki przetwarzania i placówki Banku na terenie:

• Polski• Litwy• Łotwy• Estonii

• Zarządzanie data centre i dokumentowanie zmian, awarii, prac itd.• Dokumentacje operacyjne sprzętu (wsparcie przeglądów i obsługi awarii)• Kilkanaście kont dla użytkowników, możliwość dostępu R/O• W trakcie integracji z systemem CMDB (osobny projekt w ramach

Organizacji), po udanych testach interfejsu integracyjnego w ramach PoC (Proof-of-Concept)

Data Centre Services TeamWsparcie procesów

• Kontrola dostępu / bezpieczeństwo fizyczne

• Zarządzanie środkami trwałymi• Zarządzanie zmianą• Zarządzanie konfiguracją• Zarządzanie pojemnością• Zarządzanie zdarzeniami• Zarządzanie incydentami• Zarządzanie problemami• Zarządzanie poziomem usług /

negocjacja i kontrola SLA, kontraktów

Data Centre Physical Infrastructure Manager

Prezentacja aplikacji

Data Centre Physical Infrastructure ManagerEkran główny i widok planowanych prac

Data Centre Physical Infrastructure ManagerEkran główny… Planowany przegląd UPS

Data Centre Physical Infrastructure ManagerEkran główny… Zarządzanie środkami trwałymi

Data Centre Physical Infrastructure ManagerZarządzanie środkami trwałymi

Data Centre Physical Infrastructure ManagerZarządzanie środkami trwałymi… Protokoły przeglądów i napraw

Data Centre Physical Infrastructure ManagerZarządzanie środkami trwałymi… Inne dokumenty

Data Centre Physical Infrastructure ManagerZarządzanie środkami trwałymi… Widok szaf IT

Data Centre Physical Infrastructure ManagerEkran główny… Zarządzanie UPS

Data Centre Physical Infrastructure ManagerZarządzanie UPS… Ewidencja urządzeń wraz z umowami

Data Centre Physical Infrastructure ManagerZarządzanie UPS… Podgląd danych wybranego urządzenia

Data Centre Physical Infrastructure ManagerZarządzanie UPS… Szczegółowe dane urządzenia

Data Centre Physical Infrastructure ManagerZarządzanie UPS… Podgląd parametrów pracy (SNMP)

Data Centre Physical Infrastructure ManagerZarządzanie UPS… Napięcie wejściowe (faza 1)

Data Centre Physical Infrastructure ManagerZarządzanie UPS… Obciążenie na wyjściu (faza 1)

Data Centre Physical Infrastructure ManagerZarządzanie UPS… Temperatura i wilgotność

Data Centre Physical Infrastructure ManagerEkran główny… Wyszukiwanie środków trwałych

Data Centre Physical Infrastructure ManagerEkran główny… Zarządzanie UPS

Data Centre Physical Infrastructure ManagerEkran główny… Zarządzanie realizacją wniosków o zmianę

Data Centre Physical Infrastructure ManagerEkran główny… Zarządzanie realizacją wniosków o zmianę

Data Centre Physical Infrastructure ManagerEkran główny… Przegląd wszystkich zdarzeń serwisowych

Data Centre Physical Infrastructure ManagerPrzegląd wszystkich zdarzeń serwisowych

Pozostałe narzędzia wspierające

Monitorowanie data centrei rozległej infrastruktury

Building Management SystemTAC Vista

• Building Management System/SCADA. TAC Vista:• Monitorowanie

parametrów pracy infrastruktury PDC:

• Agregat prądotwórczy, UPS, klimatyzacja, parametry pomieszczeń, kontaktrony, nagrywanie Video.

Network Management SystemSNMPc Enterprise Edition

• Monitorowanie infrastruktury na terenie Polski, w zakresie:• Parametry pracy UPS:

• Napięcie WE/WY (wszystkie fazy), V• Obciążenie (wszystkie fazy), W• Napięcie bypassu (wszystkie fazy) V• Pojemność baterii

• Parametry środowiskowe:• Temperatura i wilgotność w pomieszczeniach technicznych

• Nagrywanie video• NMS (Network Management Systems) – SNMPc Enterprise Edition

• SNMP (v1, v2, v3)• Urządzenia sieciowe – ping;• Usługi nie są monitorowane w tym systemie

• Podział na lokalizacje krytyczne i mniej priorytetowe (szachownica)• Zintegrowany z systemem Zabbix, który działa w Centrum Monitorowania (24/7) –

alarmowanie SMS po przekroczeniu wartości progowych lub po nieoczekiwanym zdarzeniu (notyfikacje SNMP) oraz telefon do administratora na dyżurze

Data Centre Physical Infrastructure ManagerSNMPc… Niestandardowa organizacja ekranu konsoli

Lokalizacje krytyczne

Lokalizacje mniej priorytetowe

Zarządzanie data centrePrzyszłość?

• Dalsza integracja narzędzi i urządzeń do monitorowania z systemami zarządzania infrastrukturą data centre

• Podejście procesowe (ITILv3) i traktowanie data centre jako całości, sumy zasobów podlegających zarządzaniu (konwergencja)

• Dalszy rozwój i popularyzacja systemów DCIM – Data Centre Infrastructure Management• Dlaczego?

– Większa kontrola nad podległym obszarem– Efektywne wykorzystanie zasobów, przyjazność środowisku– Mniejsze koszta utrzymania (regularny serwis i kontrola)– Jeden wspólny punkt zarządzania całością

• Plany na przyszłość?– Integracja DCPI Manager z CMDB – zasilenie danymi z obszaru data centre– Wdrożenie systemu DCIM dla kluczowych lokalizacji– Dalszy rozwój systemu DCPI Manager– Dalszy rozwój systemu SNMPc w ramach kompleksowego systemu monitorowania serwerowni (KMS)

Pytania

Dziękuję