Prezentacja wstępna

Warsztaty „Usługa powszechnej archiwizacji”

Norbert Meyer, PCSS

Prowadzący: Rafał WolińskiLubMAN UMCS

PLATON-U4 Plan prezentacji

Projekt PLATON 5 usług wspólnych

Usługa powszechnej archiwizacji (U4) Cechy Krajowego Magazynu Danych (KMD)

BEZPIECZEŃSTWOBEZPIECZEŃSTWO

SIECISIECI

USŁUGIUSŁUGIDODANEDODANE

DANEDANEGRIDYGRIDY

USŁUGIUSŁUGIWSPÓLNEWSPÓLNE

PIONIER2PIONIER2

Inteligentna Inteligentna infrastruktura e-Naukiinfrastruktura e-Nauki

KONCEPCJA PLATFORM KONCEPCJA PLATFORM OBSŁUGI OBSŁUGI

PLATONPLATONETAP 1ETAP 1

BEZPIECZEŃSTWOBEZPIECZEŃSTWO

SIECISIECI

USŁUGIUSŁUGIDODANEDODANE

DANEDANEGRIDYGRIDY

USŁUGIUSŁUGIWSPÓLNEWSPÓLNE

PLATO

N

PLATO

NET

AP 2

ETAP

2

PLATON

PLATON

ETAP 3ETAP 3

Doposażenie Doposażenie sieci MAN sieci MAN„„NewMAN”NewMAN”

DoposażenieDoposażenie sieci PIONIER sieci PIONIER

Kontener Kontener usług wspólnychusług wspólnych

PLATPLATFORMA FORMA OOBSŁUGI BSŁUGI NNAUKI- AUKI- PLATONPLATON

WNIOSEK POIG-2.3 – WNIOSEK POIG-2.3 – KONKURS NR IKONKURS NR I„„Platforma Obsługi Nauki PLATON Platforma Obsługi Nauki PLATON – – Etap I: Kontener usług wspólnych”Etap I: Kontener usług wspólnych”

Partnerzy1. Instytut Chemii Bioorganicznej Polskiej Akademii Nauk – Poznańskie Centrum Superkomputerowo-Sieciowe2. Uniwersytet Technologiczno-Przyrodniczy im. Jana i Jędrzeja Śniadeckich3. Akademia Górniczo-Hutnicza im. Stanisława Staszica – Akademickie Centrum Komputerowe Cyfronet4. Instytut Uprawy, Nawożenia i Gleboznawstwa – Państwowy Instytut Badawczy5. Uniwersytet Marii Curie-Skłodowskiej LUBMAN UMCS6. Politechnika Białostocka7. Politechnika Częstochowska8. Politechnika Gdańska CI TASK9. Politechnika Koszalińska10. Politechnika Łódzka11. Politechnika Radomska12. Politechnika Rzeszowska13. Politechnika Szczecińska14. Politechnika Śląska – Centrum Komputerowe15. Politechnika Świętokrzyska16. Politechnika Wrocławska17. Uniwersytet Mikołaja Kopernika18. Uniwersytet Opolski19. Uniwersytet Warmińsko-Mazurski20. Uniwersytet Warszawski – Interdyscyplinarne Centrum Modelowania Matematycznego i Komputerowego21. Uniwersytet Zielonogórski22. Naukowa i Akademicka Sieć Komputerowa

PLATFORMA OBSŁUGI PLATFORMA OBSŁUGI NAUKI NAUKI – ETAP 1: KONTENER USŁUG – ETAP 1: KONTENER USŁUG WSPÓLNYCH WSPÓLNYCH

PŁASZCZYZNA ZARZĄDZANIAPŁASZCZYZNA ZARZĄDZANIA

USŁUGI TELEFONII IP

USŁUGI PKI

USŁUGI WIDEOKONFERENCJI

USŁUGI EDUROAM

USŁUGI KAMPUSOWE

USŁUGI POWSZECHNEJ ARCHIWIZACJI

USŁUGI NAUKOWEJ INTERAKTYWNEJ HDTV

U6

U7

U1

U2

U3

U4

U5

U1. USŁUGI U1. USŁUGI WIDEOKONFERENCJIWIDEOKONFERENCJI

Węzeł głównyWęzeł główny

• MCU (do 40 połączeń FULL HD)• GATEKEEPER (rejestracja min. 100 urządzeń)• Serwer archiwizacji (10 połączeń równocześnie min. 30 h)• Serwer strumieniowania (min. 400 użytkowników)

Węzeł wideokonferencyjnyWęzeł wideokonferencyjny

• Kodek H.323/SIP (FULL HD)• Monitor LCD (52”1080p)• Projektor (1080p)• Kamera, mikrofon, głośniki, oprogramowanie

U2. USŁUGI EDUROAMU2. USŁUGI EDUROAM

U3. USŁUGI KAMPUSOWE U3. USŁUGI KAMPUSOWE (1)(1)

Maszyny wirtualne na

żądanie

Aplikacje graficzne

Inne typy zadań (np. wsadowe)

Windows HPC Server 2008 w środowisku Microsoft

Warstwa zarządzająca całym środowiskiem (open-source)

Lokalne systemy zarządzania zasobami

U3. USŁUGI KAMPUSOWE U3. USŁUGI KAMPUSOWE (2)(2)

węzeł dostępowy + storage

InfiniBand

Gigabit Ethernet

Ethernet (zarządzanie)

Węzły przetwarzające (usługowo-obliczeniowe)

U5. USŁUGI NAUKOWEJ U5. USŁUGI NAUKOWEJ INTERAKTYWNEJ HDTVINTERAKTYWNEJ HDTV

(1) (1)

U5. USŁUGI NAUKOWEJ U5. USŁUGI NAUKOWEJ INTERAKTYWNEJ HDTVINTERAKTYWNEJ HDTV

Camera Team

Production Studio

Studia produkcyjne i zespoły kamerowe

USŁUGA POWSZECHNEJ USŁUGA POWSZECHNEJ ARCHIWIZACJIARCHIWIZACJI

U4 U4

PLATON-U4: KMD – Krajowy Magazyn Danych

– projekt rozwojowy (2007-2009)w ramach którego powstało oprogramowanie

PLATON-U4 – „Usługa powszechnejarchiwizacji” – wdrożenie oprogramowania KMD dla użytkowników EDUkacyjnych (2010)

Konsorcjum i lokalizacje: PCSS Poznań CYFRONET AGH Kraków TASK Gdańsk WCSS Wrocław ICM UW Warszawa BiaMAN Białystok LubMAN Lublin LodMAN Łódź Politechnika Częstochowska Częstochowa Politechnika Świętokrzyska Kielce

PLATON-U4: Kim jesteśmy

Cele szczegółowe: Zabezpieczenie fizyczne danych Zapewnienie i kontrola

integralności logicznej danych Poufność danych Długoterminowe przechowywanie

i udostępnianie kopii zapasowych Dostarczenie narzędzi wspierających

wykonywanie kopii danych

PLATON-U4: Cele i założenia

Cel nadrzędny: Pomoc użytkownikom i instytucjom

w ZABEZPIECZENIU ich danych=> „Usługa Powszechnej Archiwizacji”

Co: Długoterminowa archiwizacja danych Kopie zapasowe

Przechowywanie 2-go poziomu!! (ang. Secondary Storage) Zakładamy, że użytkownicy mają lokalne systemy przechowywania

LOKALNYSYSTEM

PRZECHOWYWANIA

Użytkownik SiećPIONIER Usługa PLATON-U4

KOPIA ARCHIWALNA/ZAPASOWA

PLATON-U4: Zastosowania: co, dla kogo

Dla kogo: Instytucje edukacyjne:

repozytoria cyfrowe, infrastruktura EDU-IT, instytucje naukowe, naukowcy, studenci Pracownicy uczelni, naukowcy, studenci

PLATON-U4: Realizacja i przykładowe cechy usługi Zabezpieczenie fizyczne danych:

Replikacja geograficzna Rozproszona infrastruktura:

12,5 PB pamięci taśmowych – w 5 lokalizacjach – automatyczne biblioteki taśmowe 2 PB pamięci dyskowych – w 10 lokalizacjach – macierze dyskowe i serwery plików 70 serwerów oraz sieci SAN (ang. Storage Area Network) i 10Gbit Ethernet

Podstawowe cechy usługi - replikacja

Użytkownik Usługa PLATON-U4Dane użytkownika

CentrumDanych 1

CentrumDanych 3

CentrumDanych 2

Replika 1 Replika 2 Replika 3

R E P L I K A C J A

Usługa PLATON-U4

CentrumDanych 1

CentrumDanych 3

CentrumDanych 2

Replika 1 Replika 2 Replika 3

O D T W A R Z A N I EDane dostępne!

Użytkownik Dane użytkownika

Podstawowe cechy usługi - replikacja

Zabezpieczenie fizyczne danych: Bezpieczne centra danych

Podstawowe cechy usługi - bezpieczeństwo

Redundantna klimatyzacjaWiele linii zasilania System wczesnego ostrzegania

Serwerownia w PCSS

Monitoring wizyjny

Zapewnienie i kontrola integralności logicznej danych: Wyliczanie skrótów kryptograficznych

danych umieszczanych i składowanych

Poufność danych: Dane szyfrowane w drodze do systemu:

Wsparcie dla SSH, HTTPS Dane szyfrowane wewnątrz systemu:

• Łącza zabezpieczone kryptograficznie• Sprzętowe szyfrowanie

w technologii taśmowej LTO4 / LTO5

Kontrola dostępu

Podstawowe cechy usługi - bezpieczeństwo

Dostosowanie cech usługi do wymagań użytkownika profile użytkownika

Liczba kopii, lokalizacja, szyfrowanie, …

Łatwość dostępu do danych w trybie on-line

Usługa dostępna w 4Q2010

Dostępna w Platonie dla ośrodków akademickich i jednostek badawczych

Podsumowanie

PLATON-U4 Plan kolejnych prezentacji

Zagrożenia dla danych Praktyczne zagrożenia dla danych: Przykładowe scenariusze

Technologie przechowywania danych: jakie możliwości oferują i jakie są korzyści problemy i ograniczenia związane z ich wykorzystywaniem

Architekturę i mechanizmy systemu realizującego usługę powszechnej archiwizacji:

Jakie funkcje i mechanizmy są wbudowane w system Jakie problemy pozwala to rozwiązać

Praktyczne możliwości skorzystania z usług systemu: Narzędzia i interfejsy systemu Środowisko dostępowe do systemu – PIONIER i sieci miejskie Zamawianie usługi

Kontakt: rafal.wolinski@umcs.lublin.pl

Ankieta: http://kmd.pcss.pl/ankieta

uzytkownik: ankieta

haslo: warsztaty_platon-u4

www.platon.pionier.net.pl/online/archiwizacja.php

kmd.pcss.pl

Dziękuję za uwagę

Rafał Woliński

rafal.wolinski@umcs.lublin.pl