BLOK 1 - WPROWADZENIE DO PIBUK - itl.waw.pl · BLOK 1 - WPROWADZENIE DO PIBUK INSTYTUT...

Copyr i g ht © 2012 , SAS Ins t i tu t e Inc . A l l r ights reser ve d .

BLOK 1 - WPROWADZENIE DO PIBUK

INSTYTUT ŁĄCZNOŚCI, WARSZAWA 2015-11-03


AGENDA

• 9:15 – 10:30 Wprowadzenie do PIBUK

• Przerwa kawowa

• 10:45 – 12:15 Live demo wdrożonego oprogramowania

• Lunch

• 12:45 – 14:00 Funkcjonalności software, dyskusja o

możliwych zastosowaniach


AGENDA – BLOK 1

• Geneza projektu

• Modele pracy

• Możliwe zastosowania (Network Analytics)

• Architektura, hardware, wirtualizacja

• Warstwa software SAS

• Przebieg projektu


GENEZA PROJEKTU, MODELE PRACY


GENEZA PROJEKTU - POTRZEBY INSTYTUTU ŁĄCZNOŚCI

Potrzeby naukowe i badawcze

• Pracownicy IŁ

• Projekty badawcze

• Współpraca z innymi uczelniami i instytutami

Usługi komercyjne – działalność statutowa

• Analiza danych pomiarowych, np. z próbników i drive testów

• Analizy na danych operatorów, np. rozwój i optymalizacja sieci fix i mobile

Dodatkowe usługi komercyjne

• Analytics, Data & Know-How as a Service

• Analizy i usługi analityczne w chmurze, z danymi i wiedzą Instytutu Łączności


GENEZA PROJEKTU – FUNKCJONALNOŚCI W TYPOWYM PROJEKCIE

Real Time Alerts

Bazy danych

Dane aplikacyjne

Pomiary Próbniki

WIZUALIZACJA I ALERTY

ANALITYKA I MODELOWANIE

Data Mining Modelowanie statystyczne

Scoringi, Optymalizacja

PRZETWARZANIE DANYCH

STRUMIENIOWYCH

Filtrowanie,

agregacja, reguły biznesowe

DANE WEJŚCIOWE

INTEGRACJA DANYCH

Extract Transform

Load

Internet

Repozytorium Analityczne

Dan

e

Stru

ktu

raln

e

Dan

e

Stru

mie

nio

we

Eksploracja danych, eksploracja statystyczna, wizualizacja danych,

raportowanie


GENEZA PROJEKTU – ŚRODOWISKA I ELASTYCZNOŚĆ PRACY

ŚRODOWISKA BADAWCZE ŚRODOWISKA KOMERCYJNE

ZARZĄDZANIE ŚRODOWISKAMI Tworzenie, klonowanie, konfiguracja, podłączanie danych, backupy, logi, …

Projekt 3

Projekt 1

Projekt 2

Praktykanci IŁ

Pracownicy naukowi IŁ

Politechnika Warszawska

Politechnika Wrocławska

Projekt 4

development

testy

produkcja

Projekt 5

Analizy

Analytics & data as a Service

development

testy

produkcja

Pracownicy IŁ

Analitycy IŁ

Internet

Pracownicy IŁ

Klient


GENEZA PROJEKTU – ŚRODOWISKA I ELASTYCZNOŚĆ PRACY

ŚRODOWISKA BADAWCZE ŚRODOWISKA KOMERCYJNE

Projekt 4

Projekt 5

Analytics & Data as a Service

Chmura

obliczeniowa

SAS

Warstwa

danych

POSTGRESQL INNE BAZY

RELACYJNE REPOZYTORIUM ANALITYCZNE


MOŻLIWE ZASTOSOWANIA


PRZYKŁADOWE OBSZARY ZASTOSOWAŃ

Network

Capacity Planning &

Deployment Analytics

Dostarczenie dokładnych

prognoz ruchu i

prawdopodobieństwa

wysycenia nadajników w celu

optymalizacji wydatków

przeznaczonego na rozbudowę

i modernizację sieci.

Network Service

Quality Assurance

Analytics

Pogłębione zrozumienie

wpływu poszczególnych

urządzeń, elementów

infrastruktury i ustawień na

doświadczenie klienta poprzez

analizę korelacji ze

zdarzeniami sieciowymi.

Network Control

& Optimization

Analytics

Optymalizacja alokacji

zasobów sieciowych, redukcja

wydatków związanych z

rekonfiguracją i pracami

modernizacyjnymi.

Network Device

Analytics

Analityczne wykrywanie

potencjalnych problemów

technicznych z elementami

sieciowymi, planowanie prac

diagnostycznych i

utrzymaniowych.


Solution allows to

forecast bandwidth

user demand

Identify trends,

seasonality and

event impacts.

Evaluate data traffic

and congestion

probability per each

cell (bubble size –

traffic size, color –

congestion

probability).

Network expansion

requirements

determined at the cell

grain in order to

anticipate forecasted

traffic for it

Opex and Capex

investment

estimation is based

on real pricelists.

The value of traffic

for cell upgrades can

be determined by

analyzing the usage

patterns that each

customer will

conduct.

Network analytics

can help to identify

which cell upgrades

generate the best

ROI, while staying in

line with budget

constraints.

NETWORK CAPACITY PLANNING & DEPLOYMENT ANALYTICS


NETWORK SERVICE QUALITY ASSURANCE ANALYTICS

Poprawa jakości sieci poprzez zmianę

parametrów konfiguracji wybranych

elementów sieci

Model objaśniający zależności pomiędzy

parametrami jakościowymi a konfiguracją

elementów sieci

http://www.google.pl/url?sa=i&rct=j&q=sie%C4%87+sprzeda%C5%BCy&source=images&cd=&cad=rja&docid=hw11YgyummxlrM&tbnid=m4glBnNJkSdd4M:&ved=0CAUQjRw&url=http://twojachwilowka.pl/pl/kontakt/siec_sprzedazy/&ei=5praUdCNOonjOrXdgfAG&bvm=bv.48705608,d.ZWU&psig=AFQjCNHqr0FBC6H360ta3lzV5cqrGudDbg&ust=1373367285292203


ARCHITEKTURA, HARDWARE, WIRTUALIZACJA


DLACZEGO BIZNES ORAZ IT POTRZEBUJĄ IAAS INFRASTRUCTURE

AS A SERVICE)?

IT musi odpowiadać na częstsze i bardziej złożone wymagania biznesowe oraz przygotować się na rozwój i zarządzanie tym rozwojem…

….potrzebuje więcej usług IT dostarczanych w jak najkrótszym czasie…

…musi wprowadzić automatyzację, aby dostarczać zasoby infrastruktury szybciej, efektywniej kosztowo i w

odpowiedniej skali…

Zmiany w biznesie oraz wzrost konkurencji na rynku…

…pozyskuje usługi, aby jak najszybciej i najoptymalniej kosztowo odpowiedzieć na potrzeby rynku.

Wyzwania Wpływ Odpowiedź 1 2 3

Z perspektywy

biznesu

Z perspektywy

IT

… standaryzuje i integruje infrastrukturę IT, aby dostarczyć wydajne zarządzanie cyklem życia usługi, co skutkuje szybszym uzyskaniem usług i wsparcia oraz większymi oszczędnościami.


„KOLEJNY KROK”

Chmura na pokładzie…

Wirtualizacja

Znacząco obniża koszty

Redukuje poziom

skomplikowania

Zwiększa wysoką dostępność

Czas

Efe

kty

wn

oś

ć IT

Cloud

Przyspiesza wdrożenie usług

infrastrukturalnych oraz aplikacji

Optymalizuje wykorzystanie

zasobów, obniżając koszty


USŁUGI PROFESJONALNE – PRZEKSZTAŁCENIE

MOŻLIWOŚCI IT W OSIĄGNIĘCIA BIZNESOWE

Skrócenie czasu życia

projektu – od szkicu do

satysfakcji użytkownika dzięki

aplikacjom i rozwiązaniom

VMware

Przybliżenie przełomu w

biznesie poprzez wdrożenie

skalowalnych innowacji

technologicznych, które mają

istotny wpływ na jego

powodzenie

Redukcja kosztów i

maksymalizacja zwrotu z

inwestycji w chmurę

vRealizeAutomation dzięki

wykorzystaniu pełnego

zasobu zalet i korzyści

oferowanych przez to

rozwiązanie

Uproszczenie Chmury i

zwiększenie jej

niezawodności, efektywności

i skuteczności poprzez

właściwą ocenę gotowości

operacyjnej klienta, rozwijanie

Chmury z myślą o jej

wydajności i wysokiej

dostępności oraz poleganie na

fachowej wiedzy z zakresu

kompatybilności

oprogramowania i zarządzania

przedsiębiorstwem


CYKL ŻYCIA USŁUGI

17

ZDEFINIUJ

Zadefiniuj Grupę Biznesową i zabudżetuj ją

STWÓRZ

Zarezerwuj zasoby i ustal zasady korzystania z nich

URUCHOM

Uruchom usługi korzystające z zasobów chmury prywatnej, publicznej oraz hybrydowej

KONTROLUJ

Kontroluj wykorzystanie zasobów i koszty

MONITORUJ

Monitoruj całą infrastrukturę oraz użytkowników

ZARZĄDZAJ

Optymalizuj i odzyskuj zasoby, bazując na polisach i kosztach

1

2

3

4

5

6


PRZEJRZYSTE KOSZTY I CENY USŁUG

Koszt całkowity

W oparciu o wartości zdefiniowane

oraz integrację z platformą

wirtualizacji

Koszt jednostkowy CPU, pamięć, zasoby

dyskowe

Automatyczna wycena wzorców

Kto czego używa

Koszt i zużycie w

przeliczeniu na jednostkę

biznesową, usługę

Automatyczna generacja raportów finansowych


Elastyczność w

dodawaniu nowych

usług

JEDNOLITY KATALOG USŁUG: APLIKACJE,

INFRASTRUKTURA, XAAS, PULPITY

Personalizacja portalu

Uniwersalny

portal

Kategorie usług

Logo

Usługi

indywidualne

Zarządzanie

uprawnieniami per

usługa


KONCEPCJA PLATFORMY

INFRASTRUKTURA

Użytkownicy

WIRTUALIZACJA

USŁUGI

Przykładowy System Badań i Diagnozowania

Projekt 3 Projekt n

Projekt 1 Projekt 2


WARSTWA SOFTWARE


PLATFORMA PODSTAWOWE KOMPONENTY PLATFORMY

• Warstwa danych

• Przygotowanie danych

• Analizy danych

• Wizualizacja danych

• Modelowanie danych

• Raportowanie (VA i OLAP)


WARSTWA

DANYCH REPOZYTORIUM DANYCH ŹRÓDŁOWYCH

• Źródłem danych dla procesów działających w PSBD jest

Repozytorium Danych Źródłowych

• Dane wynikowe w postaci agregatów i dane operacyjne

przechowywane będą w tabelach w bazie danych PostgreSQL

• System PSBD może być zasilany danymi poprzez dwa

interfejsy:

• Baza danych MySQL

• Pliki tekstowe w formacie ASC/KML ładowane w trybie wsadowym do

Repozytorium Danych Źródłowych

Raporty

Kostka OLAP

Agregaty

DIVA

OCM

DICM

EMCMProjekt A

Projekt B

PSBD

Repozytorium Danych

Źródłowych

ASC, KML

(SCP)

MySQL

(WS/HTTS/FTP/etc.)

inne systemy

(ACCESS to MySQL)

(NFS)

(NFS)

(NFS)

PostgreSQL

(ACCESS to PostgreSQL)


PRZYGOTOWANIE DANYCH PROCESY PRZETWARZANIA DANYCH

Intuicyjne narzędzie do tworzenia procesów przetwarzania danych

Elastyczny język przetwarzań, dostarczający pełen zestaw funkcji i zadań walidujących, czyszczących i przekształcających dane do żądanej postaci (ponad 300 przekształceń)

Adaptery do innych systemów i baz danych (SAS/ACCESS to MySQL, PostgreSQL, ODBC, Oracle, MS SQL Server, Sybase IQ, Sybase, Hadoop, PC Files)

Bogate możliwości wczytywania danych z formatów plików płaskich np. XML, CSV, TXT, …

Wykorzystanie procesów ETL oraz ELT

Zarządzanie zmianą na poziomie całej ścieżki przetwarzania danych

• Change Analysis

• Impact Analysis

• Reverse Impact Analysis (Data Lineage)

Import/export metadanych

Narzędzia harmonogramowania zadań

Wersjonowanie


ANALIZY

DANYCH NARZĘDZIE PRACY ANALITYKA

SAS Enterprise Guide to aplikacja kliencka, która dzięki wygodnemu interfejsowi daje użytkownikowi

możliwość dostępu do różnych źródeł danych, interaktywnego przetwarzania danych, łatwego

wykonywania analiz przy wykorzystaniu procedur dostępnych w SAS.

Możliwość budowy procesów analiz o różnym

stopniu złożoności z wykorzystaniem funkcji

statystycznych i optymalizacyjnych

Intuicyjne tworzenie reguł i warunków wyboru danych

Kilkadziesiąt kreatorów przygotowania danych do analiz z możliwością

tworzenia zmiennych wyliczanych

Elastyczny dostęp do danych w dowolnym

formacie (Oracle, Hadoop, MS SQL, pliki

płaskie, inne…) Bogate możliwości prezentacji wyników w

postaci tabelarycznej lub graficznej


WIZUALIZACJA

DANYCH WIZUALNA ANALIZA DANYCH I RAPORTOWANIE

Narzędzie do szybkiej eksploracji i wizualizacji

ogromnych wolumenów danych:

automatyczny dobór postaci wykresu,

kilkadziesiąt form wizualizacji (w tym wykresy mapowe)

narzędzia do zaawansowanych analiz (korelacja, regresja,

szeregi czasowe)

Samodzielne raportowanie - dashboardy, analizy

hierarchiczne, drążenie do detalu, alertowanie, szybkie

tworzenie interaktywnych zestawień

Tworzenie i dystrybucja raportów oraz analiz przez

przeglądarkę, kanały mobilne oraz MS Office

Rozwiązanie dla analityków i twórców raportów

(możliwość pełnego dostosowania wyglądu aplikacji)

Visual

Analytics


MODELOWANIE DANYCH NARZĘDZIE DO BUDOWY ZAWANSOWANYCH MODELI

ANALITYCZNYCH

• Bardzo bogate funkcjonalnie narzędzie do

budowy zaawansowanych modeli analitycznych

• Szeroka paleta narzędzi do modelowania

predykcyjnego (regresja, drzewa decyzyjne, sieci

neuronowe i wiele innych), segmentacji, analizy

powiązań oraz sekwencji, analizy przeżycia i

modelowania szeregów czasowych

• Blisko 20 metod modelowania

• Szeroka paleta narzędzi do przygotowania i

eksploracji danych

• Interaktywne porównanie, testowanie i walidacja

modeli,

• Zautomatyzowany i zoptymalizowany proces

scoringu,

• Narzędzie otwarte, łatwe w rozbudowie (możliwość

integracji z R)


RAPORTOWANIE OLAP

WIELOWYMIAROWE RAPORTOWANIE NA DANYCH

POMIAROWYCH

• W ramach systemu PSBD została utworzona kostka OLAP umożliwiająca wykonywanie przez

użytkowników wielowymiarowych analiz danych

• Użytkownicy mają możliwość zarówno interaktywnej pracy z kostką jak

i tworzenia statycznych raportów bazujących na danych zawartych

w kostce OLAP

• Kostka OLAP jest zbudowana na podstawie danych źródłowych udostępnionych systemowi PSBD z

systemu MLB


PRZEBIEG PROJEKTU


PODSTAWOWE INFORMACJE O PROJEKCIE

- ZAKRES

Zakres projektu

• dostawa oprogramowania

• dostawa i instalacja serwerów, macierzy, systemu tworzenia kopii zapasowych

• wdrożenie, w tym zainstalowanie, skonfigurowanie i integracja oprogramowania

• zrealizowanie szkoleń i warsztatów dla pracowników Zamawiającego

• zaprojektowanie, zaimplementowanie i wdrożenie na platformie informatycznej PSBD

• dostawa dokumentacji dostarczonego sprzętu i oprogramowania

• świadczenie przez usług serwisu (gwarancyjnych, konserwacyjnych i powdrożeniowych)


PODSTAWOWE INFORMACJE O PROJEKCIE -

HARMONOGRAM

Start projektu - lipiec 2015

• Etap 1 – dostawa sprzętu i oprogramowania - 60 dni

• Etap 2 – instalacja i konfiguracja sprzętu i oprogramowania - 90 dni

• Etap 3 – skonfigurowanie i zintegrowanie rozwiązania; zaprojektowanie,

implementacja i wdrożenie PSBD - 120 dni


PODSTAWOWE INFORMACJE O PROJEKCIE

- SZKOLENIA

Szkolenia podział: • Administratorzy

• Analitycy

• Zaawansowani Analitycy

• Implementacyjne

Ponad 30 typów szkoleń

Ponad 90 dni szkoleniowych w okresie 3 miesięcy


Zapraszamy na przerwę

BLOK 1 - WPROWADZENIE DO PIBUK - itl.waw.pl · BLOK 1 - WPROWADZENIE DO PIBUK INSTYTUT...

Documents

Transcript of BLOK 1 - WPROWADZENIE DO PIBUK - itl.waw.pl · BLOK 1 - WPROWADZENIE DO PIBUK INSTYTUT...