Post on 01-Mar-2019
Copyr i g ht © 2012 , SAS Ins t i tu t e Inc . A l l r ights reser ve d .
BLOK 1 - WPROWADZENIE DO PIBUK
INSTYTUT ŁĄCZNOŚCI, WARSZAWA 2015-11-03
Copyr i g ht © 2012 , SAS Ins t i tu t e Inc . A l l r ights reser ve d .
AGENDA
• 9:15 – 10:30 Wprowadzenie do PIBUK
• Przerwa kawowa
• 10:45 – 12:15 Live demo wdrożonego oprogramowania
• Lunch
• 12:45 – 14:00 Funkcjonalności software, dyskusja o
możliwych zastosowaniach
Copyr i g ht © 2012 , SAS Ins t i tu t e Inc . A l l r ights reser ve d .
AGENDA – BLOK 1
• Geneza projektu
• Modele pracy
• Możliwe zastosowania (Network Analytics)
• Architektura, hardware, wirtualizacja
• Warstwa software SAS
• Przebieg projektu
Copyr i g ht © 2012 , SAS Ins t i tu t e Inc . A l l r ights reser ve d .
GENEZA PROJEKTU, MODELE PRACY
Copyr i g ht © 2012 , SAS Ins t i tu t e Inc . A l l r ights reser ve d .
GENEZA PROJEKTU - POTRZEBY INSTYTUTU ŁĄCZNOŚCI
Potrzeby naukowe i badawcze
• Pracownicy IŁ
• Projekty badawcze
• Współpraca z innymi uczelniami i instytutami
Usługi komercyjne – działalność statutowa
• Analiza danych pomiarowych, np. z próbników i drive testów
• Analizy na danych operatorów, np. rozwój i optymalizacja sieci fix i mobile
Dodatkowe usługi komercyjne
• Analytics, Data & Know-How as a Service
• Analizy i usługi analityczne w chmurze, z danymi i wiedzą Instytutu Łączności
Copyr i g ht © 2012 , SAS Ins t i tu t e Inc . A l l r ights reser ve d .
GENEZA PROJEKTU – FUNKCJONALNOŚCI W TYPOWYM PROJEKCIE
Real Time Alerts
Bazy danych
Dane aplikacyjne
Pomiary Próbniki
WIZUALIZACJA I ALERTY
ANALITYKA I MODELOWANIE
Data Mining Modelowanie statystyczne
Scoringi, Optymalizacja
PRZETWARZANIE DANYCH
STRUMIENIOWYCH
Filtrowanie,
agregacja, reguły biznesowe
DANE WEJŚCIOWE
INTEGRACJA DANYCH
Extract Transform
Load
Internet
Repozytorium Analityczne
Dan
e
Stru
ktu
raln
e
Dan
e
Stru
mie
nio
we
Eksploracja danych, eksploracja statystyczna, wizualizacja danych,
raportowanie
Copyr i g ht © 2012 , SAS Ins t i tu t e Inc . A l l r ights reser ve d .
GENEZA PROJEKTU – ŚRODOWISKA I ELASTYCZNOŚĆ PRACY
ŚRODOWISKA BADAWCZE ŚRODOWISKA KOMERCYJNE
ZARZĄDZANIE ŚRODOWISKAMI Tworzenie, klonowanie, konfiguracja, podłączanie danych, backupy, logi, …
Projekt 3
Projekt 1
Projekt 2
Praktykanci IŁ
Pracownicy naukowi IŁ
Politechnika Warszawska
Politechnika Wrocławska
Projekt 4
development
testy
produkcja
Projekt 5
Analizy
Analytics & data as a Service
development
testy
produkcja
Pracownicy IŁ
Analitycy IŁ
Internet
Pracownicy IŁ
Klient
Copyr i g ht © 2012 , SAS Ins t i tu t e Inc . A l l r ights reser ve d .
GENEZA PROJEKTU – ŚRODOWISKA I ELASTYCZNOŚĆ PRACY
ŚRODOWISKA BADAWCZE ŚRODOWISKA KOMERCYJNE
Projekt 4
Projekt 5
Analytics & Data as a Service
Chmura
obliczeniowa
SAS
Warstwa
danych
POSTGRESQL INNE BAZY
RELACYJNE REPOZYTORIUM ANALITYCZNE
Copyr i g ht © 2012 , SAS Ins t i tu t e Inc . A l l r ights reser ve d .
MOŻLIWE ZASTOSOWANIA
Copyr i g ht © 2012 , SAS Ins t i tu t e Inc . A l l r ights reser ve d .
PRZYKŁADOWE OBSZARY ZASTOSOWAŃ
Network
Capacity Planning &
Deployment Analytics
Dostarczenie dokładnych
prognoz ruchu i
prawdopodobieństwa
wysycenia nadajników w celu
optymalizacji wydatków
przeznaczonego na rozbudowę
i modernizację sieci.
Network Service
Quality Assurance
Analytics
Pogłębione zrozumienie
wpływu poszczególnych
urządzeń, elementów
infrastruktury i ustawień na
doświadczenie klienta poprzez
analizę korelacji ze
zdarzeniami sieciowymi.
Network Control
& Optimization
Analytics
Optymalizacja alokacji
zasobów sieciowych, redukcja
wydatków związanych z
rekonfiguracją i pracami
modernizacyjnymi.
Network Device
Analytics
Analityczne wykrywanie
potencjalnych problemów
technicznych z elementami
sieciowymi, planowanie prac
diagnostycznych i
utrzymaniowych.
Copyr i g ht © 2012 , SAS Ins t i tu t e Inc . A l l r ights reser ve d .
Solution allows to
forecast bandwidth
user demand
Identify trends,
seasonality and
event impacts.
Evaluate data traffic
and congestion
probability per each
cell (bubble size –
traffic size, color –
congestion
probability).
Network expansion
requirements
determined at the cell
grain in order to
anticipate forecasted
traffic for it
Opex and Capex
investment
estimation is based
on real pricelists.
The value of traffic
for cell upgrades can
be determined by
analyzing the usage
patterns that each
customer will
conduct.
Network analytics
can help to identify
which cell upgrades
generate the best
ROI, while staying in
line with budget
constraints.
NETWORK CAPACITY PLANNING & DEPLOYMENT ANALYTICS
Copyr i g ht © 2012 , SAS Ins t i tu t e Inc . A l l r ights reser ve d .
NETWORK SERVICE QUALITY ASSURANCE ANALYTICS
Poprawa jakości sieci poprzez zmianę
parametrów konfiguracji wybranych
elementów sieci
Model objaśniający zależności pomiędzy
parametrami jakościowymi a konfiguracją
elementów sieci
Copyr i g ht © 2012 , SAS Ins t i tu t e Inc . A l l r ights reser ve d .
ARCHITEKTURA, HARDWARE, WIRTUALIZACJA
Copyr i g ht © 2012 , SAS Ins t i tu t e Inc . A l l r ights reser ve d .
DLACZEGO BIZNES ORAZ IT POTRZEBUJĄ IAAS INFRASTRUCTURE
AS A SERVICE)?
IT musi odpowiadać na częstsze i bardziej złożone wymagania biznesowe oraz przygotować się na rozwój i zarządzanie tym rozwojem…
….potrzebuje więcej usług IT dostarczanych w jak najkrótszym czasie…
…musi wprowadzić automatyzację, aby dostarczać zasoby infrastruktury szybciej, efektywniej kosztowo i w
odpowiedniej skali…
Zmiany w biznesie oraz wzrost konkurencji na rynku…
…pozyskuje usługi, aby jak najszybciej i najoptymalniej kosztowo odpowiedzieć na potrzeby rynku.
Wyzwania Wpływ Odpowiedź 1 2 3
Z perspektywy
biznesu
Z perspektywy
IT
… standaryzuje i integruje infrastrukturę IT, aby dostarczyć wydajne zarządzanie cyklem życia usługi, co skutkuje szybszym uzyskaniem usług i wsparcia oraz większymi oszczędnościami.
Copyr i g ht © 2012 , SAS Ins t i tu t e Inc . A l l r ights reser ve d .
„KOLEJNY KROK”
Chmura na pokładzie…
Wirtualizacja
Znacząco obniża koszty
Redukuje poziom
skomplikowania
Zwiększa wysoką dostępność
Czas
Efe
kty
wn
oś
ć IT
Cloud
Przyspiesza wdrożenie usług
infrastrukturalnych oraz aplikacji
Optymalizuje wykorzystanie
zasobów, obniżając koszty
Copyr i g ht © 2012 , SAS Ins t i tu t e Inc . A l l r ights reser ve d .
USŁUGI PROFESJONALNE – PRZEKSZTAŁCENIE
MOŻLIWOŚCI IT W OSIĄGNIĘCIA BIZNESOWE
Skrócenie czasu życia
projektu – od szkicu do
satysfakcji użytkownika dzięki
aplikacjom i rozwiązaniom
VMware
Przybliżenie przełomu w
biznesie poprzez wdrożenie
skalowalnych innowacji
technologicznych, które mają
istotny wpływ na jego
powodzenie
Redukcja kosztów i
maksymalizacja zwrotu z
inwestycji w chmurę
vRealizeAutomation dzięki
wykorzystaniu pełnego
zasobu zalet i korzyści
oferowanych przez to
rozwiązanie
Uproszczenie Chmury i
zwiększenie jej
niezawodności, efektywności
i skuteczności poprzez
właściwą ocenę gotowości
operacyjnej klienta, rozwijanie
Chmury z myślą o jej
wydajności i wysokiej
dostępności oraz poleganie na
fachowej wiedzy z zakresu
kompatybilności
oprogramowania i zarządzania
przedsiębiorstwem
Copyr i g ht © 2012 , SAS Ins t i tu t e Inc . A l l r ights reser ve d .
CYKL ŻYCIA USŁUGI
17
ZDEFINIUJ
Zadefiniuj Grupę Biznesową i zabudżetuj ją
STWÓRZ
Zarezerwuj zasoby i ustal zasady korzystania z nich
URUCHOM
Uruchom usługi korzystające z zasobów chmury prywatnej, publicznej oraz hybrydowej
KONTROLUJ
Kontroluj wykorzystanie zasobów i koszty
MONITORUJ
Monitoruj całą infrastrukturę oraz użytkowników
ZARZĄDZAJ
Optymalizuj i odzyskuj zasoby, bazując na polisach i kosztach
1
2
3
4
5
6
Copyr i g ht © 2012 , SAS Ins t i tu t e Inc . A l l r ights reser ve d .
PRZEJRZYSTE KOSZTY I CENY USŁUG
Koszt całkowity
W oparciu o wartości zdefiniowane
oraz integrację z platformą
wirtualizacji
Koszt jednostkowy CPU, pamięć, zasoby
dyskowe
Automatyczna wycena wzorców
Kto czego używa
Koszt i zużycie w
przeliczeniu na jednostkę
biznesową, usługę
Automatyczna generacja raportów finansowych
Copyr i g ht © 2012 , SAS Ins t i tu t e Inc . A l l r ights reser ve d .
Elastyczność w
dodawaniu nowych
usług
JEDNOLITY KATALOG USŁUG: APLIKACJE,
INFRASTRUKTURA, XAAS, PULPITY
Personalizacja portalu
Uniwersalny
portal
Kategorie usług
Logo
Usługi
indywidualne
Zarządzanie
uprawnieniami per
usługa
Copyr i g ht © 2012 , SAS Ins t i tu t e Inc . A l l r ights reser ve d .
KONCEPCJA PLATFORMY
INFRASTRUKTURA
Użytkownicy
WIRTUALIZACJA
USŁUGI
Przykładowy System Badań i Diagnozowania
Projekt 3 Projekt n
Projekt 1 Projekt 2
Copyr i g ht © 2012 , SAS Ins t i tu t e Inc . A l l r ights reser ve d .
WARSTWA SOFTWARE
Copyr i g ht © 2012 , SAS Ins t i tu t e Inc . A l l r ights reser ve d .
PLATFORMA PODSTAWOWE KOMPONENTY PLATFORMY
• Warstwa danych
• Przygotowanie danych
• Analizy danych
• Wizualizacja danych
• Modelowanie danych
• Raportowanie (VA i OLAP)
Copyr i g ht © 2012 , SAS Ins t i tu t e Inc . A l l r ights reser ve d .
WARSTWA
DANYCH REPOZYTORIUM DANYCH ŹRÓDŁOWYCH
• Źródłem danych dla procesów działających w PSBD jest
Repozytorium Danych Źródłowych
• Dane wynikowe w postaci agregatów i dane operacyjne
przechowywane będą w tabelach w bazie danych PostgreSQL
• System PSBD może być zasilany danymi poprzez dwa
interfejsy:
• Baza danych MySQL
• Pliki tekstowe w formacie ASC/KML ładowane w trybie wsadowym do
Repozytorium Danych Źródłowych
Raporty
Kostka OLAP
Agregaty
DIVA
OCM
DICM
EMCMProjekt A
Projekt B
PSBD
Repozytorium Danych
Źródłowych
ASC, KML
(SCP)
MySQL
(WS/HTTS/FTP/etc.)
inne systemy
(ACCESS to MySQL)
(NFS)
(NFS)
(NFS)
PostgreSQL
(ACCESS to PostgreSQL)
Copyr i g ht © 2012 , SAS Ins t i tu t e Inc . A l l r ights reser ve d .
PRZYGOTOWANIE DANYCH PROCESY PRZETWARZANIA DANYCH
Intuicyjne narzędzie do tworzenia procesów przetwarzania danych
Elastyczny język przetwarzań, dostarczający pełen zestaw funkcji i zadań walidujących, czyszczących i przekształcających dane do żądanej postaci (ponad 300 przekształceń)
Adaptery do innych systemów i baz danych (SAS/ACCESS to MySQL, PostgreSQL, ODBC, Oracle, MS SQL Server, Sybase IQ, Sybase, Hadoop, PC Files)
Bogate możliwości wczytywania danych z formatów plików płaskich np. XML, CSV, TXT, …
Wykorzystanie procesów ETL oraz ELT
Zarządzanie zmianą na poziomie całej ścieżki przetwarzania danych
• Change Analysis
• Impact Analysis
• Reverse Impact Analysis (Data Lineage)
Import/export metadanych
Narzędzia harmonogramowania zadań
Wersjonowanie
Copyr i g ht © 2012 , SAS Ins t i tu t e Inc . A l l r ights reser ve d .
ANALIZY
DANYCH NARZĘDZIE PRACY ANALITYKA
SAS Enterprise Guide to aplikacja kliencka, która dzięki wygodnemu interfejsowi daje użytkownikowi
możliwość dostępu do różnych źródeł danych, interaktywnego przetwarzania danych, łatwego
wykonywania analiz przy wykorzystaniu procedur dostępnych w SAS.
Możliwość budowy procesów analiz o różnym
stopniu złożoności z wykorzystaniem funkcji
statystycznych i optymalizacyjnych
Intuicyjne tworzenie reguł i warunków wyboru danych
Kilkadziesiąt kreatorów przygotowania danych do analiz z możliwością
tworzenia zmiennych wyliczanych
Elastyczny dostęp do danych w dowolnym
formacie (Oracle, Hadoop, MS SQL, pliki
płaskie, inne…) Bogate możliwości prezentacji wyników w
postaci tabelarycznej lub graficznej
Copyr i g ht © 2012 , SAS Ins t i tu t e Inc . A l l r ights reser ve d .
WIZUALIZACJA
DANYCH WIZUALNA ANALIZA DANYCH I RAPORTOWANIE
Narzędzie do szybkiej eksploracji i wizualizacji
ogromnych wolumenów danych:
automatyczny dobór postaci wykresu,
kilkadziesiąt form wizualizacji (w tym wykresy mapowe)
narzędzia do zaawansowanych analiz (korelacja, regresja,
szeregi czasowe)
Samodzielne raportowanie - dashboardy, analizy
hierarchiczne, drążenie do detalu, alertowanie, szybkie
tworzenie interaktywnych zestawień
Tworzenie i dystrybucja raportów oraz analiz przez
przeglądarkę, kanały mobilne oraz MS Office
Rozwiązanie dla analityków i twórców raportów
(możliwość pełnego dostosowania wyglądu aplikacji)
Visual
Analytics
Copyr i g ht © 2012 , SAS Ins t i tu t e Inc . A l l r ights reser ve d .
MODELOWANIE DANYCH NARZĘDZIE DO BUDOWY ZAWANSOWANYCH MODELI
ANALITYCZNYCH
• Bardzo bogate funkcjonalnie narzędzie do
budowy zaawansowanych modeli analitycznych
• Szeroka paleta narzędzi do modelowania
predykcyjnego (regresja, drzewa decyzyjne, sieci
neuronowe i wiele innych), segmentacji, analizy
powiązań oraz sekwencji, analizy przeżycia i
modelowania szeregów czasowych
• Blisko 20 metod modelowania
• Szeroka paleta narzędzi do przygotowania i
eksploracji danych
• Interaktywne porównanie, testowanie i walidacja
modeli,
• Zautomatyzowany i zoptymalizowany proces
scoringu,
• Narzędzie otwarte, łatwe w rozbudowie (możliwość
integracji z R)
Copyr i g ht © 2012 , SAS Ins t i tu t e Inc . A l l r ights reser ve d .
RAPORTOWANIE OLAP
WIELOWYMIAROWE RAPORTOWANIE NA DANYCH
POMIAROWYCH
• W ramach systemu PSBD została utworzona kostka OLAP umożliwiająca wykonywanie przez
użytkowników wielowymiarowych analiz danych
• Użytkownicy mają możliwość zarówno interaktywnej pracy z kostką jak
i tworzenia statycznych raportów bazujących na danych zawartych
w kostce OLAP
• Kostka OLAP jest zbudowana na podstawie danych źródłowych udostępnionych systemowi PSBD z
systemu MLB
Copyr i g ht © 2012 , SAS Ins t i tu t e Inc . A l l r ights reser ve d .
PRZEBIEG PROJEKTU
Copyr i g ht © 2012 , SAS Ins t i tu t e Inc . A l l r ights reser ve d .
PODSTAWOWE INFORMACJE O PROJEKCIE
- ZAKRES
Zakres projektu
• dostawa oprogramowania
• dostawa i instalacja serwerów, macierzy, systemu tworzenia kopii zapasowych
• wdrożenie, w tym zainstalowanie, skonfigurowanie i integracja oprogramowania
• zrealizowanie szkoleń i warsztatów dla pracowników Zamawiającego
• zaprojektowanie, zaimplementowanie i wdrożenie na platformie informatycznej PSBD
• dostawa dokumentacji dostarczonego sprzętu i oprogramowania
• świadczenie przez usług serwisu (gwarancyjnych, konserwacyjnych i powdrożeniowych)
Copyr i g ht © 2012 , SAS Ins t i tu t e Inc . A l l r ights reser ve d .
PODSTAWOWE INFORMACJE O PROJEKCIE -
HARMONOGRAM
Start projektu - lipiec 2015
• Etap 1 – dostawa sprzętu i oprogramowania - 60 dni
• Etap 2 – instalacja i konfiguracja sprzętu i oprogramowania - 90 dni
• Etap 3 – skonfigurowanie i zintegrowanie rozwiązania; zaprojektowanie,
implementacja i wdrożenie PSBD - 120 dni
Copyr i g ht © 2012 , SAS Ins t i tu t e Inc . A l l r ights reser ve d .
PODSTAWOWE INFORMACJE O PROJEKCIE
- SZKOLENIA
Szkolenia podział: • Administratorzy
• Analitycy
• Zaawansowani Analitycy
• Implementacyjne
Ponad 30 typów szkoleń
Ponad 90 dni szkoleniowych w okresie 3 miesięcy
Copyr i g ht © 2012 , SAS Ins t i tu t e Inc . A l l r ights reser ve d .
Zapraszamy na przerwę