1 BIG DATA Przetwarzanie i analiza zbiorów danych w czasie rzeczywistym Marcin Żuchowski 2016-05-18 SKILLSLEASE Sp. z o.o. | www.skillslease.com

2 Firma to ludzie

3 Agenda

4 Potrzeby informacyjne Big Data Proste rozwiązania są najlepsze

5

6 Podstawa podjęcia decyzji Wiedza informacjakontekstdoświadczenie

7 Menadżer myśli wielowymiarowo Kiedy Rok Kwartał Miesiąc Kto Kraj Region Strefa Osoba Co Marka Produkt Gdzie Kanał Klient Wynik Wskaźnik

8 Dane, a więc jak ugryźć big data

9 Big Data, słów kilka

10 Przełamywanie tradycyjnego podejścia

11

12

13

14 Co zrobić by ugryźć „big data”?

15 Wprowadzenie do Apache Hadoop

16 Wielkość danych

17 Różnorodność danych

18 Szybkość przetwarzania danych

19 Hadoop to platforma z produktami 1°°°°°°°°° °°°°°°°°°° °°°°°°°° ° ° N

20 Dystrybucja Hadoop > zestaw produktów Testowane pod kątem spójności całego pakietu

21 Microsoft +Hortonworks = HDInsight Spójna technologia Zweryfikowany zakres Klasa korporacyjna Usługa Microsoft Azure

22 HDInsight wspiera Spark Przetwarzanie „In Memory” Jeden model dla wielu zadań (zapytania SQL, Strumienie danych, Uczenie maszynowe) Przetwarzanie danych - do 100x szybsze działanie Przyjazne środowisko dla rozwoju (programowanie Java, Python, Scala) Dostosowany do wielu narzędzi BI (Power BI, Tableau, Qlik, SAP)

23 Power BI: odkryj swoje dane Każde, w dowolny sposób, wszędzie

24 Przetwarzanie i analiza w czasie rzeczywistym

25 Big data in real time

26 Przetwarzanie w czasie rzeczywistym?

27 HDInsight wspiera Storm Analiza strumieniowa w „przybliżonym” czasie rzeczywistym Zużywa miliony zdarzeń w czasie rzeczywistym napływające z centrum zdarzeń (np. Azure Event Hub) Wykonuje obliczenia upływu czasu Wyjście do analitycznych pulpitów zarządczych Konfigurowalny z Java +.NET, zintegrowany z Visual Studio Stream processin g Zapytania Analiza w Excelu Samoobsługowy BI Mobilność

28 Nie przeinwestuj w Big Data

29 Biznesowe przypadki użycia Big Data Usługi finansoweHandel detaliczny TelekomunikacjaProdukcja Opieka zdrowotnaSektor publicznyUsługi, nafta i gaz

30 Gartner's Magic Quadrant Źródło: www.gartner.com Business Intelligence and Analytics Platforms Enterprise Application Platform as a Service Public Cloud Storage Services

31 Gartner's Magic Quadrant Źródło: www.gartner.com Data Warehouse and Data Management Solutions for Analytics Operational Database Management Systems

32 Wyzwania związane z Hadoop

33 $0 Hadoop w chmurze - HDInsight

34 Kroki skutecznego wdrożenia Big Data

35