Big Data - podstawy analizy danych opartej o duże zbiory danych

1. Usługa jest realizowana w godzinach lekcyjnych, tj. za godzinę usługi szkoleniowej rozumie się 45 minut, łącznie 16 godzin lekcyjnych.

Planowane przerwy w trakcie zajęć: 10:30-10:45, 13:00-13:30, 14:45-15:00. Przerwy nie są wliczone w godziny zajęć usługi. Liczba godzin zajęć praktycznych: 8 godzin lekcyjnych , liczba godzin zajęć teoretycznych: 8 godzin lekcyjnych, w tym test 10 min.

Wykładowca ma prawo zmienić godziny przerw, jeśli wymaga tego proces dydaktyczny (np. rozpoczęte ćwiczenie) lub na życzenie większości uczestników kursu (zmęczenie, większa trudność treści kształcenia).

2.Grupa docelowa: szkolenie przeznaczone jest dla analityków danych, architektów struktur danych, programistów oraz osób biorących udział w projektach związanych z Big Data.

Przygotowanie uczestników:od uczestników szkolenia wymagana są podstawowej wiedzy na temat danych oraz ich analizy.

Szczegółowy program szkolenia

Sesja wprowadzająca do Big Data

• Definicja big data i jej znaczenie w dzisiejszym świecie.
• Wyzwania i możliwości związane z analizą dużych zbiorów danych.
• Przykłady zastosowań big data w różnych dziedzinach.

Architektura systemów big data

• Przegląd popularnych technologii i narzędzi do przechowywania, przetwarzania i analizy dużych zbiorów danych, takich jak Hadoop, Spark, NoSQL, Apache Kafka itp.
• Porównanie różnych modeli architektonicznych, takich jak przetwarzanie wsadowe (batch processing) i przetwarzanie strumieniowe (stream processing).

Zbieranie i składowanie danych

• Strategie zbierania danych i ich przechowywanie.
• Bazy danych relacyjne i nierelacyjne.
• Skalowalne systemy przechowywania danych, takie jak Hadoop Distributed File System (HDFS) i Amazon S3.

Przetwarzanie danych

• Wprowadzenie do przetwarzania wsadowego i przetwarzania strumieniowego.
• Wykorzystanie narzędzi takich jak Apache Spark do przetwarzania dużych zbiorów danych.
• Techniki transformacji i wstępnego przetwarzania danych.

Analiza i wizualizacja danych

• Narzędzia i techniki analizy dużych zbiorów danych.
• Wprowadzenie do algorytmów uczenia maszynowego i technik eksploracji danych.
• Wykorzystanie narzędzi do wizualizacji danych, takich jak Tableau lub Python z bibliotekami takimi jak Matplotlib i Seaborn.

Skalowalność i wydajność

• Wyzwania związane z skalowalnością i wydajnością systemów big data.
• Optymalizacja zapytań i przetwarzania równoległego.
• Zarządzanie zasobami i monitorowanie wydajności.

Bezpieczeństwo i prywatność danych

• Zagadnienia związane z bezpieczeństwem i prywatnością danych w kontekście big data.
• Metody szyfrowania, uwierzytelniania i kontroli dostępu.

Studium przypadku i praktyczne ćwiczenia

• Przeprowadzenie studium przypadku wykorzystującego narzędzia i techniki omówione podczas szkolenia.
• Praktyczne ćwiczenia, które pozwolą uczestnikom na zdobycie praktycznych umiejętności w zakresie pracy z dużymi zbiorami danych.

Metoda realizacji szkolenia

Szkolenie realizowane jest w formie naprzemiennie następujących po sobie wykładów oraz ćwiczeń praktycznych. Szkolenie łączy w sobie wiedzę merytoryczną z praktycznymi przykładami jej wykorzystania w środowisku pracy.

Uczestnicy otrzymują podręcznik w wersji elektronicznej.

W czasie zajęć wykorzystywane są autorskie materiały dydaktyczne przygotowane przez wykładowcę oraz inne materiały dydaktyczne przygotowane przez organizatora szkolenia.

Warunkiem skorzystania ze szkolenia jest dokonanie równolegle rejestracji na kurs na stronie www.comarch.pl/szkolenia w formie:

- elektronicznego zamówienia szkolenia (przycisk "Zamów" przy wybranym temacie i terminie). Opcja ta dotyczy osób fizycznych oraz firm/instytucji

albo

- poprzez uzupełnienie i odesłanie na adres szkolenia@comarch.pl tradycyjnego formularza zgłoszeniowego który jest dostępny na stronie www.comarch.pl/szkolenia (przycisk "Pobierz formularz zgłoszeniowy"). Opcja ta dotyczy wyłącznie firm/Instytucji.

W obu przypadkach przy dokonaniu zgłoszenia prosimy o informacje dotyczącą projektu z którego dofinansowania korzysta Uczestnik.

Kurs przeznaczony jest dla osób wykonujących analizy danych oraz tworzenia raportów/zestawień zbiorczych przy użyciu danych pochodzących z innych systemów lub przetwarzanych bezpośrednio w arkuszu, chcących zwizualizować swoje dane.

Zawarto umowę z WUP Kraków na rozliczanie Usług z wykorzystaniem elektronicznych bonów szkoleniowych w ramach projektu „Małopolski pociąg do kariery – sezon 1” i/lub „Nowy start w Małopolsce z EURESem”

Szkolenie zakończone jest testem wiedzy z zakresu tematycznego omawianego na szkoleniu. 

Szkolenie może być zwolnione z VAT-u w zależności od rodzaju dofinasowania

Szkolenie będzie rejestrowane/ nagrywane w celu umożliwienia monitoringu i kontroli przez instytucję nadzorującą realizację usług z dofinansowaniem.

Zapisując się na usługę wyrażasz zgodę na rejestrowanie swojego wizerunku w wyżej wymienionych celach.

Uczestnicy szkolenia otrzymają materiały szkoleniowe w wersji elektronicznej.

Usługa realizowana jest w godzinach lekcyjnych (dydaktycznych) - 1 godz = 45 minut

Przerwy nie są wliczane w czas trwania usługi.

Wymagania techniczne:

• Komputer / laptop ze stałym dostępem do Internetu (Szybkość pobierania/przesyłania: minimalna 2 Mb/s / 128 kb/s; zalecana 4 Mb/s / 512 kb/s
• przeglądarka internetowa – zalecane: Google Chrome, Mozilla Firefox, Microsoft Edge
• słuchawki lub dobrej jakości głośniki
• mikrofon

Zalecane

• dodatkowy monitor
• kamera ( w przypadku komputerów stacjonarnych)
• spokojne miejsce, odizolowane od zewnętrznych czynników rozpraszających
• podstawowa znajomość języka angielskiego (do sprawnego poruszania się po platformie zdalnej)

Informacje dodatkowe

Szkolenie Zdalne prowadzone jest w czasie rzeczywistymi i transmitowane za pomocą kanału internetowego z wykorzystaniem systemu ZOOM, który umożliwia komunikację głosową oraz wideo z Uczestnikami przebywających w dowolnym miejscu ze sprawnie działającym stałym łączem internetowym. Każdy z uczestników szkolenia otrzymuje przed szkoleniem link dostarczony w wiadomości mailowej z informacjami dotyczącymi szkolenia zdalnego. Link umożliwiający uczestnictwo w spotkaniu jest ważny do momentu zakończenia szkolenia.

Szkolenie zakończone jest testem wiedzy z zakresu tematycznego omawianego na szkoleniu.

Szkolenie może być nagrywane /rejestrowane w celu kontroli/audytu zgodnie z Regulaminem Świadczenia Usług Szkoleniowych Organizatora.

Uczestnicy szkolenia otrzymają materiały szkoleniowe w wersji elektronicznej.