Data Engineering on Microsoft Azure - forma zdalna w czasie rzeczywistym

AGENDA SZKOLENIA

 1: Poznaj opcje obliczeniowe i pamięci masowej dla obciążeń związanych z inżynierią danych

• Wprowadzenie do usługi Azure Synapse Analytics

• Opisz usługę Azure Databricks

• Wprowadzenie do usługi Azure Data Lake Storage

• Opisz architekturę jeziora Delta

• Pracuj ze strumieniami danych przy użyciu usługi Azure Stream Analytics

 2: Zaprojektuj i zaimplementuj warstwę obsługi

• Zaprojektuj wielowymiarowy schemat, aby zoptymalizować obciążenia analityczne

• Bezkodowa transformacja na dużą skalę dzięki usłudze Azure Data Factory

• Wypełniaj wolno zmieniające się wymiary w potokach usługi Azure Synapse Analytics

 3: Data engineering considerations for source files

• Design a Modern Data Warehouse using Azure Synapse Analytics

• Secure a data warehouse in Azure Synapse Analytics

 4: Uruchamiaj interaktywne zapytania przy użyciu bezserwerowych pul SQL Azure Synapse Analytics

• Poznaj możliwości bezserwerowych pul SQL w usłudze Azure Synapse

• Wykonywanie zapytań dotyczących danych w jeziorze przy użyciu bezserwerowych pul SQL usługi Azure Synapse

• Twórz obiekty metadanych w bezserwerowych pulach SQL Azure Synapse

• Zabezpiecz dane i zarządzaj użytkownikami w bezserwerowych pulach SQL Azure Synapse

 5: Eksploracja i transformacja danych w Azure Databricks

• Opisz usługę Azure Databricks

• Odczytywanie i zapisywanie danych w usłudze Azure Databricks

• Pracuj z DataFrames w Azure Databricks

• Pracuj z zaawansowanymi metodami DataFrames w usłudze Azure Databricks

 6: Pobieranie i ładowanie danych do hurtowni danych

• Użyj najlepszych rozwiązań dotyczących ładowania danych w usłudze Azure Synapse Analytics

• Pozyskiwanie w skali petabajtów za pomocą usługi Azure Data Factory

 7: Przekształcaj dane za pomocą Azure Data Factory lub Azure Synapse Pipelines

• Integracja danych z Azure Data Factory lub Azure Synapse Pipelines

• Bezkodowa transformacja na dużą skalę dzięki usłudze Azure Data Factory lub Azure Synapse Pipelines

 8: Orkiestracja przenoszenia i transformacji danych w Azure Synapse Pipelines

• Organizuj przenoszenie i transformację danych w usłudze Azure Data Factory

 9: Optymalizacja wydajności zapytań dzięki dedykowanym pulom SQL w usłudze Azure Synapse

• Zoptymalizuj wydajność zapytań magazynu danych w usłudze Azure Synapse Analytics

• Zapoznaj się z funkcjami deweloperów magazynu danych w usłudze Azure Synapse Analytics

10 Analiza i optymalizacja przechowywania danych w hurtowni danych

11: Obsługa hybrydowego transakcyjnego przetwarzania analitycznego (HTAP) za pomocą łącza Azure Synapse

• Projektuj hybrydowe przetwarzanie transakcyjne i analityczne przy użyciu usługi Azure Synapse Analytics

• Skonfiguruj łącze Azure Synapse za pomocą usługi Azure Cosmos DB

• Wysyłaj zapytania do Azure Cosmos DB za pomocą pul Apache Spark

• Wysyłaj zapytania do usługi Azure Cosmos DB za pomocą bezserwerowych pul SQLAnalizuj i optymalizuj magazyn danych w usłudze Azure Synapse Analytics

 12: Kompleksowe zabezpieczenia dzięki usłudze Azure Synapse Analytics

• Zabezpiecz magazyn danych w usłudze Azure Synapse Analytics

• Konfiguruj wpisy tajne i zarządzaj nimi w Azure Key Vault

• Wdrażaj kontrolę zgodności danych wrażliwych

 13: Przetwarzanie strumieniowe w czasie rzeczywistym z usługą Stream Analytics

• Włącz niezawodną obsługę wiadomości dla aplikacji Big Data przy użyciu usługi Azure Event Hubs

• Pracuj ze strumieniami danych przy użyciu usługi Azure Stream Analytics

• Przetwarzaj strumienie danych za pomocą usługi Azure Stream Analytics

14: Tworzenie rozwiązania przetwarzania strumieniowego za pomocą usługi Event Hubs i Azure Databricks

• Przetwarzaj dane przesyłania strumieniowego za pomocą strukturalnego przesyłania strumieniowego usługi Azure Databricks

 15: Tworzenie raportów przy użyciu integracji usługi Power BI z usługą Azure Synpase Analytics

• Twórz raporty za pomocą usługi Power BI, korzystając z jej integracji z usługą Azure Synapse Analytics

16: Wykonywanie zintegrowanych procesów uczenia maszynowego w usłudze Azure Synapse Analytics

• Użyj zintegrowanego procesu uczenia maszynowego w usłudze Azure Synapse Analytics

OCZEKIWANE PRZYGOTOWANIE SŁUCHACZY:

Znajomość przetwarzania w chmurze

Znajomość podstawowych koncepcji danych

Efekty uczenia zostaną zweryfikowane przed szkoleniem i po szkoleniu poprzez pre i post testy w formie testu teoretycznego zamkniętego w formie on-line.

Na platformie Wirtualna Klasa Altkom Akademii udostępnione zostaną bezterminowo materiały szkoleniowe (tj. np. podręczniki/prezentacje/materiały dydaktyczne niezbędne do odbycia szkolenia/ebooki itp.), zasoby bazy wiedzy portalu oraz dodatkowe informacje od trenera. Uczestnicy zachowują bezterminowy dostęp do zasobów Mojej Akademii i materiałów szkoleniowych zgromadzonych w Wirtualnej Klasie szkolenia. Platforma do kontaktu z trenerami, grupą i całą społecznością absolwentów jest portal Moja Akademia.

Niezbędnym warunkiem uczestnictwa w szkoleniach dofinansowanych z funduszy europejskich jest założenie konta w Bazie Usług Rozwojowych, zapis na szkolenie za pośrednictwem Bazy oraz spełnienie warunków przedstawionych przez danego Operatora, dysponenta funduszy publicznych, do którego składają Państwo dokumenty o dofinansowanie do usługi rozwojowej.

Ogólne warunki uczestnictwa w zajęciach zostały zamieszczone na stronie: https://altkom.sharepoint.com/sites/Sprzedaz/SitePages/Karty-zg%C5%82oszenia.aspx?csf=1&web=1&e=AD94u3&CID=72b4df7a-33bb-461a-b23f-e9b58ac84b2c

Po szkoleniu Uczestnik otrzyma zaświadczenie o ukończeniu szkolenia.

Trener podczas szkolenia będzie organizował krótkie przerwy. Informacja o przerwach będzie umieszczona na slajdzie.

OCZEKIWANE PRZYGOTOWANIE SŁUCHACZY:

• Znajomość przetwarzania w chmurze

• Znajomość podstawowych koncepcji danych

Wymagania ogólne realizacji szkolenia w formule distance learning (online): Komputer stacjonarny lub notebook wyposażony w mikrofon, głośniki i kamerę internetową z przeglądarką internetową z obsługą HTML 5. Monitor o rozdzielczości FullHD. Szerokopasmowy dostęp do Internetu o przepustowości co najmniej 25/5 (download/upload) Mb/s. W przypadku szkoleń z laboratoriami zalecamy: sprzęt wyposażony w dwa ekrany o rozdzielczości minimum HD (lub dwa komputery), kamerę internetową USB, zewnętrzne głośniki lub słuchawki.

Platforma komunikacji – ZOOM

Oprogramowanie – zdalny pulpit, aplikacja ZOOM

Link do szkolenia zgodnie z regulaminem zostanie wysłany na 2 dni przed rozpoczęciem usługi.

Link do szkolenia jest ważny w trakcie trwania całej usługi szkoleniowej.