Základní info
Kurz je určený pre dátových inžinierov a dátových profesionálov, ktorí sa chcú naučiť navrhovať, implementovať a prevádzkovať kompletné riešenia dátového inžinierstva s využitím platformy Azure Databricks a služby Unity Catalog. Na školení pochopíte kľúčové koncepty platformy Azure Databricks, naučíte sa vyberať a konfigurovať vhodné výpočtové prostriedky a vyskúšate si organizovať dátové objekty v Unity Catalog s dôrazom na zabezpečenie, governance a sledovanie pôvodu dát (data lineage). Naučíte sa navrhovať dátové modely vrátane dimenzionálneho modelovania a Slowly Changing Dimensions, načítavať dáta rôznymi spôsobmi (Lakeflow Connect, Auto Loader, Spark Structured Streaming, Lakeflow Spark Declarative Pipelines), čistiť a transformovať dáta a vynucovať dátovú kvalitu pomocou pipeline expectations. Ďalej sa naučíte navrhovať a implementovať dátové pipeline v rámci medallion architektúry, automatizovať ich prostredníctvom Lakeflow Jobs, aplikovať osvedčené postupy vývojového cyklu (Git, testovanie, Declarative Automation Bundles, Databricks CLI) a monitorovať a optimalizovať záťaž vrátane diagnostiky problémov. Kurz je zároveň komplexnou prípravou na skúšku DP-750 Microsoft Certified: Azure Databricks Data Engineer Associate.
