Wrangling Data with Python – The Fabric Way (T. Eitelberg & T.Martens)

Ručný úvod do Microsoft Fabric s Pythonom: naučte sa Lakehouse, Spark, Delta Tables a vytvorte si reprodukovateľné pracovné postupy pripravené na výrobu.

Táto jednodňová predkonferencia ponúka štruktúrovaný a praktický úvod do práce s údajmi v Microsoft Fabric pomocou Pythonu. Zameriava sa na pochopenie základných komponentov, aplikovanie Pythonu v natívnom kontexte Fabric a vytváranie reprodukovateľných dátových pracovných tokov pripravených na výrobu.

• Začneme základnou architektúrou Microsoft Fabric: čo je Lakehouse, ako sa používajú Delta Tables a ako Spark funguje v rámci Fabric.
• Koncepty Core Spark budú vysvetlené bez toho, aby sme sa ponorili príliš hlboko do vnútornej mechaniky, čo poskytne jasné pochopenie toho, ako Fabric vykonáva pracovné zaťaženie.
• Ďalej prejdeme na Python. Po krátkej rekapitulácii základnej syntaxe sa zameriame na kľúčové princípy programovania relevantné pre dátové inžinierstvo. Predstavujeme tiež základné knižnice bežne používané v pracovných postupoch založených na látke.
• S týmto základom sa účastníci presunú do riadených praktických cvičení. Patrí medzi ne vývoj procesov transformácie a integrácie údajov pomocou notebookov Python a Spark vo Fabric. Porovnáme typy notebookov, prediskutujeme charakteristiky rôznych implementácií DataFrame a vysvetlíme, ako výpočtové jednotky (CU) ovplyvňujú výkon.
• V ďalšej fáze skúmame výhody kombinácie Spark s inými Fabric službami, najmä Power BI. Zahŕňa to úvod do sémantického prepojenia – demonštruje, ako možno transformované údaje prepojiť so sémantickými modelmi na vytváranie prehľadov. Bude sa diskutovať o technickej integrácii a praktických návrhoch.
• Záverečná časť dňa sa zameriava na vývojové pracovné postupy pomocou Visual Studio Code – lokálne a v prehliadači. Porovnávame vývoj založený na kóde VS s notebookmi Fabric, zdôrazňujeme užitočné rozšírenia a vysvetľujeme scenáre, v ktorých práca mimo používateľského rozhrania Fabric ponúka ďalšiu flexibilitu.

Vaši školitelia:
Tillmann Eitelberg (https://www.linkedin.com/in/tillmanneitelberg/)

Tom Martens (https://www.linkedin.com/in/tommartens68/)