Wrangling Data with Python – The Fabric Way (T. Eitelberg & T.Martens)

Introdução prática ao Microsoft Fabric com Python: aprenda Lakehouse, Spark, Delta Tables e crie fluxos de trabalho reproduzíveis e prontos para produção.

Isso é de um dia A pré-conferência oferece uma introdução estruturada e prática sobre como trabalhar com dados no Microsoft Fabric usando Python. O foco está na compreensão dos componentes principais, na aplicação do Python em um contexto nativo do Fabric e na construção de fluxos de trabalho de dados reproduzíveis e prontos para produção.

• Começamos com a arquitetura básica do Microsoft Fabric: o que é um Lakehouse, como as Delta Tables são usadas e como o Spark opera no Fabric.
• Os conceitos principais do Spark serão explicados sem se aprofundar muito na mecânica interna, proporcionando uma compreensão clara de como o Fabric executa cargas de trabalho.
• Em seguida, mudamos para Python. Após uma breve recapitulação da sintaxe essencial, nos concentramos nos principais princípios de programação relevantes para a engenharia de dados. Também apresentamos bibliotecas essenciais comumente usadas em fluxos de trabalho baseados em Fabric.
• Com essa base estabelecida, os participantes passarão para exercícios práticos guiados. Isso inclui o desenvolvimento de processos de transformação e integração de dados usando notebooks Python e Spark no Fabric. Compararemos os tipos de notebook, discutiremos as características de diferentes implementações de DataFrame e explicaremos como as Unidades de Computação (CUs) influenciam o desempenho de execução.
• Na próxima fase, exploraremos os benefícios de combinar o Spark com outros serviços do Fabric, especialmente o Power BI. Isso inclui uma introdução ao Semantic Link – demonstrando como os dados transformados podem ser conectados a modelos semânticos para relatórios. Serão discutidas tanto a integração técnica como considerações práticas de design.
• A parte final do dia se concentra nos fluxos de trabalho de desenvolvimento usando o Visual Studio Code – localmente e no navegador. Comparamos o desenvolvimento baseado em VS Code com notebooks do Fabric, destacamos extensões úteis e explicamos cenários em que trabalhar fora da UI do Fabric oferece flexibilidade adicional.

Seus instrutores:
Tillmann Eitelberg (https://www.linkedin.com/in/tillmanneitelberg/)

Tom Martens (https://www.linkedin.com/in/tommartens68/)