|
所在平台: Udemy |
课程主页: https://www.udemy.com/course/workshop-airflow-dbt-modernizando-seus-pipelines-de-dados/
课程评论：没有评论
课程名称：Workshop Airflow + DBT - 现代化您的数据管道 课程概述：本次工作坊将向您展示如何通过两种方式结合使用Airflow和DBT：一种是常规的BashOperator方式，另一种是更高级的方式，通过Airflow Astro中的Cosmos进行使用。您将能够对您的模型进行有效的调度，并利用Airflow这一出色的管道调度工具进行全面监控。课程还将探讨每种方法背后的基本概念，并介绍项目组织和结构的最佳实践，使您能够在整个管道过程中保持数据的一致性和质量。 完成本课程后，您将全面了解如何管理数据流，从DBT中的数据准备和建模到在Airflow Astro中的高级调度。课程将使用Airflow Astro，这将简化我们的部署并带来新功能，同时Cosmos将帮助我们以市场上最好的方式调度DBT。最终，您将构建出可扩展、稳健且易于维护的管道，让您能够专注于真正重要的事情：从数据中提取价值并为业务提供可靠的洞察。加入这一领域的前沿，掌握现代技术，助力您在数据领域的成功。
Esse workshop vai te mostrar como unir o Airflow e o DBT de duas formas: A forma comum que é o BashOperator; a forma mais avançada que é com o Cosmos no Airflow Astro. Você será capaz de orquestrar seus modelos, monitorar os mesmos com todo o poder do Airflow essa ferramenta incrivél de orquestração de pipelines.Além de explorar os conceitos fundamentais por trás de cada abordagem, o treinamento abordará boas práticas de organização e estrutura de projeto, possibilitando que você mantenha a consistência e a qualidade dos dados ao longo de todo o pipeline.No final, você terá um panorama completo sobre como gerenciar seus fluxos de dados, desde a preparação e modelagem no DBT até a orquestração avançada no Airflow Astro. Estaremos usando o airflow astro, que vai facilitar nosso deploy e nos trazer novas funcionalidades, assim como o cosmos que nos ajudará a orquestrar o DBT com o que há de melhor no mercado.Tudo isso resultará em pipelines escaláveis, robustos e fáceis de manter, permitindo que você foque no que realmente importa: extrair valor dos dados e oferecer insights confiáveis para o negócio.Esteja na vanguarda da área de dados, usando as técnicas modernas que estão transformando o mundo.
