Databricks Delta Lake + APACHE HOP: Carga e Dados

所在平台: Udemy

课程主页: https://www.udemy.com/course/databricks-delta-lake-apache-hop-carga-e-dados/

课程评论:没有评论

第一个写评论        关注课程

课程简介

课程名称:Databricks Delta Lake + APACHE HOP: 数据加载 课程简介:本课程旨在帮助专业人士学习如何构建高效且性能卓越的数据管道,以解决组织中遇到的数据问题。课程的核心问题是,如何有条理且高效地使用这些工具,以快速直观地构建解决方案。我们将结合APACHE HOP和Databricks Delta Lake,两者的结合将帮助您有效地处理数据。 在课程的第一部分,您将深入学习APACHE HOP,掌握数据处理和数据摄取的全套活动,设计并构建数据仓库。课程采用100%图形化的组件,您无需编写任何代码,APACHE HOP是一个低代码平台,允许您以多种方式结合、丰富和清理数据。您将学习如何读取数据并处理内容(如清理不一致性、创建字段以及组合字段等)。 第二部分将继续使用APACHE HOP,深入探讨数据仓库的构建,涵盖商业智能(BI)、数据仓库(DW)、数据暂存区的运作、维度和事实等重要概念。课程将从零开始构建销售信息项目,包括部门、产品和销售人员的表格。最后,您将构建一个工作流,将所有数据加载管道结合在一起,并学习如何在APACHE HOP工具内外执行这些管道。 接下来,我们将学习企业中最热门的Databricks Delta Lake课程,对Databricks及其应用进行详细讲解,重点介绍Delta Lake中数据事务控制的重要性。您将使用parquet文件进行工作,并掌握在数据库中进行的常见操作。Databricks Delta Lake是一款现代的云平台,利用SPARK作为其处理引擎,能够本地控制所有数据事务。 快来加入我们,今天就开始您的学习之旅吧!

课程评论(0条)

课程详情

Este é um daqueles cursos que o profissional busca conhecimento sobre como construir um pipeline eficiente e performático e que resolva os problemas da sua organização, mas a pergunta principal seria, como posso manusear estas ferramentas de uma forma orquestrada, organizada que permita a construção de forma rápida e intuitiva?Por isso, trazemos a junção do APACHE HOP e do Databricks Delta Lake, que fará com que você resolva seus problemas com dados. O que podemos garantir que aprenderá neste curso:Na primeira parte do curso do APACHE HOP que vem completo, com atividades para tratamento e ingestão de dados para que você projete e construa um Data Warehouse, utilizando componentes 100% gráficos e de fácil manuseio, você não precisará digitar nenhum código, o APACHE HOP é low code, será possível combinar, enriquecer, limpar e de muitas outras maneiras manipular dados. A ideia é que você faça a leitura de dados, realize os ajustes e tratamentos no conteúdo (limpeza de inconsistências, criação de campos, composição de campos, dentre outros). Na segunda parte com APACHE HOP vamos construir um Data Warehouse com uma explanação sobre o que é BI, DW, como funciona a staging área, o que são dimensões e fatos e tudo que você tem direito sobre este mundo de dados. Iremos construir um projeto do zero para informações sobre vendas, trabalhando com tabelas de departamento, produto e vendedor. Ao final iremos construir um workflow, que terá todos os pipelines de cargas juntos e como podemos executá-lo dentro da ferramenta APACHE HOP e fora dela.Depois fecharemos com o curso mais solicitado nas organizações Databricks Delta Lake, faremos uma grande explanação sobre Databricks e suas aplicações, falaremos do que é mais importante no Delta Lake o controle de transações dos dados, onde trabalharemos com arquivos parquet, mas sendo consumidos e trabalhados com operações conhecidas em banco de dados. Databricks Delta Lake é o que de mais moderno em plataforma para cloud que utilizam o SPARK como seu motor de processamento e que permitem controlar todas as transações sobre seus dados de forma nativa.Então venha e comece hoje mesmo!

课程标签

0人关注该课程

主题相关的课程