APACHE HOP e NIFI: construa pipelines e fluxos de dados

所在平台: Udemy

课程主页: https://www.udemy.com/course/apache-hop-e-nifi-construa-pipelenes-e-fluxos-de-dados/

课程评论:没有评论

第一个写评论        关注课程

课程简介

**课程名称:APACHE HOP 与 NiFi:构建数据管道和数据流** **课程概述:** 本课程将深入介绍两款强大的数据处理工具:APACHE HOP 和 APACHE NiFi。通过学习,您将掌握如何利用这些工具构建高效的数据管道和数据流,实现数据的处理和摄取。 **APACHE HOP:** * **可视化操作,无需编码:** HOP 是一款全可视化的工具,允许您通过各种插件(组件)轻松执行数据处理任务,无需编写代码。 * **强大的管道功能:** HOP 能够解决数据执行和顺序处理中的复杂问题,通过“管道”组件实现任务的串联,支持多种操作,包括: * 读取和写入数据文件。 * 连接和操作数据库。 * 合并文件或表。 * 数据清洗和转换(创建新列、删除现有列等)。 * **自动化执行:** 您将学习如何使用 CRONTAB 或 Windows 任务计划程序来安排 HOP 的执行,并掌握 HOP-RUN 的使用。 * **工作流管理:** 课程还将涵盖如何使用工作流来组织和管理您的数据处理任务。 **APACHE NiFi:** * **数据摄取与流动:** NiFi 是一款专为处理和分发数据到不同系统而设计的工具。 * **自动化数据流管理:** 其核心优势在于管理和自动化系统间的数据流动。 * **Web 界面操作:** NiFi 提供易于使用的 Web 界面来执行数据流操作,是一种基于流的编程方式。 **立即加入,开启您的数据处理之旅!**

课程评论(0条)

课程详情

Preparamos um dos cursos mais incríveis na área de dados, trabalhando com duas grandes ferramentas de mercado que permitem o tratamento e ingestão de dados, seja por criação de pipelines ou por meio de fluxo de dados, estamos falando do APACHE HOP e do APACHE NiFi.Iniciaremos no treinamento com um produto 100% visual, que permite a execução de diversos plugin (componentes) de forma prática e sem código, utilizaremos o APACHE HOP. Ela veio para resolver os grandes problemas de execução e tratamento de dados em sequência, permitindo o encadeamento e diversas tarefas em um componente chamado pipeline, sendo possível (ler um arquivo de dados, gravar um arquivo de dados, ler banco de dados, gravar em banco de dados, fazer união de arquivos ou tabelas, tratar dados criando novas colunas ou eliminando outras existentes, dentre outras atividades). Você poderá criar um schedule utilizando a CRONTAB ou agendador do windows e para isso vamos utilizar o HOP-RUN. Claro, aprenderemos a trabalhar com workflow, para organizar as nossas tarefas.Em seguida vamos adentrar no mundo do APACHE NiFi, que é uma ferramenta de ingestão e fluxo de dados criada para processar e distribuir dados entre diferentes sistemas, sua principal funcionalidade é o gerenciamento e a automatização do fluxo de dados entre os sistemas, para execução destes fluxos de dados é fornecida uma interface WEB. É a programação baseada em fluxos.Então venha conhecer e comece hoje mesmo a trabalhar com estas duas grandes ferramentas.

课程标签

0人关注该课程

主题相关的课程