|
所在平台: Udemy |
课程主页: https://www.udemy.com/course/big-data-internship-program-part-2-data-ingestion/
课程评论：没有评论
**课程名称：** 大数据实习项目 - 数据摄取-Sqoop 和 Flume **课程概述：** 本课程是大数据实习项目的一部分，旨在涵盖大数据项目生命周期的关键阶段，包括基础、数据摄取、存储、处理和可视化。本课程的重点是大数据的数据摄取环节。 **课程内容分为两个部分：** **1. 技术知识讲解及示例：** * **大数据摄取概念及方法：** 深入了解大数据摄取的基本概念和常用的技术手段。 * **Sqoop 概念与特性：** 详细介绍 Sqoop 工具，包括其核心概念、功能特性以及关键参数的使用。 * **Flume 概念与配置：** 学习 Flume 工具，理解其工作原理、配置方法以及如何利用其特性（如多路复用、Flume Agent、拦截器等）进行数据收集和传输。 * **Hadoop 支持的文件格式：** 了解 Hadoop 生态系统中支持的各种文件格式。 **2. 项目实践：** * **GitHub 私有仓库访问：** 获取访问我们私有的 GitHub 代码仓库的权限。 * **使用 Sqoop 和 Flume 构建推荐书项目的第一部分：** 将所学技术应用于实际项目中，利用 Sqoop 和 Flume 来动手构建“推荐书”项目的初始数据摄取部分。 **目标：** 通过理论学习和项目实践，使学员能够掌握大数据数据摄取的关键技术（Sqoop 和 Flume），并具备将这些技术应用于实际大数据项目开发的能力。
This course is a part of "Big data Internship Program" which is aligned to a typical Big data project life cycle stage. FoundationIngestionStorageProcessingVisualization This course is focused on the Ingestion in Big data. Our Course is divided into two part 1) Technical Knowledge with examples and 2) Work on project Technical Knowledge Big Data ingestion's concept and means Sqoop concept and feature. Good understanding of sqoop tools with arguments Flume concept and configuration Flume features: Multiplexing,Flume Agents,Interceptors etc.Understanding of different File Format supported by Hadoop Project Part Get the access to our private GitHub repository Build the first part of Our Recommendation Book project using sqoop and flume
