|
所在平台: Udemy |
课程主页: https://www.udemy.com/course/process-hadoop-big-data-using-apache-pig/
课程评论：没有评论
**课程总结：使用Apache Pig处理大数据** 本课程旨在教授如何使用Apache Pig这一高级平台来创建MapReduce程序，从而高效处理Hadoop中的大数据。我们将深入探讨Pig的数据流平台以及其特有的Pig Latin脚本语言。 **核心内容包括：** * **大数据、Hadoop与MapReduce基础：** 课程将首先介绍大数据基本概念、Hadoop生态系统及其核心的MapReduce框架。 * **Pig Latin脚本语言：** 学习如何使用一种简洁易懂的脚本语言编写复杂的MapReduce转换操作。 * **Pig数据模型与运算符：** 掌握Pig的数据模型，并了解丰富的运算符如何对数据集进行各种操作。 * **内置函数与用户自定义函数（UDF）：** 学习利用Pig提供的内置函数，以及如何创建用户自定义函数来执行特定任务。 * **Pig脚本执行与测试：** 了解如何运行Pig脚本，进行单元测试，以及对数据进行压缩以提高效率。 * **高级主题：** 进一步探讨将Pig嵌入Java、Pig宏等更高级的应用。 本课程提供所有相关的书籍和PDF资料，方便学员跟随作者的讲解进行学习。
Pig is a high-level platform for creating MapReduce programs used with Hadoop. The language for this platform is called Pig Latin. In this course we will go through the PIG data flow platform and the language used by PIG tool. The concepts which are covered in this course are:Writing complex MapReduce transformations using a simple scripting language.Basics of Big Data, Hadoop and MapReduce Framework.PIG Data Model and Different type of operators to operate on datasets.Built-in Functions as well as User Defined Functions for performing a specific task.Running PIG Script, Unit Testing and Compression.Many more advance topics such as Embedding PIG in Java, PIG Macros etc.All the books and PDFs are included, allowing you to follow along with the author throughout the modules in this course.
