|
所在平台: Udemy |
课程主页: https://www.udemy.com/course/collenzhao-bigdata/
课程评论：没有评论
**课程名称：** 从大数据（Hadoop、Spark、Flink、Kafka、NoSQL）到云原生（Docker、K8s） **课程概述：** 本课程全面培训业界最流行、应用最广泛的大数据技术体系及容器技术。课程内容涵盖技术架构、核心关键技术实现、应用项目开发以及运维实践，旨在帮助学员构建和掌握从数据采集、存储、计算到分析的完整大数据处理能力，并深入了解和应用云原生技术，实现高效、可扩展的应用部署和管理。 **课程主要模块：** 1. **大数据基础与数据仓库基础知识：** 介绍大数据相关的概念、原理以及数据仓库的基本理论和构建方法。 2. **大数据离线数据仓库存储系统：** 学习Hadoop HDFS（分布式文件系统）和HBase（分布式数据库）等关键技术，掌握大数据存储的架构和实践。 3. **大数据离线数据仓库计算引擎：** 深入理解Hadoop MapReduce、Hadoop Yarn以及Spark Core的原理和应用，学习如何高效地处理海量离线数据。 4. **大数据离线分析引擎：** 掌握Hive和Spark SQL，学习如何利用SQL语句对存储在大数据平台上的数据进行复杂的离线分析。 5. **大数据数据仓库流式计算引擎：** 学习Spark Streaming和Flink，掌握实时数据处理和流式计算的技术，应对实时分析和应用场景。 6. **数据仓库ETL工具应用：** 学习Sqoop和Flume等ETL工具，了解如何高效地进行数据抽取、转换和加载。 7. **NoSQL数据库：** 探索Redis（内存数据库）和MongoDB（文档数据库）等NoSQL数据库的特性和应用场景，学习如何根据需求选择和使用非关系型数据库。 8. **分布式消息系统：** 学习Kafka，理解其作为分布式发布-订阅消息系统的原理和在构建高吞吐量数据管道中的作用。 9. **容器引擎：** 掌握Docker技术，学习如何构建、部署和管理容器化应用，实现应用的快速打包和标准化运行。 10. **容器编排技术：** 深入学习Kubernetes（K8s），理解其作为容器编排平台的强大功能，包括自动化部署、扩展和管理容器化应用。
课程培训业界最流行、应用最广泛的大数据技术体系及容器技术。强化技术架构和核心关键技术实现、应用项目开发和运维实践。本课程主要包含以下模块内容：- 大数据基础与数据仓库基础知识- 基于大数据的离线数据仓库存储系统（Hadoop HDFS、HBase）- 基于大数据的离线数据仓库计算引擎（Hadoop MapReduce、Hadoop Yarn、Spark Core）- 基于大数据的离线分析引擎（Hive、Spark SQL）- 基于大数据的数据仓库流式计算引擎（Spark Streaming和Flink）- 数据仓库中的ETL工具应用（Sqoop与Flume）- NoSQL数据库（Redis与MongoDB）- 分布式消息系统（Kafka）- 容器引擎（Docker）- 容器编排技术（Kubernetes）
