|
所在平台: Udemy |
课程主页: https://www.udemy.com/course/hadoop-administration-an-easy-way-to-become-a-hadoop-admin/
课程评论：没有评论
**课程名称：Hadoop 管理：轻松成为 Hadoop 管理员** **课程概述：** 本课程旨在帮助学习者掌握 Hadoop 管理的核心技能，从基础概念到实际操作，全面提升成为一名合格 Hadoop 管理员的能力。课程内容丰富，涵盖了 Hadoop 的各个方面，并提供实用的案例分析和指导。 **课程模块：** * **模块 0：赠送内容** * Linux/UNIX 基础课程 * 100 个 Hadoop 管理日常活动疑难解答 * AWS 账户创建指南 * **模块 1：Hadoop 管理导论** * 深入理解大数据概念 * 常见大数据领域场景分析 * 传统解决方案的局限性探讨 * Hadoop 管理员的角色与职责 * 实际案例分析 * **模块 2：Hadoop 架构与 MapReduce** * Hadoop 简介 * Hadoop 架构详解 * Hadoop 1.x, 2.x 和 3.x 的区别 * Hadoop 1.x 和 2.x 生态系统工具与核心系统 * HDFS 文件系统：NameNode, DataNode, Secondary NameNode 详解；读写 Anatomy；复制管道 * YARN 框架：在 Hadoop 中的作用与功能；MapReduce 理论与 YARN 环境下的 MapReduce 代码集群测试 * **模块 3：集群规划** * 机架类型介绍 * CPU、内存和硬件选择通用原则 * 硬件考量因素 * 各守护进程（daemons）所需的机器配置 * 硬件选择最佳实践 * 网络考量因素 * **模块 4：Hadoop 集群管理、备份、恢复与维护** * SafeMode 详解 * 节点的停用（Decommissioning）、启用（Commissioning）和重新启用（Re-Commissioning） * Trash 功能 * Distcp 工具 * 机架感知（Rack Awareness） * HDFS/Hadoop 均衡器（Balancer） * **模块 5：资源管理与调度** * 调度器（Scheduler）介绍与演示：Capacity Scheduler * **模块 6：HDFS 联邦与高可用** * YARN 框架回顾 * HDFS 联邦（Federation）理解 * 高可用（High Availability）理解 * 通过 Quorum Journal Manager 实现高可用 * **模块 7：Cloudera 安装与性能调优** * Cloudera Distribution Hadoop (CDH) 概览 * Cloudera 的特性 * Cloudera Manager 版本介绍 * Cloudera Manager Web UI 导航 * CDH 安装过程 * **模块 8：安全** * Hadoop 平台安全基础 * 平台安全加固 * Kerberos 详解 * 在 Cloudera Hadoop 集群中使用 LDAP 认证配置 Kerberos
Module 0: Giveaways· Linux / UNIX Course· 100 Solved Queries of Hadoop Administration Day to Day activities.· Guidelines to create an AWS account.Module 1: Introduction of Hadoop Administration· Understanding Big Data· Common big data domain scenarios· Analyze Limitation of Traditional Solutions· Roles and Responsibility· Case StudiesModule 2: Hadoop Architecture And Mapreduce· Introduction to Hadoop· Hadoop Architecture· Difference between Hadoop 1.x, Hadoop 2.x and Hadoop 3.x· Hadoop 1.x Ecosystem tools and Core System· Hadoop 2.x Ecosystem tools and Core System· HDFS File Systemo Introduction of NameNode, DataNode and Secondary NameNodeo Anatomy of Write and Reado Replication Pipeline· YARN Frameworko Role and function of YARN in Hadoopo Mapreduce Theory§ Cluster testing using MapReduce Code in YARN EnvironmentModule 3: Cluster Planning· Types of Rack· General Principal of selecting CPU Memory and hardware· Understand Hardware Consideration· Machines requirement as per the daemons· Learn Best Practice for selecting hardwareKnow the network ConsiderationModule 4: Hadoop Cluster Administration, Backup, Recovery and Maintenance· SafeMode· Decommissioning, Commissioning and Re-Commissioning of Node· Trash Functionality· Distcp· Rack Awareness· HDFS / Hadoop BalancerModule 5: Managing Resources and Scheduling· Scheduler: Explanation and demoo Capacity SchedulerModule 6: HDFS Federation and High Availability· Understand the YARN framework· Understand the Federation· Understand High Availability· High Availability Implementation Using Quorum Journal ManagerModule 7: Cloudera Setup and Performance Tuning· Cloudera Distribution Hadoop· Cloudera Features· Cloudera Manager Editions· Cloudera Manager Web UI· CDH InstallationModule 8: Security· Basics of Hadoop Platform Security· Securing the Platform· Understand KerberosConfiguring Kerberos on Cloudera Hadoop Cluster using LDAP authentication
