|
所在平台: Udemy |
课程主页: https://www.udemy.com/course/data-analytics-aws/
课程评论:没有评论
## AWS 数据与分析课程总结 本课程深入介绍了如何在亚马逊云科技 (AWS) 上进行数据与分析。课程内容涵盖了从数据存储、数据处理到数据可视化的关键 AWS 服务。 **核心内容包括:** * **AWS S3 (Simple Storage Service):** * **基础概念与操作:** 讲解了 S3 的基本概念、如何创建 S3 存储桶 (bucket)、上传样本数据文件。 * **关键组件与特性:** 深入探讨了 S3 的核心功能,如对象生命周期管理 (S3 Object Lifecycle)、对象锁定 (Object Lock)、S3 复制 (S3 Replication)、预签名 URL (Presigned URL)、S3 事件通知 (S3 Event Notification)、强一致性 (Strong Consistency)、S3 Select、S3 批量操作 (S3 Batch Operations) 以及如何在 S3 上托管静态网站。 * **存储类别:** 详细阐述了 AWS S3 提供的各种存储类别及其适用场景。 * **时间序列数据建模:** 讲解如何在 S3 中进行时间序列数据建模。 * **AWS Glue:** * **服务介绍与设计:** 解释了 AWS Glue 的设计理念及其关键特性,包括 Spark 流式作业 (Spark streaming job)、Glue Data Catalog、Glue Crawler。 * **ETL 开发:** 教授如何开发 AWS Glue ETL 作业,包括 Glue 工作流 (Glue workflow) 和触发器 (Triggers),以及 AWS Glue Schema Registry 的使用。 * **Glue Studio:** 演示如何使用 Glue Studio 进行交互式会话 (interactive sessions) 来开发 Glue ETL 作业。 * **AWS Athena:** * **服务介绍与使用:** 介绍了 AWS Athena,并演示了如何使用 Athena 对存储在 S3 中的数据运行即席查询 (adhoc query)。 * **AWS QuickSight:** * **服务介绍与应用:** 讲解了 AWS QuickSight,并示范了如何使用 QuickSight 创建商业智能 (BI) 仪表板。 **实践环节:** 课程包含了多个动手实验 (LABS),让学员亲身实践 S3 存储桶的创建、AWS Glue 的使用、AWS Athena 的查询以及 AWS QuickSight 的仪表板构建。 **企业级项目:** 课程以一个企业级项目作为结束,该项目展示了端到端的数据处理流程: 1. 将数据加载到 S3 存储桶。 2. 使用 Glue Crawler 爬取数据,并在 Glue Data Catalog 中创建数据库和表。 3. 利用 AWS Glue ETL 作业,通过 Data Catalog 对 S3 中的数据进行读取和写入 (转换)。 4. 使用 QuickSight 构建分析仪表板,可视化原始数据和转换后的数据。 本课程旨在帮助学员掌握在 AWS 上构建和管理数据分析解决方案的能力。
What is AWS S3 & How to do Time series data Modelling in S3, how to upload sample data files in S3What are AWS S3 key components & key Features (i.e S3 Object Lifecycle, Object lock, S3 replication, Presigned URL, S3 event notification, strong consistency, S3 Select, S3 Batch operations, Hosting a static website in AWS S3)What are different storage classes in AWS S3What is AWS Glue, it's design & key features(Spark streaming job, Glue Crawler, Data catalog & Developing AWS Glue ETL jobs , glue workflow & Triggers , aws Glue Schema Registry)How to develop Glue ETL job in Glue studio using interactive sessionsWhat is AWS Athena & How to use it to run adhoc query on data in AWS S3What is AWS Quick Sight & How to use it to create BI DashboardLABS on AWS S3 bucket creation, AWS Glue, AWS Athena, AWS Quick sightEnterprise level project: which shows how to load data into S3 bucket & then crawl that data using glue crawler to create database & table in Glue catalog. use AWS glue ETL job to read & write data from S3 via data Catalog. Quick sight will be used to buid analytics dashboard from raw data & transformed data.