|
所在平台: Udemy |
课程主页: https://www.udemy.com/course/big-data-apache-spark-com-pyspark-para-iniciantes/
课程评论：没有评论
课程名称：大数据 - Apache Spark与PySpark入门 课程概述： Apache Spark是一种灵活的框架，可用于批处理和流处理数据。其统一的机制使其在大数据应用场景中非常流行。本课程将帮助您开始使用Apache Spark 3.0，编写适用于各种使用案例的大数据应用程序。我们将教授如何在本地机器上配置Spark。随着课程的进行，您将接触到弹性分布式数据集（RDD）和DataFrame API，以及它们的转换和操作。接下来，我们将深入研究Spark应用程序的生命周期。此外，您还将了解Spark集成的SQL模块以及在Databricks中执行笔记本的操作。完成本课程后，您将牢固掌握Apache Spark架构的基本知识，并能够编写和优化Spark应用程序。 学习目标： - 了解主要概念，如RDD、DataFrames、转换等 - 配置Spark开发环境 - 为您的应用程序选择正确的API - 理解Spark的架构以及Spark应用程序的执行流程 - 学习如何在Databricks Community上运行应用程序 - 掌握Spark SQL的使用 - 实践应用窗口函数 通过本课程，您将为进入大数据处理领域打下坚实的基础。
Apache Spark é uma estrutura flexível que permite o processamento de dados em batch e em stremming.Seu mecanismo unificado o tornou bastante popular para casos de uso de big data. Este curso o ajudará a começar a usar o Apache Spark 3.0 e a escrever aplicativos de big data para uma variedade de casos de uso. Aqui vamos ensinar como configurar o Spark em sua máquina local. À medida que avançamos, você será apresentado a conjuntos de dados distribuídos resilientes (RDDs) e APIs de DataFrame e suas transformações e açõe. Em seguida, passamos para o ciclo de vida de um aplicativo Spark. Você também conhecerá os módulos integrados do Spark para SQL e execução de notebooks no Databricks.Ao final deste curso, você terá um conhecimento fundamental sólido da estrutura do Apache Spark e será capaz de escrever e otimizar aplicativos Spark.- Aprenda os principais conceitos, como RDDs, DataFrames, transformações e muito mais- Configure um ambiente de desenvolvimento Spark- Escolha as APIs certas para seus aplicativos- Compreenda a arquitetura do Spark e o fluxo de execução de um aplicativo Spark- Aprenda a executar seus aplicativos no Databricks Community- Entenda como utilizar o Spark SQL- Aplique na prática as Window Functions
