|
所在平台: Udemy |
课程主页: https://www.udemy.com/course/big-data-y-uso-de-spark-para-manejo-de-datos/
课程评论：没有评论
**课程名称：** 大数据与Spark数据处理 **课程概述：** 本课程旨在教授学员关于大数据和Spark的基本概念，以及它们在当前就业市场中的重要性。本课程是数据工程领域的入门级课程，旨在帮助初学者打下坚实的基础。 课程将涵盖： * **大数据基础概念：** 介绍大数据的定义、特点和挑战。 * **Spark核心概念：** 解释Spark的架构、优势以及它如何处理大规模数据集。 * **RDD（弹性分布式数据集）：** 简要介绍RDD作为Spark的基础，但课程重点将放在DataFrames。 * **Spark DataFrames：** * 如何创建DataFrames。 * 如何在DataFrames上执行数据转换和操作。 * 强调DataFrames的操作方式与SQL数据库类似，因此具备SQL知识将有所帮助。 * **本地环境与集群的通用性：** 尽管课程将在本地机器上进行，但所有概念和练习都适用于集群环境，因为Spark的操作方式在集群中是相同的。 **学习目标：** 通过本课程，学员将能够深入理解大数据和Spark的核心概念，并能够使用Spark DataFrames进行高效的数据处理和分析，为未来成为一名数据工程师做好准备。
En este curso se pretende enseñar a los estudiantes acerca del big data, spark y sus conceptos ya que es de las tecnologías que se están utilizando actualmente en el mundo laboral, y poder ayudar a personas que están empezando en este mundo de ingeniero de datos ya que es un primer paso para esto, Se tendrá conceptos básicos de big data, spark pero se harán profundizaciones a nivel de código para el manejo de datos en entornos de big data haciendo uso del framework de sparkSe tendrá un pincelazo de lo que son los rdds ya que son la base del framework de spark, pero el curso se enfocara en enseñar a los estudiantes acerca de los dataframes, como crearlos como realizar transformaciones y manipulación de los datos a través de estos, ya que su manejo es similar a las bases de datos con SQ; para los dataframes sería bueno conocer un poco de SQLAunque el curso se esté manejando en máquinas locales (el propio pc de cada uno de los estudiantes) se debe entender que los conceptos y ejercicios realizados para comprender spark y el uso de dataframes funcionara cuando se realice en un cluster, ya que se manejara de la misma forma. Por ende, el curso nos permite interiorizar todos los conceptos y las actividades
