|
所在平台: Udemy |
课程主页: https://www.udemy.com/course/building-big-data-pipelines-with-sparkr-powerbi-mongodb/
课程评论:没有评论
课程名称:使用 SparkR、PowerBI 和 MongoDB 构建大数据管道 课程概述:欢迎参加《使用 SparkR、PowerBI 和 MongoDB 构建大数据管道》课程。在本课程中,我们将利用大数据技术为 R 创建一个大数据分析解决方案。在我们的应用案例中,将处理原始地震数据,并应用大数据处理技术提取、转换和加载数据,从而形成可用的数据集。一旦处理和清理了数据,我们将使用这些数据源来构建预测分析和可视化。 Power BI Desktop 是一款强大的数据可视化工具,让您可以构建高级查询、模型和报告。通过 Power BI Desktop,您可以连接多个数据源,并将其组合成数据模型。这个数据模型允许您构建可视化和仪表板,并可以作为报告与组织中的其他人共享。 SparkR 是一个 R 包,提供了一个轻量级前端,以从 R 使用 Apache Spark。SparkR 提供了一个支持选择、过滤、聚合等操作的分布式数据框实现(类似于 R 数据框和 dplyr),但适用于大型数据集。SparkR 还支持使用 MLlib 进行分布式机器学习。 MongoDB 是一个面向文档的 NoSQL 数据库,适用于高容量数据存储。它以 JSON 类似的格式(称为文档)存储数据,而不使用行/列表。文档模型与应用程序代码中的对象相映射,使得数据易于处理。 您将学习的内容包括: - 使用 R 和 MongoDB 创建大数据处理管道 - 利用 SparkR 和 MLlib 库进行地理空间数据的机器学习 - 使用 SparkR、R 和 PowerBI 进行数据分析 - 使用 Spark 数据框进行数据的操作、清理和转换 - 在 PowerBI Desktop 中创建地理地图 - 在 PowerBI Desktop 中创建仪表板 该课程为希望掌握大数据处理、数据分析和可视化技能的学习者提供了良好的基础。
Welcome to the Building Big Data Pipelines with SparkR & PowerBI & MongoDB course. In this course we will be creating a big data analytics solution using big data technologies for R.In our use case we will be working with raw earthquake data and we will be applying big data processing techniques to extract transform and load the data into usable datasets. Once we have processed and cleaned the data, we will use it as a data source for building predictive analytics and visualizations.Power BI Desktop is a powerful data visualization tool that lets you build advanced queries, models and reports. With Power BI Desktop, you can connect to multiple data sources and combine them into a data model. This data model lets you build visuals, and dashboards that you can share as reports with other people in your organization.SparkR is an R package that provides a light-weight frontend to use Apache Spark from R. SparkR provides a distributed data frame implementation that supports operations like selection, filtering, aggregation etc. (similar to R data frames, dplyr) but on large datasets. SparkR also supports distributed machine learning using MLlib.MongoDB is a document-oriented NoSQL database, used for high volume data storage. It stores data in JSON like format called documents, and does not use row/column tables. The document model maps to the objects in your application code, making the data easy to work with.You will learn how to create big data processing pipelines using R and MongoDBYou will learn machine learning with geospatial data using the SparkR and the MLlib libraryYou will learn data analysis using SparkR, R and PowerBIYou will learn how to manipulate, clean and transform data using Spark dataframesYou will learn how to create Geo Maps in PowerBI DesktopYou will also learn how to create dashboards in PowerBI Desktop