|
所在平台: Udemy |
课程主页: https://www.udemy.com/course/arquitetura-de-dados-para-engenharia-e-ciencia-de-dados/
课程评论:没有评论
课程名称:数据架构工程与数据科学 课程概述:本课程“数据架构培训与案例项目实践”旨在帮助数据科学家、数据工程师、数据分析师及数据爱好者在竞争日益激烈的市场中脱颖而出。您将系统学习数据架构的各个方面,并通过实际案例与项目加强理解。 课程内容包括: 1. **数据架构简介**:探讨数据架构及其不同数据结构的定义,包括结构化、半结构化及非结构化数据。分析存储、处理和消费的基本层次,讨论批处理与实时处理、Lambda架构和Kappa架构,以及数据网格(Data Mesh)的概念。 2. **案例研究**:研究实际企业在数据架构项目中的应用,以便为我们的讨论提供实用的解决方案。 3. **数据建模**:深入学习关系型和维度建模技术,掌握设计高效可扩展数据库的关键。 4. **数据治理与质量**:强调数据治理和数据质量的重要性,讨论合规性、数据目录、数据血统和主数据管理,以及数据质量的关键方面,包括准确性、完整性、一致性、及时性、可靠性和相关性。 5. **数据存储**:探讨不同的数据存储技术,从关系型数据库、NoSQL到数据仓库、数据湖和数据湖房屋。 6. **数据处理**:涵盖ETL和ELT的概念,探讨批处理与流处理的差异,学习流处理的基本原理,以及分布式处理、查询优化、索引、执行计划、水平和垂直扩展、负载均衡与分区。 7. **集成与API**:讲解数据集成和API的内容,包括混合ETL和ELT、RESTful API、微服务、事件驱动架构及CI/CD实践。 8. **安全与合规**:讨论身份验证与授权、数据掩码和令牌化、在静止和传输中的加密、以及诸如LGPD等法规的合规性,并重点关注可观测性与监控。 9. **云计算**:理解托管服务与非托管服务的区别,学习无服务器计算、托管数据服务、可扩展性及云迁移策略。 10. **可持续性与绿色IT**:探讨可持续性及绿色IT实践,准备您开发环保的技术解决方案。 11. **案例解决方案展示**:分析实际案例,帮助您在真实世界中应用所学知识。 12. **实际项目**:完成一个实践项目,整合所学知识,设计一套数据架构解决方案。 抓住机遇,成为数据架构专家,掌握市场紧缺的技能。现在就报名,迈向数据技术未来的下一步!
Formação Arquitetura de Dados com Cases e Projetos PráticosVocê deseja dominar a Arquitetura de Dados e se destacar em um mercado cada vez mais competitivo? Nosso curso "Formação Arquitetura de Dados com Cases e Projetos Práticos" foi elaborado para Cientistas de Dados, Engenheiros de Dados, Analistas de Dados e Entusiastas que querem dominar o mundo dos dados. Você vai estudar:Introdução à Arquitetura de Dados: Começaremos explorando o que é arquitetura de dados, compreendendo as diferentes estruturas de dados: estruturados, semi-estruturados e não estruturados. Abordaremos as camadas fundamentais de armazenamento, processamento e consumo, além de discutir o processamento batch versus em tempo real, as arquiteturas Lambda e Kappa e o conceito de Data Mesh.Estudos de Caso: Vamos conhecer empresas que tem projetos de arquitetura de dados, para que possamos ao longo do curso oferecer uma soluçõa.Modelagem de Dados: No terceiro módulo, aprofundaremos nas técnicas de modelagem relacional e dimensional, essenciais para projetar bancos de dados eficientes e escaláveis.Governança e Qualidade de Dados: O quarto módulo destaca a importância da governança e qualidade de dados, incluindo compliance, catalogação, lineage e gestão de dados mestre. Discutiremos os principais aspectos da qualidade de dados: precisão, completude, consistência, atualidade, confiabilidade e relevância.Armazenamento de Dados: No quinto módulo, exploraremos diversas tecnologias de armazenamento, desde bancos de dados relacionais e NoSQL até Data Warehouses, Data Lakes e Data Lakehouses.Processamento de Dados: O sexto módulo abrange ETL e ELT, orquestração, processamento em lote versus streaming, fundamentos de streaming como produtores, consumidores, brokers, tópicos e mensagens. Também discutiremos processamento distribuído, otimização de queries, indexação, planos de execução, escalabilidade horizontal e vertical, balanceamento de carga e particionamento.Integração e APIs: No sétimo módulo, abordaremos a integração de dados e APIs, incluindo ETL e ELT híbridos, APIs RESTful, microserviços, arquitetura orientada a eventos e práticas de CI/CD.Segurança e Compliance: O oitavo módulo trata de autenticação e autorização, mascaramento e tokenização, criptografia em repouso e em trânsito. Discutiremos regulamentações como a LGPD, além de observabilidade e monitoramento, logs, métricas e traces. Computação em Nuvem: No nono módulo, você entenderá a diferença entre serviços gerenciados e não gerenciados, computação serverless, serviços gerenciados de dados, escalabilidade e estratégias de migração para a nuvem.Sustentabilidade e Green IT: Abordaremos a importância da sustentabilidade e práticas de Green IT, preparando você para criar soluções tecnológicas ambientalmente responsáveis.Apresentando Soluções para os Casos: No décimo primeiro módulo, analisaremos casos reais, permitindo que você aplique os conhecimentos adquiridos em situações do mundo real.Projeto Prático: Finalizaremos com um projeto prático, onde você consolidará todo o aprendizado, desenvolvendo uma solução de arquitetura de dados.Não perca a oportunidade de se tornar um especialista em Arquitetura de Dados com habilidades altamente demandadas no mercado.Inscreva-se agora e dê o próximo passo rumo ao futuro da tecnologia de dados.