IA e Dados
Roadmap Engenharia de Dados
Pipelines, batch e streaming, arquiteturas de armazenamento, Kafka, qualidade de dados e orquestração.
- Intermediário
- cerca de 7 horas
- 7 módulos
- 9 etapas
O que você vai aprender
1. Pipelines de Dados
ETL e ELT, batch versus streaming, e orquestração de pipelines.
- ETL, ELT e Pipelines — Engenharia de Dados · ETL, ELT e Pipelines
- Batch e Streaming — Engenharia de Dados · Batch e Streaming
- Orquestração — Engenharia de Dados · Orquestração
2. Armazenamento e Formatos de Dados
Warehouses, lakes e lakehouses, e armazenamento eficiente com Parquet e particionamento.
- Warehouse, Lake e Lakehouse — Engenharia de Dados · Warehouse, Lake e Lakehouse
- Parquet e Particionamento — Engenharia de Dados · Parquet e Particionamento
3. SQL para Análise de Dados
Resuma dados com GROUP BY e HAVING e responda perguntas mais difíceis com subqueries, CTEs e window functions.
- GROUP BY e HAVING — Bancos de Dados · GROUP BY e HAVING
- Subqueries, CTEs e Window Functions — Bancos de Dados · Subqueries, CTEs e Window Functions
4. Análise de Dados com NumPy e pandasOpcional
Carregue, limpe, combine e agregue dados tabulares com NumPy e pandas.
- NumPy — Análise de Dados com Python · NumPy
- Fundamentos de pandas — Análise de Dados com Python · Fundamentos de pandas
- Limpeza de Dados — Análise de Dados com Python · Limpeza de Dados
- Merge e Join — Análise de Dados com Python · Merge e Join
- GroupBy e Agregação — Análise de Dados com Python · GroupBy e Agregação
5. Modelagem e Ferramentas de BIOpcional
Modele dados para BI e aprenda os conceitos centrais comuns a Power BI, Tableau e Looker.
- Modelagem de Dados para BI — Visualização de Dados e BI · Modelagem de Dados para BI
- Conceitos de Power BI, Tableau e Looker — Visualização de Dados e BI · Conceitos de Power BI, Tableau e Looker
6. Desenvolvimento Assistido por IAOpcional
Trabalhe bem com agentes de código: forneça contexto e arquivos de instruções, escreva prompts para código, conecte ferramentas com MCP e revise o que eles produzem.
- Agentes de Código — Desenvolvimento Assistido por IA · Agentes de Código
- Contexto e Arquivos de Instruções — Desenvolvimento Assistido por IA · Contexto e Arquivos de Instruções
- Prompts para Código — Desenvolvimento Assistido por IA · Prompts para Código
- Ferramentas e MCP — Desenvolvimento Assistido por IA · Ferramentas e MCP
- Revisando e Testando Código Gerado por IA — Desenvolvimento Assistido por IA · Revisando e Testando Código Gerado por IA
7. Kafka e Qualidade de Dados
Transmita eventos com Kafka e mantenha os dados confiáveis com evolução de schema e checagens de qualidade.
- Kafka — Engenharia de Dados · Kafka
- Evolução de Schema e Qualidade de Dados — Engenharia de Dados · Evolução de Schema e Qualidade de Dados
Cada etapa é liberada quando você responde bem às suas questões, e um módulo concluído conta em todos os roadmaps que o compartilham.
Comece este roadmap grátis