O passado, presente e o futuro da Engenharia de Dados — Data Hackers Podcast 49
Como será o futuro da área de Data Engineering, seus profissionais e as ferramentas que eles irão utilizar
Como será que a área de Engenharia de Dados vai estar nos próximos anos? Que tipos de ferramentas, profissionais e processos existirão? Como foi o progresso até aqui? Ainda vale a pena usar Hadoop? E a tal da Feature Store, hein? Isso e muito mais nós conversamos com duas feras no assunto: Gustavo “Prezado” Campos — Gerente Senior de Engenharia de Dados na Hotmart — e Rodrigo “Teoria” Carneiro — Big Data Specialist na TKSolution.
Lembrando que você pode encontrar o podcast do Data Hackers no Spotify, iTunes, Google Podcast, Castbox e muitas outras plataformas, incluindo nosso site oficial. Caso queira, você também pode ouvir o episódio aqui no post mesmo!
Falamos no episódio
Nossos convidados
Linkedin do Gustavo Campos
Linkedin do Rodrigo Carneiro
Blog posts
The Rise of the Data Engineer
O que é Analytics Engineer?
O que é Data Mesh?
Livros
DAMA — DMBoK, para gerenciamento de dados
Plataformas
Ferramentas
MapReduce
Apache Airflow
Apache Superset
Apache Hadoop
Apache Spark
Feature Store
DBT
Amundsen
Apache Atlas
