Do NiFi ao Hadoop, pegando a estrada

Como criar um sanbox com Docker e começar sua viagem do NiFi ao Hadoop

Carlos Alberto Rocha Cardoso
DATA ENGINEER BR

--

Photo by FORREST CAVALE on Unsplash

Achou que a gente ia ficar só na teoria? Achou errado ot@$%#!

Tá começando mais um post do dataengineerbr, um blog de Engenharia de Dados.

E o tema hoje é… TRANSPORTE DE DADOS. Vamos falar do NiFi, ele que não é motorista de van, mas nasceu prô transporte.

Solta a vinheta Simone!

Como voce deve ter percebido, sou fã do Choque de Cultura, é um dos motivos de eu pagar internet! Homenagem feita, vamos ao que interessa.

Conceituando o Mínimo Necessário

Nosso tutorial vai contar com três componentes, Nifi, Hadoop e Docker. Para entender o papel de cada um, vamos conceituar o básico.

NiFi, nascido para transportar

Visto da lua, o NiFi é uma ferramenta útil para automatizar o fluxo de dados entre sistemas. Se esse fluxo for contínuo então, um caso de streaming, “aí é que ele é útil mesmo”. Para construir seu primeiro fluxo, é importante conhecer ao menos estes…

--

--

Carlos Alberto Rocha Cardoso
DATA ENGINEER BR

Data professional, enjoying the journey of the life, the universe and everything.