Do NiFi ao Hadoop, pegando a estrada
Como criar um sanbox com Docker e começar sua viagem do NiFi ao Hadoop
Achou que a gente ia ficar só na teoria? Achou errado ot@$%#!
Tá começando mais um post do dataengineerbr, um blog de Engenharia de Dados.
E o tema hoje é… TRANSPORTE DE DADOS. Vamos falar do NiFi, ele que não é motorista de van, mas nasceu prô transporte.
Solta a vinheta Simone!
Como voce deve ter percebido, sou fã do Choque de Cultura, é um dos motivos de eu pagar internet! Homenagem feita, vamos ao que interessa.
Conceituando o Mínimo Necessário
Nosso tutorial vai contar com três componentes, Nifi, Hadoop e Docker. Para entender o papel de cada um, vamos conceituar o básico.
NiFi, nascido para transportar
Visto da lua, o NiFi é uma ferramenta útil para automatizar o fluxo de dados entre sistemas. Se esse fluxo for contínuo então, um caso de streaming, “aí é que ele é útil mesmo”. Para construir seu primeiro fluxo, é importante conhecer ao menos estes…