PinnedFabiano LiraDatabricks: Otimizando a ingestão de dados no seu Delta Lake com Auto Loader e COPY INTOE se você não tivesse que ler milhares de arquivos toda vez que rodasse seu pipeline de dados?Oct 13, 2021Oct 13, 2021
Fabiano LiraDatabricks: How to optimize data ingestion with Auto Loader and the COPY INTO commandWhat if you don’t have to read every file in the lake every time you run your data pipeline (almost with no pain)Oct 13, 2021Oct 13, 2021
Fabiano LiraConsultas SQL no seu Data Lake com AWS Athena e GlueNeste exemplo, veremos como fazer query em arquivos JSON armazenados em um data lake no S3. Em um data lake é normal ter arquivos dos mais…May 10, 20201May 10, 20201