UseCase : 如何用Nifi 傳送資料到Kafka(Basic)

prerequisite

Kafka 設計思考 — Partition & Replication

思考問題

• Partition跟Replication的設計會對效能有什麼樣的影響？

安裝Confluent Kafka All-in-one cluster

prerequisite

• Install Docker in your local (Docker setting memory…

Snowflake credit 計費方式

Trial版本的Snowflake只有在你使用Virtual Warehouse的時候才會開始計費，在試用版階段，data storage不會被計費

Virtual warehouse…

Create Kafka topic

prerequisite

Create/Delete Kafka topic

Install Hadoop3 in GCP

Sign in GCP and create machine

Snowflake Time Travel

功能

讓你能在定義好的時間區間內任意查詢歷史資料(被變動過或是被刪除的資料)

好處

Load File To Snowflake From Local

目標

Snowflake Sample example

Login

Log into SnowSQL

snowsql -a <account_name> -u <username>