Homepage
Open in app
Sign in
Get started
A multi hyphen life
Dev & Ops
Data
Management
Career
All Stories
About
DataOpsTW
Tagged in
Spark
A multi hyphen life
Data Engineer/ Coach/ Coffee Engineer/Life hacker
More information
Followers
881
Elsewhere
More, on Medium
Spark
Bryan Yang
in
A multi hyphen life
Aug 10, 2017
GCP Dataproc 初探
1. 設定介面
幾個亮點:
可以選擇要幾個 master,AWS EMR 一定固定一個 Master + N 個 Nodes
一個介面就可以選擇所有機器型態和硬碟大小,EMR要切好幾次有點麻煩.
Read more…
1
Bryan Yang
in
A multi hyphen life
Oct 9, 2017
[資料科學] 簡單介紹 SparkSQL
本文將簡單介紹 SparkSQL 的原理以及使用方式
SQL
Read more…
168
Bryan Yang
in
A multi hyphen life
Nov 8, 2017
[Spark] Step by step 安裝 Hadoop + Hive + Spark 集群
這個世代還有人在自己裝這些鬼東西嗎?
Prerequisites
桌面環境: Mac OSX
虛擬機管理軟體: Vagrant
虛擬機: Virtual Box
Clone repo
git clone
https://github.com/bryanyang0528/hadoop-hive-spark-vagrant
Read more…
3