任書瑋inData Scientists Playgroundtf2.2 estimator的使用範例分成3個階段, 介紹 Dataset, Model Function 和 Train and EvaluateJul 25, 2020Jul 25, 2020
任書瑋inData Scientists PlaygroundTransformer -Attention矩陣運算篇Transformer裡的Attention矩陣運算, 其中的mask操作可以看另外的兩篇文章Dec 26, 2019Dec 26, 2019
任書瑋驗證碼辨識實作-part3 訓練這裏寫一下如何把前面的code整合起來訓練模型, 這篇會寫最簡單訓練模型的方式, 並不會討論任何分散式或多GPU訓練, 不過可以簡單測試剛剛的modelDec 25, 2019Dec 25, 2019
任書瑋inData Scientists Playground驗證碼辨識實作-part2 model這篇會介紹用的 nn model, 主要思考方向是用 CNN 先處理過圖片, 再用CNN得到的feature 做後續處理, 在這部分我用了三個不同的方法, 包含 Lstm 和Transformer, 最後使用 CTC 的方始訓練, 如果對 CTC 不了解的可以先去參考Dec 18, 2019Dec 18, 2019
任書瑋inData Scientists Playground驗證碼辨識實作-part1 製作training testing資料這裏記錄下驗證碼辨識的實作過程, 這裏先簡單敘述一下目標任務Dec 18, 2019Dec 18, 2019
任書瑋inData Scientists PlaygroundPointer-Generator-Network這裏記錄下很有意思的seq2se2的作法, 傳統的seq2seq我們會把Input seq 變成壓縮成某種訊息向量(Encoder), 在decoder時只會用之前產生的Outputs seq和Encoder 一起預測下一個字的機率Dec 12, 20191Dec 12, 20191
任書瑋inData Scientists PlaygroundTransformer -decoder mask篇接續上篇的Transformer -encoder mask篇, 這裏繼續講解mask如何運作在Transformer -decoder中, 文章一開頭一樣會先對Transformer -decoder做個簡單介, 紹對Transformer…Dec 12, 2019Dec 12, 2019
任書瑋inData Scientists PlaygroundTransformer -encoder mask篇這篇會著重介紹實際使用Transformer Encoder時會遇到的序列長度問題, 也就是mask處理, 不過在文章的開頭還是會簡單介紹一下Transformer…Dec 11, 20192Dec 11, 20192
任書瑋inData Scientists Playground如何在 Tensorflow 中使用 Dataset最早直接使用feed_dict的方式來輸入資料, 以前使用這個用法時都直接把所有資料儲存在記憶體, 大量的記憶體的使用量可能是最直觀的壞處,其他還有速度慢等等, 好處是方便和可以直接用print來debugDec 11, 2019Dec 11, 2019
任書瑋inFigure-Blog1/7 碧藍航線 聖路易斯大家好,下班後的gk作品又來了,最近和同事一起報名了健身房,做GK的時間就減少了不少。回到正題,第9篇作品是1/7 碧藍航線 聖路易斯,一樣基本上是照個人喜好來配色,加上沒玩過這遊戲,當初選這隻純粹是喜歡她的造型,如果跟原來顏色有不一樣的地方,就請大家當這是異色版Mar 6, 2019Mar 6, 2019