技術 [Day23] Learning Rate Warm Up

前言 本日將介紹另一個Learning Rate的技巧，也就是Warmup，並整合到Lightning-module當中。 什麼是Warmup? Warmup的...

技術 [Day11] Build a trainable Lightning-Module

前言 接續前一日的文章，我們簡介了PyTorch Lightning以及如何利用Lightning Module將forward propagation進行簡單...

技術 [Day10] Pytorch Lightning

前言 本日將簡單介紹Pytorch-Lightning，而在包含今日的未來幾天內，會將先前構築的程式碼，分段整合成Pytorch-Lightning的格式。本日...

技術 [Day12] Training Log and History

前言 本日的文章將介紹幾個常見的Deep Learning Log system，然後嘗試解決目前模型所看到的問題。 Lightning-Module Log...

技術 [Day21] EVALUATION ON TEST SET

前言 前幾日的文章，已經利用scheduler訓練出在Validation上還不錯的結果，今天就來test一下，順帶討論一下test的一些哲學吧！ 什麼是Tes...