小樣本利器4. 正則化+數據增強 Mixup Family程式碼實現
- 2022 年 10 月 30 日
- 筆記
前三章我們陸續介紹了半監督和對抗訓練的方案來提高模型在樣本外的泛化能力，這一章我們介紹一種嵌入模型的數據增強方案。之前沒 …
Continue Reading
小樣本利器3. 半監督最小熵正則 MinEnt & PseudoLabel程式碼實現
- 2022 年 8 月 30 日
- 筆記
在前兩章中我們已經聊過對抗學習FGM，一致性正則Temporal等方案，主要通過約束模型對細微的樣本擾動給出一致性的預測 …
Continue Reading
小樣本利器2.文本對抗+半監督 FGSM & VAT & FGM程式碼實現
- 2022 年 6 月 28 日
- 筆記
小樣本利器2.文本對抗+半監督 FGSM & VAT & FGM程式碼實現 上一章我們聊了聊通過一致性正則 …
Continue Reading
小樣本利器1.半監督一致性正則 Temporal Ensemble & Mean Teacher程式碼實現
- 2022 年 6 月 4 日
- 筆記
這個系列我們用現實中經常碰到的小樣本問題來串聯半監督，文本對抗，文本增強等模型優化方案。小樣本的核心在於如何在有限的標註 …
Continue Reading