
單機多卡、多機多卡的藝術
- 2022 年 5 月 18 日
- 筆記
隨著接觸到的模型越來越大,自然就會接觸到這種技術。 記錄下自己的踩坑過程,當看到多機多卡跑通後,那種苦盡甘來的感覺還是挺 …
Continue Reading隨著接觸到的模型越來越大,自然就會接觸到這種技術。 記錄下自己的踩坑過程,當看到多機多卡跑通後,那種苦盡甘來的感覺還是挺 …
Continue Reading本文為手稿,旨在搞清楚為什麼BPTT演算法會多路反向求導,而不是一個感性的認識。 假設我們要對E3求導(上圖中的L3) …
Continue Reading長這樣: 理解的前提: (1)狀態:生成觀測值的變數(上圖中 …
Continue Reading本部落格的截圖均來自zeya的post:Essential Things You Need to Know About F …
Continue ReadingThe amazing power of word vectors | the morning paper (acoly …
Continue Reading