ep47 (ICLR): ALBERT: A Lite BERT for Self-supervised Learning of Language Representations Leading NLP Ninja
-
- テクノロジー
ICLR 2020より,factorized embeddingとパラメタ共有によるパラメタ削減及び文順序予測タスクを採用したALBERTを解説しました.
今回紹介した記事はこちらのissueで解説しています. https://github.com/jojonki/arXivNotes/issues/348
サポーターも募集中です. https://www.patreon.com/jojonki
---
Support this podcast: https://podcasters.spotify.com/pod/show/lnlp-ninja/support
ICLR 2020より,factorized embeddingとパラメタ共有によるパラメタ削減及び文順序予測タスクを採用したALBERTを解説しました.
今回紹介した記事はこちらのissueで解説しています. https://github.com/jojonki/arXivNotes/issues/348
サポーターも募集中です. https://www.patreon.com/jojonki
---
Support this podcast: https://podcasters.spotify.com/pod/show/lnlp-ninja/support
25分