Google T5、SuperGLUEベンチマークで88.9点を記録し、人間のベースライン89.8に接近
(super.gluebenchmark.com)SuperGLUEは、自然言語を理解するシステムを訓練・評価・分析するためのデータを集めたもの。
技術の進歩によって既存のGLUE指標のベースラインを上回り始めたため、新たに作られたのがSuperGLUE。とはいえ、これもすぐに上回られそう。
SuperGLUEは、自然言語を理解するシステムを訓練・評価・分析するためのデータを集めたもの。
技術の進歩によって既存のGLUE指標のベースラインを上回り始めたため、新たに作られたのがSuperGLUE。とはいえ、これもすぐに上回られそう。
2件のコメント
関連して読むべき記事
人工知能(AI)言語モデル「BERT(バート)」とは何か : http://www.aitimes.kr/news/articleView.html?idxno=13117
BERTを詳しく見る : http://docs.likejazz.com/bert/
Google T5(Text-To-Text Transfer Transformer)