カカオの韓国語AI言語モデルKoGPT、スコアが誇張されていた

• カカオブレインが作ったGPT-3モデルの韓国語特化版KoGPTの性能が、本来のスコアより高く公開されていた

• コード上の問題で、テスト過程で初期化を行わず、そのまま評価したスコアを記載

• レポートで明らかにしたスコアより5点ほど低く…評価の公正性を損なう

[xguru]

• KoGPT - 韓国語AI言語モデルのオープンソース公開 https://ja.news.hada.io/topic?id=5407