- 2024年8月にEXAONE 3.0を発表し、これまではLG社内専用として使用していたが、オープンモデルへ転換
- 多様な用途に合わせて構成されたラインアップのうち、7.8B Instruction Tunedモデルを研究用としてオープンソース公開
- 国内外のAI研究者による有意義な研究と、AIエコシステムの発展への貢献を期待
- Decoder-only Transformer Architectureベース、パラメータ数7.8B、学習データ量8T
英語でグローバルトップ水準を達成: Real-world Use Cases平均スコア1位、単一Benchmarkでも優れた性能
- 7.8Bモデルの英語性能は他モデルと比べてグローバルトップ水準
- 4つのベンチマーク評価の結果、グローバルトップモデルを上回る性能を確認
- Math、Codingで平均スコア1位、Reasoningでも高い性能
圧倒的に優れた韓国語性能: Real-world use casesと単一Benchmarkの両方で平均スコア1位
- 英語/韓国語のバイリンガルモデルとして、韓国語でも優れた性能を発揮
- Real-world use casesの観点で性能を確認するため、2つのBenchmarkを使用
- 単一BenchmarkはKMMLUなど、英語評価Benchmarkと整合するよう構成
- Real-world use casesと単一Benchmarkの両方で平均スコア1位の結果を確認
経済性を確保: 3年間の研究開発でコストを6%水準まで削減
- AI活用のためには性能改善に加え、経済性の強化も不可欠
- 3年間にわたりAIモデル軽量化技術の研究開発とコスト効率化に注力
- 7.8BモデルはEXAONE 2.0比で推論処理時間を56%短縮、コストを72%削減
- EXAONE 1.0比ではコストを6%水準まで大幅に削減する成果
倫理的透明性: 優れた結果に加え、補完が必要な領域も公開
- LG AI研究院はAIモデルの研究開発過程でAI倫理を必ず考慮
- EXAONE 3.0 7.8BモデルもRed Teamingプロセスを経て、倫理性と安全性を評価
- 内部および外部の第三者データセットを使用して評価に活用
- 性差別や違法な回答の防止には優れる一方、補完が必要な部分も存在
- AI倫理の発展のため、評価結果を透明に公開
- 研究者による活発なAI倫理研究を期待しており、LG AI研究院も継続して研究を進める予定
2件のコメント
国内ニュースもここで共有する機会がもっと増えるといいですね ;)