外国人と交流したくて自分で作ったリアルタイム翻訳機。Puripuly Heart
(github.com/kapitalismho)簡単な要約
Q: では、外国人と自然に会話できる性能は出ていますか?
A: はい。GitHubのリポジトリでデモ動画をご覧ください。(または下部のフェアリーページで)
こんにちは。
バーチャルリアリティで出会った外国人の友人と
もっと深い会話をしたいという思いから始めた
プロジェクトです。
誰もが気軽に使えるリアルタイム翻訳がモットーです。
そのため、以下の3つの項目でバランスを取りつつ、
可能な限り高いパフォーマンスを出すためにさまざまに工夫しました。
- 翻訳品質 => DeepL比で誤訳率1/6
- 遅延時間 => 2秒未満
- アクセシビリティとコスト => オープンソース / 1発話あたり0.1ウォン〜0.5ウォン
(Gemma 4 26B A4B基準)
音声 => ASR => LLM => 翻訳文という形でデータが流れ、
自分の発話と相手の発話の両方を翻訳する双方向翻訳が可能です。
GitHubリポジトリ内の動画は実際の使用映像です。
動画内のプラットフォームはVRChatです。
まだ、モニターの向こうの誰かが本当に人間なのか疑わなくてもよい
初期の過渡期に、
このプログラムが言語を越えて誰かとつながることの
助けになればと思います。
まだコメントはありません。