対応表の見直しと、実用性の注意
判断の範囲
今回の5,040件はすべて要求が成功して非空のテキストを返した。しかし、要求成功は翻訳の対応・品質を保証しない。以下はモデルが指定言語で翻訳する機能の採否であり、全件の意味・自然さを母語話者が合格判定したという意味ではない。全件の生出力は各言語ページで読める。
TranslateGemmaで復帰する3言語
| 言語 | EN→X chrF | X→EN chrF | 観測と判断 |
|---|---|---|---|
| 繁体字中国語 | 46.2 | 71.5 | 両方向30/30件。英語→繁体字の30件で、簡体字特有の代表文字の混入なし。字体を含む要求どおりの出力を確認。 |
| マレー語 | 67.2 | 72.6 | 両方向30/30件。モデル内テンプレートにもmsがある。指定言語で訳せるため復帰。ただし意味の逆転例あり。 |
| フィリピン語 | 58.2 | 71.5 | 両方向30/30件。モデル内テンプレートにtlがある。指定言語で訳せるため復帰。ただしVR用語の誤訳例あり。 |
品質上の注意例
- Gemma・マレー語のEN→X #10: 「マイクが壊れている」に対し、
Mikrofon saya berfungsi dengan baik(マイクは正常に動いている)と、肝心な意味が逆転した。指定言語での生成自体はできるが、無確認で重要な内容を伝える用途には注意が要る。 - Gemma・フィリピン語のX→EN #9: VRChatのinstanceに入る文が
Now, I want to discuss this specific case with you.と事例について話す意味になった。 - GeminiではなくTranslateGemma 4B Q4_K_Mの測定。PLaMoも0.8B Q4_K_Mであり、別サイズへ一般化しない。
PLaMoで除外を維持する9言語
公式モデルの53言語一覧にない言語についても、アプリ側の許可リストを通さず直接60件ずつ要求した。英語からの訳が別言語・混在言語になり、逆方向でも未翻訳コピー等が出たため、現モデルの対応選択肢からは外す。低いchrFだけが除外理由ではない。
| 言語 | EN→X chrF | X→ENの未翻訳コピー数/30 | EN→X #1の実出力(要求成功でも指定言語とは限らない) |
|---|---|---|---|
| pt | 15.2 | 8/30 | Hallo, a拾って好上好。 |
| tr | 3.1 | 4/30 | Hallo, சிறப்பாக அறிமுகமாகிறேன். |
| sv | 15.6 | 8/30 | Hallo, leuk om you kennis te maken. |
| da | 1.8 | 19/30 | नमस्ते, खुशी लाग्यो भेट भएकोमा। |
| fi | 11.5 | 10/30 | Hallo, freundlich kennenzulernen. |
| cs | 11.0 | 0/30 | Hallo, leuk je jeter. |
| el | 2.2 | 10/30 | Hallo, leuke jeter. |
| ro | 3.0 | 13/30 | नमस्ते, खुश लինուँ भेटेकोमा। |
| uk | 18.8 | 0/30 | Hallo, приятно познакомиться. |
PLaMoは既存19言語(英語を含め20言語)を維持し、Azureは今回の28言語すべてを維持する。TranslateGemmaは今回の全28言語+英語を選択可能にする。品質の比較は同じ言語・方向内で行い、異なる言語間のchrFをそのまま優劣にしない。
検証データの由来
既存26言語の参考文は以前のClaude作成、追加の繁体字/フィリピン語はCodexによるAI作成で、母語話者校正はない。全出力を閲覧できるようにすることで、数値や「実験的」というラベルだけに頼らず判断する。公開後の母語話者レビューは、原出力を書き換えず別注記として残す。