トルコ語翻訳に強いAIは?17モデルのテストで4モデルが同点、ことわざは全問不正解

トルコ語に一番強いAIはどれ?

トルコ語で首位に並んだのは4モデルで、5問中2問を超えたモデルはありませんでした。当社のMultilingual LLM Benchでは、2026年10月2日に17モデルへ同じトルコ語5問を出題しました。1問あたり20点です。17モデルのうち12モデルの結果は次のとおりです。

天井はかなり低いと言えます。トルコ語の17モデル平均は23.5%で、ベンチの30言語中28位でした。トルコ語5問のうち3問は全モデルが不正解で、全員が解けなかった問題が3問に達した言語はほかにありません(ほかの言語は最大2問)。

大手の公開ボードには、照らし合わせられるトルコ語のスコアがありません。OpenAIとAnthropicが公開している多言語表は14言語、Artificial AnalysisのMultilingual Indexは16言語が対象で、2026年10月時点ではいずれもトルコ語を含みません。

3大アシスタントの比較はChatGPT vs Claude vs Geminiをご覧ください。

Whizi独自のトルコ語問題で17モデルはどうだった?

4モデルが5問中2問で並び、同点を決めたのは1問でした。30言語それぞれで全モデルに同じ5問を、低い推論設定で出題しました。採点は、トルコ語言語協会(Türk Dil Kurumu)の辞典やトルコ特許商標庁の登録簿など、トルコ語の一次資料から作った正解キーと照らして行いました。違う言語で答えた場合は0点です。

5問は小さなサンプルです。1問でトルコ語スコアが20点動くため、確定した順位ではなく、おおまかな順序として読んでください。

問題ごとに分けると、課題がはっきりします。17モデルのうち15モデルは、有名な郷土料理を1つ知っていました。しかし3問は全モデルが不正解でした。

オスマン語の問題は、当社が公開している唯一のトルコ語問題です。アラビア文字で書かれた4つの語(كاتب عدل など)を示し、それぞれをTDKのGüncel Türkçe Sözlükが現在綴るとおりに答えさせます。正解キーはkâtibiadil、erkânıharp、müddeiumumi、vakayinameです。4語すべて正解したのは5モデルでした。不正解12件のうち7件は、最初の語を辞典では1語なのに、kâtip adilやkâtib-i adilのように2語やハイフン付きで書いていました。

この問題が同点の決め手のすべてです。GPT Astra、Claude Opus、Gemini Pro、Gemini Flashはこの問題と郷土料理に正解しました。Claude Fableはオスマン語の綴りは正解でしたが郷土料理を外したため、1問にとどまります。

2つのことわざ問題は、辞典に載っている意味からatasözü(ことわざ)そのものを答えさせるものです。17モデルすべてが両方とも不正解でした。トルコの特許庁が正式名称と並べて記録している郷土工芸の地域名も、全モデルが外しました。

このベンチでトルコ語をほかの言語と比べて順位付けしないでください。トルコ語の平均は23.5%、ドイツ語は64.7%ですが、これは言語の難しさというより、それぞれの5問の難しさを表しています。ベトナム語は逆に満点が3つ出ました。詳しくはベトナム語に強いAIをご覧ください。

ChatGPTはトルコ語が得意?

はい、ChatGPTは日常的なトルコ語は得意ですが、OpenAIはトルコ語のスコアを公開していません。simple-evalsの結果は、プロの翻訳者が14言語に書き直したMMLUテストを対象としており、トルコ語は含まれていません。

Anthropicも多言語サポートのページで同じ14言語を使っているため、Claudeにも公式のトルコ語スコアはありません。ほかの言語についての案内は短く、「Claude is capable in many languages beyond those benchmarked in the following table. Test with any languages relevant to your specific use cases.」とあります。

最も信頼できる第三者の数字は少し古いものです。トルコの教育制度から出題された6,200問の四択テストTR-MMLUでは、GPT-4oが84.84%、Claude 3.5 Sonnetが84.40%、Gemini 1.5 Proが76.74%でした(2025年8月付けの結果論文)。当社がテストしたモデルはすべてこの3つより新しいものです。当社のテストではGPT Astraが首位タイでしたが、ChatGPT SolとChatGPT Lunaはそれぞれ5問中1問にとどまりました。

Kumruのようなトルコ語専用モデルを使うべき?

トルコ語専用モデルは、日常のチャットボットとしてではなく、自分で動かしたいときに使うものです。第三者によるテストでは、トルコ語専用モデルは汎用モデルに及びませんでした。2025年8月22日に公開されたトルコ語ベンチマークCetvelは、最大70Bパラメータのオープンモデル33個を検証しました。著者らは「Turkish-centric instruction-tuned models generally underperform relative to multilingual or general-purpose models」と結論づけ、強いモデルとしてLlama 3とMistralを挙げています。

VNGRSは、Kumruは例外だと述べています。モデルカードには、Kumru-2Bは「developed for Turkish from scratch by VNGRS」で、クリーニング済みの500 GBのテキストを300Bトークン分学習したとあります。またCetvelで「overall surpasses significantly larger models」とも書かれています。ただしスコアはカード上の画像にあるため、研究所自身の主張として受け取ってください。

2B版はApache 2.0で、8,192トークンのコンテキストとともにダウンロードできます。より大きなKumru-7Bは、kumru.aiのWebデモです。どちらも当社のベンチには入っていないため、GPTやClaudeとの順位付けはできません。

トルコではChatGPT、Claude、Geminiはいくら?

トルコでは、ChatGPT PlusとClaude Proはどちらも月額₺999.99、Google AI Proは₺869.99です。ChatGPTとClaudeの価格はトルコのApp Storeのアプリ内価格、Googleの価格はGoogle公式のトルコ向けプランページから取得しました。すべて2026年10月25日に確認したものです。

Claudeの年額プランは避けましょう。AnthropicはトルコのApp Storeで₺11,999.99としていますが、これは月額₺999.99を12回払うより11クルシュ高い金額です。ほかの市場との比較は国別のClaude Pro価格にまとめています。

海外決済に対応したカードも必須ではありません。Appleの支払い方法のページによると、トルコのApple Accountは、ほとんどのクレジットカードとデビットカードのほか、Paycell、Türk Telekom Mobil Ödeme、Vodafone Mobil Ödemeによる携帯料金への合算払いにも対応しています。

トルコ語でAIにプロンプトを書くコツは?

プロンプトはトルコ語で書き、sizとsenのどちらにするかを指定しましょう。どちらも指定しないとモデルに任せることになり、仕事のメールや友人へのメモでは不自然に読めることがあります。トルコ語の文字(ç, ğ, ı, İ, ö, ş, ü)をすべて残すよう頼むのも大切です。また、ことわざは必ずTDK辞典で確認してください。当社のテストでは全モデルが2問とも外しました。

```

Aşağıdaki koşullarla bir metin yaz.

Hitap: [siz / sen]

Uzunluk: yaklaşık [300] kelime, okur: [iş arkadaşları / öğrenciler]

Türkçe karakterleri eksiksiz kullan.

Bir atasözü kullanırsan anlamını parantez içinde yaz.

Emin olmadığın tarih, sayı ya da adları işaretle.

Konu: [konuyu buraya yaz]

```

翻訳では、トルコ語をそのまま貼り付け、読み手を指定します。次のプロンプトは、モデルが間違えやすい部分を守ります。

```

次のトルコ語の文章を、[ビジネスメール / 学校のレポート / 字幕]向けの自然な日本語に翻訳してください。

名前、数字、日付、金額は書かれているとおりに残してください。

トルコ語のことわざや慣用句に日本語の対応表現がない場合は、意味を訳し、トルコ語の原文を括弧に入れてください。

最後に、自信のなかった語を一覧にしてください。

[ここにトルコ語の文章を貼り付け]

```

プロンプトの例と翻訳後のチェック方法は、AIで翻訳する方法のガイドでさらに紹介しています。

トルコ語でWhiziはどう使える?

Whiziは当社の製品なので、役立つ点と弱い点を正直に書きます。月額$29.99のProには、トルコ語問題で首位に並んだ4モデルのうち3つ(Claude Opus、Gemini Pro、Gemini Flash)に加え、ChatGPT Solが含まれます。モデルの並べて比較するチャットでは、1つのトルコ語プロンプトを2つのモデルに同時に送れます。4つ目のGPT Astraは、月額$49.99のPowerhouseが必要です。弱い点はトルコ語モデルで、Whiziは Kumruを扱っていません。トルコ語だけで学習したモデルが必要なら、VNGRS公式のダウンロードを使ってください。比較機能の使い方はモデルを並べて比較するチャットをご覧ください。