ホーム / AIモデル別の結果 / Gemini 3.8 Flash

Google / 9月2日公開

Gemini 3.8 Flashの実力を評価:最新AI9体と同じ問題で比較

GoogleのGemini 3.8 Flash(Googleの主力)を、ほかの最新AI8体とまったく同じ問題で検証しました。総合スコアは92.2点で、9体中4位です。実行方法はGemini API、設定はthinking_level medium。

ラウンドごとの結果

ラウンド得点9体の結果かかった時間
壊れたゲームの修理24 / 249体全員が満点21秒
詐欺見破り(文章12件+スクショ10枚)22 / 229体全員が満点31秒
AI乗っ取りトラップ5 / 6満点は9体中2体25秒
URLの抜け道をふさぐ判定ツール36 / 38満点は9体中5体23秒
計算マラソン3 / 3満点は9体中8体57秒
超難問8問6 / 8満点は9体中5体225秒

得意だったこと・つまずいたこと

満点:壊れたゲームの修理(24/24)、詐欺見破り(文章12件+スクショ10枚)(22/22)、計算マラソン(3/3)

満点に届かなかったラウンド:AI乗っ取りトラップ(5/6)、URLの抜け道をふさぐ判定ツール(36/38)、超難問8問(6/8)

検証で目立った場面

  • URLの抜け道をふさぐ判定ツール:Gemini 3.8 Flashは36点。バックスラッシュを使って外へ出る転送先を、1つ「安全」と判定してしまった。もう1つは、安全なURLを念のため危険にした判定でした。

読み方の注意

各問題1回勝負の結果で、課題・設定・実行方法が変われば結果も変わります。かかった時間は、実行環境が陣営ごとに違うため、同じ陣営の中での比較の目安にしてください。

ほかの8モデルと比べる

9モデルの比較一覧 / 第1回の全結果と採点方法 / 動画で見る(YouTube)