ai-garage
ベンチマーク

GPQAとは?

別名: Graduate-Level Google-Proof QA

「ググっても答えが出ない」博士課程レベルの難問集。

⚡ 30秒でわかる

GPQA の主なポイント

  • 1 物理・化学・生物の博士課程レベルの問題で、ネット検索しても答えが出ないように設計されたベンチマークです。
  • 2 推論モデルの真価が問われる難所として、各社が点数を競っています。

📖 詳しく

GPQA とは

物理・化学・生物の博士課程レベルの問題で、ネット検索しても答えが出ないように設計されたベンチマークです。 推論モデルの真価が問われる難所として、各社が点数を競っています。

❓ FAQ

よくある質問

Q. GPQA とは何ですか?
A. 「ググっても答えが出ない」博士課程レベルの難問集。 物理・化学・生物の博士課程レベルの問題で、ネット検索しても答えが出ないように設計されたベンチマークです。
Q. GPQA の主な特徴は?
A. 物理・化学・生物の博士課程レベルの問題で、ネット検索しても答えが出ないように設計されたベンチマークです。 推論モデルの真価が問われる難所として、各社が点数を競っています。
Q. GPQA に関連する用語は?
A. 「MMLU」、「推論モデル」などが関連しています。
Q. GPQA の別名は?
A. Graduate-Level Google-Proof QA とも呼ばれます。

🔗 関連

あわせて読みたい

📬 STAY UPDATED

毎週のAI業界アップデートを、編集長が短くまとめてお届け予定。準備中です。

X でフォロー →