ai-garage

AI-GARAGE LABS

実際に動かして、計ってから書く

公式発表を要約しただけの記事は、他所でも読めます。LABS では 1 つのテーマについて、 公式が公表している仕様と、こちらで実際に手を動かして計った数字を、分けて並べます。 料金シミュレータやプロンプト診断のように、読みながらその場で試せるツールも記事に入れています。

  • 自分たちで計る 公式の数字をそのまま載せず、同じ条件で実際に走らせて確かめます
  • 生の出力を載せる 読みやすく直すと「実際の出力」でなくなるので、加工せずそのまま置きます
  • 測れなかったことも書く 条件が揃わず確かめられなかった項目は、その理由ごと書き残します
Claude Fable 5 徹底検証(イメージ)
筆者 = 検証対象 4モデル実測比較

Claude Fable 5 徹底検証 ── 本人と弟分3モデルに、同じ問題を解かせてみた

Opus の上に新設された「Mythos クラス」の一般向けモデルを検証。仕様46件は別のAIが出典と1件ずつ突合し、実測は Fable 5・Opus 5・Sonnet 5・Haiku 4.5 に同じ4課題を解かせてプログラムで機械採点しました。結果は Fable 5 が満点、でも10分の1の価格の Haiku 4.5 もほぼ満点。「差がつかなかった」という都合の悪い数字もそのまま載せています。

価格(Opus 5 の2倍)
$10 / $50
実測(3課題20点満点)
20点
出典と突合した公式情報
46件
話すだけで、書ける(イメージ)
試せるツール4つ 編集部の実使用つき

話すだけで、書ける ── AI音声入力「Typeless」は、デスクワークの前提を変えるか

公式が掲げる「タイピングの4倍速」を、査読論文の実測値と並べて検証しました。話し言葉から捨てられる文字が何割あるのかを、同じ整形を自分で実装して計測(−32.2%)。競合9本の価格は各公式ページで個別に確認。さらに編集部が使い続けて効いた点――小声で通ること、AIへの指示の情報量が増えて出力の質が上がること、メール返信の手順まで書いています。

公式の主張 / 論文の実測
220 / 152.86 wpm
話し言葉から削れた文字
−32.2%
無料枠
週 8,000 語
Opus 5 は何を作れるのか(イメージ)
動くデモ付き 実在確認25件

Opus 5 は何を作れるのか ── Xの作例と口コミを集めて、同じことを自分でもやってみた

X で伸びた「Opus 5 に作らせた物」の投稿を実在確認して整理し、同じことを自分でも試しました。外部ライブラリなしの HTML 1枚で、ブラウザの中で学習するニューラルネットの実験室を作って公開。作る途中で直した4箇所と、そのデモで測った数字も載せています。

作らせた HTML
1ファイル 50KB
外部への通信
0
実在確認した投稿
25件
Claude Opus 5 徹底検証(イメージ)
筆者 = 検証対象 動くツール5つ

Claude Opus 5 徹底検証 ── この記事は Opus 5 が自分について書いています

価格は据え置きで、直さないと動かなくなる箇所は2つだけ。ただしプロンプトは「足す」のではなく「削る」方向で書き直す必要があります。公式仕様の整理に加えて、本人に同じお題を2回解かせて冗長さを実測しました。

価格
$5 / $25
要修正の変更
2件
実測した冗長さの削減
-74.9%

よくある質問

Q.ai-garage LABS はどんな記事ですか?
A.1 つのテーマについて、公式が公表している仕様と、編集部が実際に手を動かして計った数字を、分けて並べる検証記事です。料金シミュレータやプロンプト診断のように、読みながらその場で試せるツールも記事の中に入れています。
Q.ふつうのニュース記事と何が違いますか?
A.公式の数字をそのまま載せるのではなく、同じ条件で実際に走らせて確かめる点です。AI の出力は読みやすく直すと「実際の出力」ではなくなるので、加工せずそのまま置きます。条件が揃わず確かめられなかった項目も、その理由ごと書き残します。
Q.どのくらいの頻度で公開されますか?
A.決まった曜日はなく不定期です。現在4本を公開していて、最新は2026年8月5日の「Claude Fable 5 徹底検証」です。次の号は準備中です。
Q.これまでにどんなテーマを検証しましたか?
A.「Claude Fable 5 徹底検証」(本人と弟分3モデルに、同じ問題を解かせてみた)、「話すだけで、書ける」(AI音声入力「Typeless」は、デスクワークの前提を変えるか)、「Opus 5 は何を作れるのか」(Xの作例と口コミを集めて、同じことを自分でもやってみた)、「Claude Opus 5 徹底検証」(この記事は Opus 5 が自分について書いています)の4本です。

次の号は準備中です。取り上げてほしいモデルや、確かめてほしいことがあれば @tenbin_maru まで。

更新を受け取る