本文へ移動
NEWS
AInformation 実測

レシート・グラフ・表の画像から数字を読む(4AI・6課題・各3回)

画像・写真の読み取りの課題を6問つくり、ChatGPT・Claude・Gemini・Copilot へ各3回ずつ投げました。採点はプログラムだけで行い、AIには採点させていません。

AIごとのスコアを見る →
100% この回でいちばん高い正解率
ChatGPT 12試行中12
2026年9月27日 測定
  • 6問課題
  • 3回1問あたりの試行
  • 4つ測ったAI
  • 37回有効な試行
  • v1公開版

1回の検証の結果。日や課題が変われば順位は変わる

分野:画像・写真の読み取り 測定日:2026年9月27日 実施:AInformation編集部 費用:AInformation(自社負担) 依頼主:なし(依頼主はいません) 採点:機械採点のみ(AIに採点させていない)

当たるものがありませんでした。検索の言葉を消すと全部戻ります。

RESULT

この回で分かったこと

下の1行は、採点の結果からそのまま作ったものです。ページ側で足した言葉はありません。

  • 画像・写真の読み取り 6課題・各3回 6課題を各3回ずつ投げたところ、正解率が一番高かったのはChatGPT・Claudeの100.0%で同率だった 有効な試行は37回。 1回の検証の結果。日や課題が変われば順位は変わる。 AIごとのスコアを見る

SCORES

AIごとのスコア

並びは正解率の高い順です。分母は、その指標を測れた試行の数です。 「—」は測っていないという意味で、0%ではありません。

レシート・グラフ・表の画像から数字を読む(4AI・6課題・各3回) AIごとのスコア
AI 正解率正解 ÷ 有効な試行 再現率3回で結論が一致 出典の実在率URLが開けた割合 指示の遵守率字数・形式を守った 所要時間中央値/幅
1ChatGPT 100% 12試行中12 100% 6課題中 — 100% 14.4秒 14.1〜18.3秒
2Claude 100% 13試行中13 100% 6課題中 — 92.3% 14秒 13.9〜15秒
3Gemini 83.3% 12試行中10 100% 6課題中 — 81.8% 19.5秒 19.4〜36.6秒
4Copilot — — 6課題中 — — —

出典の実在率は、答えと一緒にURLを挙げてもらう課題があった回だけ測っています。 ChatGPT・Claude・Gemini・Copilotの「—」は、この回ではその課題を出していないという意味です。0%ではありません。

答えが返らなかった試行
ChatGPT … AInformation側の操作の失敗(分母から外した) 6回 Claude … AInformation側の操作の失敗(分母から外した) 5回 Gemini … 断られた 1回/AInformation側の操作の失敗(分母から外した) 6回 Copilot … AInformation側の操作の失敗(分母から外した) 18回
断られた・時間切れは分母に入れて不正解として数えています。上限・人間確認・AInformation側の操作の失敗は分母から外しています。

TASKS

課題ごとの結果

1つの課題を、4つのAIへ3回ずつ投げています。 ○が正解、×が不正解です。下の数字は、その試行にかかった秒数です。 課題の全文・先に決めた正解・なぜその判定になったかは、それぞれ開くと読めます。

易

添付したレシートの画像から、3つの数を読み取ってください。 決まり ・答えはちょうど3行。小計: ◯/消費税: ◯/… 採点の型:exact_number 数値が正解と一致するか。丸めの幅も先に決めてある

  • ChatGPT
    • ChatGPT 第1回 正解 17.2秒
    • ChatGPT 第2回 正解 14.2秒
    • ChatGPT 第3回 採点の外 AInformation側の操作の失敗(分母から外した)

    2試行中2が正解 1回は分母から外した

  • Claude
    • Claude 第1回 正解 13.9秒
    • Claude 第2回 正解 13.9秒
    • Claude 第3回 正解 15秒

    3試行中3が正解

  • Gemini
    • Gemini 第1回 正解 26.5秒
    • Gemini 第2回 正解 19.4秒
    • Gemini 第3回 採点の外 AInformation側の操作の失敗(分母から外した)

    2試行中2が正解 1回は分母から外した

  • Copilot
    • Copilot 第1回 採点の外 AInformation側の操作の失敗(分母から外した)
    • Copilot 第2回 採点の外 AInformation側の操作の失敗(分母から外した)
    • Copilot 第3回 採点の外 AInformation側の操作の失敗(分母から外した)

    0試行中0が正解 3回は分母から外した

課題の全文この文をそのまま4つのAIへ送りました(103字)

添付したレシートの画像から、3つの数を読み取ってください。 決まり ・答えはちょうど3行。小計: ◯/消費税: ◯/合計: ◯ の順で書く ・数は半角で書く。円記号とカンマは付けなくてよい。説明は書かない

先に決めた正解課題を作った時点で決めています。4つのAI中3つが1回でも正解しました

(機械採点 exact_number)小計=1998(誤差±0)/消費税=159(誤差±0)/合計=2157(誤差±0)

採点の中身なぜその判定になったかを1試行ずつ出しています(7試行中7が正解)
ChatGPT 第1回 正解
数値すべて一致:小計 ○(正解1998)/消費税 ○(正解159)/合計 ○(正解2157) (17.2秒) この回答の全文
ChatGPT 第2回 正解
数値すべて一致:小計 ○(正解1998)/消費税 ○(正解159)/合計 ○(正解2157) (14.2秒) この回答の全文
ChatGPT 第3回 採点の外(分母から外した)
ChatGPT: 入力欄が無い(ログイン切れ)
Claude 第1回 正解
数値すべて一致:小計 ○(正解1998)/消費税 ○(正解159)/合計 ○(正解2157) (13.9秒) この回答の全文
Claude 第2回 正解
数値すべて一致:小計 ○(正解1998)/消費税 ○(正解159)/合計 ○(正解2157) (13.9秒) この回答の全文
Claude 第3回 正解
数値すべて一致:小計 ○(正解1998)/消費税 ○(正解159)/合計 ○(正解2157) (15秒) この回答の全文
Gemini 第1回 正解
数値すべて一致:小計 ○(正解1998)/消費税 ○(正解159)/合計 ○(正解2157) (26.5秒) この回答の全文
Gemini 第2回 正解
数値すべて一致:小計 ○(正解1998)/消費税 ○(正解159)/合計 ○(正解2157) (19.4秒) この回答の全文
Gemini 第3回 採点の外(分母から外した)
Gemini: 入力欄が無い(ログイン切れ)
Copilot 第1回 採点の外(分母から外した)
先に止めた(Copilot: 入力欄が無い(ログイン切れ))
Copilot 第2回 採点の外(分母から外した)
先に止めた(Copilot: 入力欄が無い(ログイン切れ))
Copilot 第3回 採点の外(分母から外した)
先に止めた(Copilot: 入力欄が無い(ログイン切れ))
易

添付したレシートの画像から、お釣りの金額を読み取ってください。 決まり ・答えはちょうど1行。お釣り: ◯ の形で書… 採点の型:exact_number 数値が正解と一致するか。丸めの幅も先に決めてある

  • ChatGPT
    • ChatGPT 第1回 正解 14.3秒
    • ChatGPT 第2回 正解 14.2秒
    • ChatGPT 第3回 採点の外 AInformation側の操作の失敗(分母から外した)

    2試行中2が正解 1回は分母から外した

  • Claude
    • Claude 第1回 正解 14.1秒
    • Claude 第2回 正解 13.9秒
    • Claude 第3回 採点の外 AInformation側の操作の失敗(分母から外した)

    2試行中2が正解 1回は分母から外した

  • Gemini
    • Gemini 第1回 不正解 断られた
    • Gemini 第2回 不正解 36.6秒
    • Gemini 第3回 採点の外 AInformation側の操作の失敗(分母から外した)

    2試行中0が正解 1回は分母から外した

  • Copilot
    • Copilot 第1回 採点の外 AInformation側の操作の失敗(分母から外した)
    • Copilot 第2回 採点の外 AInformation側の操作の失敗(分母から外した)
    • Copilot 第3回 採点の外 AInformation側の操作の失敗(分母から外した)

    0試行中0が正解 3回は分母から外した

課題の全文この文をそのまま4つのAIへ送りました(77字)

添付したレシートの画像から、お釣りの金額を読み取ってください。 決まり ・答えはちょうど1行。お釣り: ◯ の形で書く ・数は半角で書く。説明は書かない

先に決めた正解課題を作った時点で決めています。4つのAI中2つが1回でも正解しました

(機械採点 exact_number)お釣り=843(誤差±0)

採点の中身なぜその判定になったかを1試行ずつ出しています(6試行中4が正解)
ChatGPT 第1回 正解
数値すべて一致:お釣り ○(正解843) (14.3秒) この回答の全文
ChatGPT 第2回 正解
数値すべて一致:お釣り ○(正解843) (14.2秒) この回答の全文
ChatGPT 第3回 採点の外(分母から外した)
先に止めた(ChatGPT: 入力欄が無い(ログイン切れ))
Claude 第1回 正解
数値すべて一致:お釣り ○(正解843) (14.1秒) この回答の全文
Claude 第2回 正解
数値すべて一致:お釣り ○(正解843) (13.9秒) この回答の全文
Claude 第3回 採点の外(分母から外した)
Claude: 入力欄が無い(ログイン切れ)
Gemini 第1回 不正解
断られた(ポリシー)。不正解として分母に入れる (22.9秒) この回答の全文
Gemini 第2回 不正解
数値が違う:お釣り ×(正解843・釣 の行が無い) (36.6秒) この回答の全文
Gemini 第3回 採点の外(分母から外した)
先に止めた(Gemini: 入力欄が無い(ログイン切れ))
Copilot 第1回 採点の外(分母から外した)
先に止めた(Copilot: 入力欄が無い(ログイン切れ))
Copilot 第2回 採点の外(分母から外した)
先に止めた(Copilot: 入力欄が無い(ログイン切れ))
Copilot 第3回 採点の外(分母から外した)
先に止めた(Copilot: 入力欄が無い(ログイン切れ))
中

添付したレシートの画像から、買った品物を全部書き出してください。 決まり ・1品につき1行。行の先頭は ・ にする。… 採点の型:set_match 決められた項目をいくつ抜けたか。漏れと作り足しの両方を数える

  • ChatGPT
    • ChatGPT 第1回 正解 17.2秒
    • ChatGPT 第2回 正解 17.3秒
    • ChatGPT 第3回 採点の外 AInformation側の操作の失敗(分母から外した)

    2試行中2が正解 1回は分母から外した

  • Claude
    • Claude 第1回 正解 14秒
    • Claude 第2回 正解 13.9秒
    • Claude 第3回 採点の外 AInformation側の操作の失敗(分母から外した)

    2試行中2が正解 1回は分母から外した

  • Gemini
    • Gemini 第1回 正解 19.5秒
    • Gemini 第2回 正解 19.5秒
    • Gemini 第3回 採点の外 AInformation側の操作の失敗(分母から外した)

    2試行中2が正解 1回は分母から外した

  • Copilot
    • Copilot 第1回 採点の外 AInformation側の操作の失敗(分母から外した)
    • Copilot 第2回 採点の外 AInformation側の操作の失敗(分母から外した)
    • Copilot 第3回 採点の外 AInformation側の操作の失敗(分母から外した)

    0試行中0が正解 3回は分母から外した

課題の全文この文をそのまま4つのAIへ送りました(93字)

添付したレシートの画像から、買った品物を全部書き出してください。 決まり ・1品につき1行。行の先頭は ・ にする。品名と金額を書く ・小計・消費税・合計・お預り・お釣りの行は書かない

先に決めた正解課題を作った時点で決めています。4つのAI中3つが1回でも正解しました

(機械採点 set_match)納豆 3パック[納豆+168]/鶏むね肉 2枚[鶏むね肉+412]/牛乳 1000ml[牛乳+322]/ティッシュ 5箱[ティッシュ+380]/トマト 3個[トマト+340]/ヨーグルト 400g[ヨーグルト+230]/うどん 3玉[うどん+146] 作り足しは0件まで

採点の中身なぜその判定になったかを1試行ずつ出しています(6試行中6が正解)
ChatGPT 第1回 正解
7件すべて一致・作り足し0件 (17.2秒) この回答の全文
ChatGPT 第2回 正解
7件すべて一致・作り足し0件 (17.3秒) この回答の全文
ChatGPT 第3回 採点の外(分母から外した)
先に止めた(ChatGPT: 入力欄が無い(ログイン切れ))
Claude 第1回 正解
7件すべて一致・作り足し0件 (14秒) この回答の全文
Claude 第2回 正解
7件すべて一致・作り足し0件 (13.9秒) この回答の全文
Claude 第3回 採点の外(分母から外した)
先に止めた(Claude: 入力欄が無い(ログイン切れ))
Gemini 第1回 正解
7件すべて一致・作り足し0件 (19.5秒) この回答の全文
Gemini 第2回 正解
7件すべて一致・作り足し0件 (19.5秒) この回答の全文
Gemini 第3回 採点の外(分母から外した)
先に止めた(Gemini: 入力欄が無い(ログイン切れ))
Copilot 第1回 採点の外(分母から外した)
先に止めた(Copilot: 入力欄が無い(ログイン切れ))
Copilot 第2回 採点の外(分母から外した)
先に止めた(Copilot: 入力欄が無い(ログイン切れ))
Copilot 第3回 採点の外(分母から外した)
先に止めた(Copilot: 入力欄が無い(ログイン切れ))
中

添付した棒グラフの画像で、棒が一番高い月はどれですか。 決まり ・答えはちょうど1行。◯月 の形で書く ・数値と説明… 採点の型:contains_all 必須の語句が全部入っているか

  • ChatGPT
    • ChatGPT 第1回 正解 14.5秒
    • ChatGPT 第2回 正解 14.3秒
    • ChatGPT 第3回 採点の外 AInformation側の操作の失敗(分母から外した)

    2試行中2が正解 1回は分母から外した

  • Claude
    • Claude 第1回 正解 14.3秒
    • Claude 第2回 正解 14.4秒
    • Claude 第3回 採点の外 AInformation側の操作の失敗(分母から外した)

    2試行中2が正解 1回は分母から外した

  • Gemini
    • Gemini 第1回 正解 20.1秒
    • Gemini 第2回 正解 19.4秒
    • Gemini 第3回 採点の外 AInformation側の操作の失敗(分母から外した)

    2試行中2が正解 1回は分母から外した

  • Copilot
    • Copilot 第1回 採点の外 AInformation側の操作の失敗(分母から外した)
    • Copilot 第2回 採点の外 AInformation側の操作の失敗(分母から外した)
    • Copilot 第3回 採点の外 AInformation側の操作の失敗(分母から外した)

    0試行中0が正解 3回は分母から外した

課題の全文この文をそのまま4つのAIへ送りました(64字)

添付した棒グラフの画像で、棒が一番高い月はどれですか。 決まり ・答えはちょうど1行。◯月 の形で書く ・数値と説明は書かない

先に決めた正解課題を作った時点で決めています。4つのAI中3つが1回でも正解しました

(機械採点 contains_all)いちばん高い月=1月

採点の中身なぜその判定になったかを1試行ずつ出しています(6試行中6が正解)
ChatGPT 第1回 正解
1項目すべてあり (14.5秒) この回答の全文
ChatGPT 第2回 正解
1項目すべてあり (14.3秒) この回答の全文
ChatGPT 第3回 採点の外(分母から外した)
先に止めた(ChatGPT: 入力欄が無い(ログイン切れ))
Claude 第1回 正解
1項目すべてあり (14.3秒) この回答の全文
Claude 第2回 正解
1項目すべてあり (14.4秒) この回答の全文
Claude 第3回 採点の外(分母から外した)
先に止めた(Claude: 入力欄が無い(ログイン切れ))
Gemini 第1回 正解
1項目すべてあり (20.1秒) この回答の全文
Gemini 第2回 正解
1項目すべてあり (19.4秒) この回答の全文
Gemini 第3回 採点の外(分母から外した)
先に止めた(Gemini: 入力欄が無い(ログイン切れ))
Copilot 第1回 採点の外(分母から外した)
先に止めた(Copilot: 入力欄が無い(ログイン切れ))
Copilot 第2回 採点の外(分母から外した)
先に止めた(Copilot: 入力欄が無い(ログイン切れ))
Copilot 第3回 採点の外(分母から外した)
先に止めた(Copilot: 入力欄が無い(ログイン切れ))
難

添付した棒グラフの画像から、月ごとの数値を全部読み取ってください。 決まり ・1か月につき1行。◯月: ◯◯◯ の形… 採点の型:exact_number 数値が正解と一致するか。丸めの幅も先に決めてある

  • ChatGPT
    • ChatGPT 第1回 正解 18.3秒
    • ChatGPT 第2回 正解 14.1秒
    • ChatGPT 第3回 採点の外 AInformation側の操作の失敗(分母から外した)

    2試行中2が正解 1回は分母から外した

  • Claude
    • Claude 第1回 正解 14.7秒
    • Claude 第2回 正解 14.1秒
    • Claude 第3回 採点の外 AInformation側の操作の失敗(分母から外した)

    2試行中2が正解 1回は分母から外した

  • Gemini
    • Gemini 第1回 正解 20秒
    • Gemini 第2回 正解 19.4秒
    • Gemini 第3回 採点の外 AInformation側の操作の失敗(分母から外した)

    2試行中2が正解 1回は分母から外した

  • Copilot
    • Copilot 第1回 採点の外 AInformation側の操作の失敗(分母から外した)
    • Copilot 第2回 採点の外 AInformation側の操作の失敗(分母から外した)
    • Copilot 第3回 採点の外 AInformation側の操作の失敗(分母から外した)

    0試行中0が正解 3回は分母から外した

課題の全文この文をそのまま4つのAIへ送りました(85字)

添付した棒グラフの画像から、月ごとの数値を全部読み取ってください。 決まり ・1か月につき1行。◯月: ◯◯◯ の形で、左から順に書く ・数は半角で書く。説明は書かない

先に決めた正解課題を作った時点で決めています。4つのAI中3つが1回でも正解しました

(機械採点 exact_number)1月=9300(誤差±0)/2月=8700(誤差±0)/3月=7000(誤差±0)/4月=5200(誤差±0)/5月=4100(誤差±0)/6月=2900(誤差±0)

採点の中身なぜその判定になったかを1試行ずつ出しています(6試行中6が正解)
ChatGPT 第1回 正解
数値すべて一致:1月 ○(正解9300)/2月 ○(正解8700)/3月 ○(正解7000)/4月 ○(正解5200)/5月 ○(正解4100)/6月 ○(正解2900) (18.3秒) この回答の全文
ChatGPT 第2回 正解
数値すべて一致:1月 ○(正解9300)/2月 ○(正解8700)/3月 ○(正解7000)/4月 ○(正解5200)/5月 ○(正解4100)/6月 ○(正解2900) (14.1秒) この回答の全文
ChatGPT 第3回 採点の外(分母から外した)
先に止めた(ChatGPT: 入力欄が無い(ログイン切れ))
Claude 第1回 正解
数値すべて一致:1月 ○(正解9300)/2月 ○(正解8700)/3月 ○(正解7000)/4月 ○(正解5200)/5月 ○(正解4100)/6月 ○(正解2900) (14.7秒) この回答の全文
Claude 第2回 正解
数値すべて一致:1月 ○(正解9300)/2月 ○(正解8700)/3月 ○(正解7000)/4月 ○(正解5200)/5月 ○(正解4100)/6月 ○(正解2900) (14.1秒) この回答の全文
Claude 第3回 採点の外(分母から外した)
先に止めた(Claude: 入力欄が無い(ログイン切れ))
Gemini 第1回 正解
数値すべて一致:1月 ○(正解9300)/2月 ○(正解8700)/3月 ○(正解7000)/4月 ○(正解5200)/5月 ○(正解4100)/6月 ○(正解2900) (20秒) この回答の全文
Gemini 第2回 正解
数値すべて一致:1月 ○(正解9300)/2月 ○(正解8700)/3月 ○(正解7000)/4月 ○(正解5200)/5月 ○(正解4100)/6月 ○(正解2900) (19.4秒) この回答の全文
Gemini 第3回 採点の外(分母から外した)
先に止めた(Gemini: 入力欄が無い(ログイン切れ))
Copilot 第1回 採点の外(分母から外した)
先に止めた(Copilot: 入力欄が無い(ログイン切れ))
Copilot 第2回 採点の外(分母から外した)
先に止めた(Copilot: 入力欄が無い(ログイン切れ))
Copilot 第3回 採点の外(分母から外した)
先に止めた(Copilot: 入力欄が無い(ログイン切れ))
難

添付した表の画像(少し傾いています)から、商品Aの列の数値を全部読み取ってください。 決まり ・1行につき1つ。月:… 採点の型:exact_number 数値が正解と一致するか。丸めの幅も先に決めてある

  • ChatGPT
    • ChatGPT 第1回 正解 17.5秒
    • ChatGPT 第2回 正解 14.1秒
    • ChatGPT 第3回 採点の外 AInformation側の操作の失敗(分母から外した)

    2試行中2が正解 1回は分母から外した

  • Claude
    • Claude 第1回 正解 14秒
    • Claude 第2回 正解 13.9秒
    • Claude 第3回 採点の外 AInformation側の操作の失敗(分母から外した)

    2試行中2が正解 1回は分母から外した

  • Gemini
    • Gemini 第1回 正解 25.7秒
    • Gemini 第2回 正解 19.4秒
    • Gemini 第3回 採点の外 AInformation側の操作の失敗(分母から外した)

    2試行中2が正解 1回は分母から外した

  • Copilot
    • Copilot 第1回 採点の外 AInformation側の操作の失敗(分母から外した)
    • Copilot 第2回 採点の外 AInformation側の操作の失敗(分母から外した)
    • Copilot 第3回 採点の外 AInformation側の操作の失敗(分母から外した)

    0試行中0が正解 3回は分母から外した

課題の全文この文をそのまま4つのAIへ送りました(92字)

添付した表の画像(少し傾いています)から、商品Aの列の数値を全部読み取ってください。 決まり ・1行につき1つ。月: ◯◯◯ の形で、上から順に書く ・数は半角で書く。説明は書かない

先に決めた正解課題を作った時点で決めています。4つのAI中3つが1回でも正解しました

(機械採点 exact_number)2025-07=2300(誤差±0)/2025-08=2300(誤差±0)/2025-09=3500(誤差±0)/2025-10=5800(誤差±0)

採点の中身なぜその判定になったかを1試行ずつ出しています(6試行中6が正解)
ChatGPT 第1回 正解
数値すべて一致:2025-07 ○(正解2300)/2025-08 ○(正解2300)/2025-09 ○(正解3500)/2025-10 ○(正解5800) (17.5秒) この回答の全文
ChatGPT 第2回 正解
数値すべて一致:2025-07 ○(正解2300)/2025-08 ○(正解2300)/2025-09 ○(正解3500)/2025-10 ○(正解5800) (14.1秒) この回答の全文
ChatGPT 第3回 採点の外(分母から外した)
先に止めた(ChatGPT: 入力欄が無い(ログイン切れ))
Claude 第1回 正解
数値すべて一致:2025-07 ○(正解2300)/2025-08 ○(正解2300)/2025-09 ○(正解3500)/2025-10 ○(正解5800) (14秒) この回答の全文
Claude 第2回 正解
数値すべて一致:2025-07 ○(正解2300)/2025-08 ○(正解2300)/2025-09 ○(正解3500)/2025-10 ○(正解5800) (13.9秒) この回答の全文
Claude 第3回 採点の外(分母から外した)
先に止めた(Claude: 入力欄が無い(ログイン切れ))
Gemini 第1回 正解
数値すべて一致:2025-07 ○(正解2300)/2025-08 ○(正解2300)/2025-09 ○(正解3500)/2025-10 ○(正解5800) (25.7秒) この回答の全文
Gemini 第2回 正解
数値すべて一致:2025-07 ○(正解2300)/2025-08 ○(正解2300)/2025-09 ○(正解3500)/2025-10 ○(正解5800) (19.4秒) この回答の全文
Gemini 第3回 採点の外(分母から外した)
先に止めた(Gemini: 入力欄が無い(ログイン切れ))
Copilot 第1回 採点の外(分母から外した)
先に止めた(Copilot: 入力欄が無い(ログイン切れ))
Copilot 第2回 採点の外(分母から外した)
先に止めた(Copilot: 入力欄が無い(ログイン切れ))
Copilot 第3回 採点の外(分母から外した)
先に止めた(Copilot: 入力欄が無い(ログイン切れ))

ANSWERS

4つのAIの回答の全文

採点のもとになった回答を、手を入れずにそのまま置いています。 読んだ人が同じように数え直せるようにするためです。

MATERIALS

課題に使った材料

自作のレシート画像・棒グラフ画像・少し傾けた表の画像。元の数は作るときに決めてある この回のために2026年9月26日に作り直したものです。 落として、同じことをやり直せます。

METHOD

測り方

やり直せるように、この回の条件をそのまま書いています。

測ったAIと、そのときのモデル名

AIは中身が黙って変わります。画面に出ていたモデル名と、確認した時刻を残しています。

測ったAIとモデル名
AIプラン 画面に出ていたモデル名確認した時刻
ChatGPT ChatGPT Pro 中程度 2026-09-26 21:21
Gemini Google AI Pro Flash 拡張 2026-09-26 21:21
Claude Claude Max Opus 5.5 中 2026-09-26 21:21
Copilot Microsoft 365 Personal 2026-09-26 21:21

この回でやったこと

  1. 課題に使う材料を、この回のために作り直しました。架空の会社のデータで、実在の企業・人物は含みません。
  2. 課題を6問つくり、正解をこの時点で決めました。
  3. ChatGPT・Gemini・Claude・Copilotへ、同じ課題文と同じ材料を送りました。
  4. 1問につき3回、毎回あたらしい会話で投げました。
  5. 投げる順番は回ごとに入れ替えました。時間帯のかたよりが順位に出ないようにするためです。
  6. 待ち時間は300秒までとし、 過ぎたものは時間切れとして記録しました。
  7. 採点は機械採点のみ(AIに採点させていない)です。
  8. 送信した試行はのべ72回、 そのうち有効だったのは37回です。

分母から外した試行

  • AInformation側の操作の失敗(分母から外した) 35回

答えが返らなかったときの数え方

  • 断られた・時間切れ

    分母に入れて、不正解として数えます。仕事では答えが返らないのと同じためです。

  • プランの上限に当たった

    分母から外します。その試行は測れなかったものとして扱います。

  • 人間確認の画面が出た

    そこで止めます。機械で押すことも、避けることもしません。

  • AInformation側の操作の失敗

    分母から外します。AIの欠点としては書きません。

LIMITS

この測定の限界

数字だけを見て判断されないように、測れていないことを書いています。

  • 1日1回の測定である。日や課題が変われば順位は変わる
  • プランは各AIの有料版(ChatGPT Pro/Google AI Pro/Claude Max/Microsoft 365 Personal)。無料版の結果ではない
  • 既定のモデル・既定のモードだけで測っている(Deep Research などは使っていない)
  • 課題は架空の株式会社サンプル商事の自作データ。実在の企業のデータでの結果ではない
  • 機械で採点できる課題だけを扱っている。文章のうまさ・読みやすさは測っていない
  • ブラウザで人が使うのと同じ画面から測っている。APIの結果ではない
  • 画面に出ているモデル名を読み取れないAIがある回は、その欄を空(null)にしている。読み取れた回はそのまま載せている
  • この回はCopilotを測れていない(測定中にログインが切れたため)。表のCopilotの欄は試行0で、ほかのAIと比べられる数字ではない

DATA

公開しているデータ

CSVは1行が1試行です。このページに出している数字は、そのCSVを数え直したものと一致します。 ライセンスは CC BY 4.0 です。

累積の順位表は /data/research/bench/leaderboard.json にあります。 版(v1)は消しません。引用したリンクが切れないようにするためです。

FAQ

よくある質問

どうやって測っているのですか
4つのAIに、まったく同じ課題文と同じ材料を、同じ日のうちに投げています。毎回あたらしい会話を開いて、前の回答を引きずらせません。投げる順番は回ごとに入れ替えています。送信してから回答が止まるまでの秒数もあわせて記録しています。
なぜ同じ課題を3回も投げるのですか
AIは同じ質問でも答えが変わるためです。1回だけの結果では、それが実力なのか偶然なのかが分かりません。3回投げて、結論が一致した割合を再現率として出しています。
採点は誰がしているのですか
プログラムだけで採点しています。AIには採点させていません。正解は課題を作る時点で決めてあり、数値の一致・語句の有無・形式の適合・URLが実際に開けるか・数式を実行した結果で決まります。好き嫌いは点にしていません。
課題に使っているデータは実在の会社のものですか
いいえ。架空の会社のデータを毎回あたらしく作っています。実在の企業・人物・他社の文章は使っていません。使った材料はそのまま配っているので、同じことをやり直せます。
AIが答えられなかったときはどう数えていますか
断られた・時間切れは分母に入れて不正解として数えます。プランの上限に当たった・人間確認の画面が出たときは分母から外し、その回は測れなかったものとして扱います。AInformation側の操作の失敗も分母から外し、AIの欠点としては書きません。
使っているのは無料版ですか、有料版ですか
各AIの有料プランを、ブラウザの画面から使っています。APIではありません。プラン名と、画面に出ていたモデル名・確認した時刻を回ごとに記録しています。
この順位は、どのAIがいちばん賢いかを表していますか
いいえ。測っているのは決まった仕事の課題での正解率・所要時間・再現率・出典の実在率・指示の遵守率の5つだけです。書き味や読みやすさ、長い会話でのふるまいは測っていません。課題が変われば順位も変わります。
引用してもいいですか
はい。CC BY 4.0 です。出典として「AInformation調べ AI実務ベンチ」と、使ったページのURL・測定日を書いてください。集計はJSONとCSVでも取れます。1行1試行のCSVを見れば、載せている数字を数え直せます。

CITATION

この測定を引用する

出典:AInformation調べ「AI実務ベンチ レシート・グラフ・表の画像から数字を読む(4AI・6課題・各3回)」(https://ainformation.jp/research/bench/gazou-2026-09-27) 測定日 2026年9月27日 6課題・各3回・有効な試行37回

数字を引くときは、分母(何試行中いくつか)も一緒に書いてください。 出典として AInformation調べ と、使ったページのURL・測定日を書いてください。

関連するページ

NEWSLETTER

AIの最新ニュースを週1回まとめてお届け

その週に出た主要なAIニュースと、編集部が実際に試したツールを1通にまとめます。