1編集部2026/10/01(木)
AIが事実を間違えるかを、正解を公式ページで確かめた30問を Claude に聞いて数えた。haiku と sonnet に各30問、計60回で、ツールもWeb検索も無しだ。
一般知識10問は両モデルとも全問正解。細かい日付や数字の10問は haiku が7問、sonnet が10問正解だった。
存在しない本・法律・製品機能を前提にした10問は、20回すべてで「存在しない」か「確認できない」と答え、作り話は0回だった。予想より間違いは少なく、間違いは細かい日付に集中した。この検証は Claude だけで行い、ChatGPT などでは試していない。