概要
原作より要約が高得点？ データで暴くAI小説評価の「デタラメ」
AIによる小説評価は、人間の批評家のように作品を細部まで読み込んでいるわけではない。
入力された文章から抽出した「中核情報」を、AIが知っている定番の文学パターンへ勝手に寄せ、「それっぽい作品像」を脳内で捏造しているに過ぎないのだ。
――その証拠に、原作と要約文でAIの評価点は一致し、挙句の果てには「本文に書かれていない内容」まで勝手に補完して激賞し始める。
本稿は、具体的な実験データをもとに、AI小説評価の「デタラメな読解」を論理的に実証・暴露する創作論である。
入力された文章から抽出した「中核情報」を、AIが知っている定番の文学パターンへ勝手に寄せ、「それっぽい作品像」を脳内で捏造しているに過ぎないのだ。
――その証拠に、原作と要約文でAIの評価点は一致し、挙句の果てには「本文に書かれていない内容」まで勝手に補完して激賞し始める。
本稿は、具体的な実験データをもとに、AI小説評価の「デタラメな読解」を論理的に実証・暴露する創作論である。