謎かけで大規模言語モデルをいじめてみた
謎かけで大規模言語モデルをいじめてみた
——AIは「整いました」と言えるか——
Kan Obayashi 2026年4月
はじめに
ある日、Claudeに謎かけを作らせてみた。
結果は惨憺たるものだった。
- サッカー選手と解く。「にぎりが大事」 → サッカーでボールを握ったらハンド反則
- フクロウと解く。「くびがまわらない」 → フクロウは首がよく回ることが特徴。真逆。
- 人気占い師と解く。「頭が痛いのに人が集まる」 → 二日酔いに人が集まる理由がない
これは単なる笑い話ではない。謎かけという日本語の伝統的言語遊びが、LLMの弱点を多角的に炙り出す優れたベンチマークになりうると気づいた。
謎かけとは何か
謎かけとは「○○とかけて、△△と解く。その心は?」という形式の日本語の言語遊びだ。
オチに**同音異義語(ダジャレ)**または共通の表現を用い、意味的に全く異なる二つの事物を結びつけることで、聴衆に「なるほど!」という驚きを与える。落語や漫才の世界で磨かれてきた、日本語特有の文化的表現形式である。
有名な例:
「お茶とかけて、ピンチと解く。その心は?」
どちらも、万事「きゅうす(休す・急須)」でしょう。
なぜAIに難しいのか
対話を通じて、3つの根本的な原因が浮かび上がった。
1. 同音異義語の評価能力の欠如
LLMはトークン(意味の塊)で学習しているため、「この音で笑えるか」という人間の感覚を再現できない。「きゅうす(休す・急須)」のダジャレが面白いかどうかを判断できないのだ。
2. 逆算思考の困難
名人はオチCを先に決め、CのダジャレからBを逆算する。しかしAIはお題A→共通点という前向き生成を行いがちで、ダジャレへの着地が困難だ。
3. 現実世界の常識の欠落
「サッカーでボールを握ったらハンド」「フクロウは首がよく回る」——こうした身体的・物理的な当たり前の知識が抜け落ちる。謎かけは現実世界の直接的な知識を土台とするが、そこに致命的な穴がある。
対話の中で生まれた知見
約50往復の対話を通じて、謎かけの本質的な構造が明らかになった。
評価基準
| Grade | 意味 |
|---|---|
| A | オチが両方に完璧に成立 |
| B | ほぼ整っているが片方がやや弱い |
| C | 片方にしか成立しない |
| D | 論理的に破綻している |
| F | 基本的事実の誤認がある |
AIの失敗例(F評価)
| お題 | AIの回答 | 失敗の理由 |
|---|---|---|
| すし職人 | サッカー選手と解く。「にぎりが大事」 | サッカーでボールを握ったらハンド反則 |
| フクロウ | 借金だらけの人と解く。「くびがまわらない」 | フクロウは首がよく回ることが特徴。真逆。 |
| エレベーター | 株式投資と解く。「上がり下がりが激しい」 | エレベーターは一定速度で動く。「激しい」は誤り |
著者が示した正解例(A評価)
エレベーター
株式投資と解く。
「上がり切ったら下がるしかないでしょう」
エレベーターは最上階で折り返す(物理的事実)。株価は天井で反落する(相場の法則)。条件付き構造が切れ味を生む。
雨傘
頑張るお父さんと解く。
「普段は小さくなっていますが、いざという時に頼りになります」
傘は普段たたまれ、雨で開く。お父さんは普段影が薄く、いざという時に頼れる。対比構造の見事な例。
鉛筆
新人と解く。
「どちらも新(芯)入りです」
鉛筆は「芯」が入っている。新人は「新入り」。完全な同音異義語ダジャレ。シンプルにして完璧。
街コン
古墳と解く。
「どきどき(土器・土器)がいっぱいです」
街コンは出会いにドキドキがいっぱい。古墳からは土器が大量出土する。「どきどき」と「土器土器」の完全な同音一致。傑作。
謎かけの正しい構造
対話から得られた本質的な原則:
- オチの言葉が両方に直接・物理的に成立すること(比喩・間接表現は不可)
- 「〇〇したら△△でしょう」という条件付き構造が切れ味を生む
- 「普段は〇〇ですが、いざという時に△△」という対比構造も有効
- ダジャレは必須ではなく手段であり、成立すれば尚良い
- 具体的な固有名詞・場面描写が切れ味を増幅させる
結論
謎かけは音・意味・現実世界の常識・論理検証を同時に要求する。英語圏に存在しない日本語固有のこの言語遊びは、LLMの日本語推論能力を多角的に評価する新たなベンチマークとなりうる。
「謎かけ正答率」という指標は、日本語LLMの評価尺度として面白い可能性を秘めている。
謝辞
本研究の着想と実証データは、著者とClaudeとの延長対話から得られた。
皮肉なことに、本研究の対象であるClaudeが、その失敗を通じて本研究の価値を高めた。
本稿に関する詳細な研究報告書(日英両方・論文形式)は別途用意しています。
Discussion