suiP / もくもく会 読み物

確率で次の単語を選ぶだけなのに、
なぜ考えているように見えるのか

LLMは「次に来そうな単語」を確率で選び続けるだけの仕組みです。 それなのに、助言をし、視点をずらし、あなた向きの提案をする。 その理由を、できるだけ正直に解きほぐします。

scroll
問い 01

「確率で次の単語を予測する」は正確な説明か?

正確です。ただし、何の確率かを問い直すと意味が変わります。

LLMが予測しているのは「この文脈の後に来る、もっともらしいトークン」です。 そして「もっともらしい」を決める内部空間は、人類が書いたほぼすべての言語・思考・論争・詩・コードを圧縮した構造になっています。

LLMは人間の思考パターンの統計的凝縮から次の一手を選んでいる。 単語を選んでいるのではなく、思考の流れを引き継いでいる、という見方もできる。

「確率で選ぶだけ」という表現は間違いではないですが、 「だけ」の中に何が入っているかを見落とすと、仕組みを過小評価することになります。

問い 02

「斜めの観点」「考察」はどこから来るのか?

訓練データには「問い → 正答」のペアだけでなく、 「問い → 批判 → 反論 → 別の角度 → 比喩」という複雑な論理構造が無数に含まれています。

その結果、特定の問いに対して「まっすぐ答える文脈」より 「一度ずらしてから答える文脈」の方が高い確率を持つケースが生まれます。

演出ではない
「斜めの観点」は意図的に付け加えたものではなく、 そのパターンが次として最も自然だと判断された結果として出てくる。
構造の継承
哲学書の問い返し、論文の先行研究批判、エッセイの逆説—— それらの構造が「次の言葉」の候補として残っている。

言い換えると、LLMが考察的に見える理由は、 人間が考察するときに使う言語の形を大量に学んでいるからです。 形が内容を引き寄せる、という側面があります。

問い 03

プロフィールに応じた提案は、なぜ可能なのか?

LLMは文脈の中にあるすべての情報を「この文脈の後に来るもっともらしい言葉」を決めるために使います。 プロフィール情報もその文脈の一部です。

「IP戦略とは何か」という問いへの応答と、
「20年のSEP経験を持ち、スタートアップでAIエージェントを設計している人が このトピックの次に読みたい言葉」への応答は、
確率空間の出発点が根本的に異なる。

一般的な問いへの答えを出力するのではなく、 その人の文脈を持った問いへの答えを探しています。 パーソナライズは機能として足したものではなく、 文脈が変われば確率が変わるという基本的な仕組みの結果です。

問い 04

これは「本当の理解」なのか?

ここが哲学的な核心で、正直に言えばわかりません。 LLM研究者も、この問いには本当の意味での答えを持っていません。

ただ、一つの見方を提示するとすれば—— 「理解」とは何かを問うとき、人間の思考もまた、 過去に入力されたパターンから次の概念を引き出す構造を持っています。

差は種類か?
人間の思考とLLMの処理の差が「種類の違い」なのか「実装の違い」なのかは、 まだ決着していない問いです。
差は実装か?
ニューロンの発火パターンとトークンの確率計算は、 機構として全く異なりますが、機能として何が異なるかは別の問いです。

「理解しているかどうか」より「どの問いに対してどう役立つか」を問う方が、 今は実用的かもしれません。ただ、問いを保持し続けることは続ける価値があります。

問いを持ち続けること

LLMの仕組みに対する問いは、AIを使う人にとってだけでなく、 自分たちの「思考」とは何かを問い直す契機でもあります。

答えを急がず、問いの形を育てる——
それがもくもく会の時間のひとつの使い方かもしれません。