LLMO・GEO の研究論文と民間調査/引用・出典選択
研究論文
ChatGPT の引用を理解する:モデル世代をまたいだ、本番ウェブ検索の証拠
原題:Understanding ChatGPT Citations: Evidence from Production Web Search Across Model Generations
著者は Yunxuan Jiang, Shiqi Zhang, Anqi Xing, Xiangyu Chang, Xiaokui Xiao。に arXiv へ投稿されました。日本語の題名は、ガーオンによる仮の訳です。
論文の原文を arXiv で読む(arXiv:2610.15382)論文が報告した結果
ChatGPT Web はウェブページを取ってくるが、引用として出るのはその一部である、として、ChatGPT 5.2から5.5の4設定(Instant と Thinking)で、質問の言い換え、候補の取得、出典の選択を観察した。
Instant はほぼ1ラウンド、GPT-5.4 Thinking は複数回の取得が多い。繰り返し実行で、よく取ってくる候補ほど引用されやすい。外部の近似として Google 検索と OpenAI Responses API を比べると、後者の引用の方が ChatGPT Web の出典に近く、ホスト名や主体の単位ではURL単位より一致しやすい。両者を合わせても、引用URLの約4分の1しか拾えない、と報告している。
調査の条件
- 論文が調べたこと
- 本番のWeb検索を通じた ChatGPT の引用(モデル横断)
- 調べた対象の AI
- ChatGPT
- 調べたモデル
- ChatGPT Web(5.2から5.5、Instant と Thinking)
- 回答データの取り方
- ChatGPT Web のサーバー送信イベント(SSE)の観察と、同じ3日間での Google 検索および OpenAI Responses API との比較(本文)
- 調査の規模
- 質問80件(意図4種、中国語・英語各10件×4。本文)。設定は4。繰り返し実行あり(要旨・本文)
- 数字が載っている場所
- 要旨(4設定、引用URLの約4分の1、AUC 0.74超)。質問80件の内訳は本文
結果を読むときの注意
観察研究(10ページ)。質問は80件(意図4種、中国語と英語が各10件×4、本文)。GPT-5.5 の実行は短縮した事例研究、とされる。ChatGPT Web のサーバー送信イベント(SSE)を読む。外部信号を組み合わせた教師ありモデルは、外部候補の中で GPT-5.3 と GPT-5.5 の3単位すべてで AUC が0.74超、と要旨。
上の要約は、株式会社ガーオンが生成AIを使って作成しました。最終更新は2026年11月19日です。正確な内容は、論文の原文で確認してください。
「引用・出典選択」を調べたほかの論文
- 2026年11月関連性から効用へ:Yuanbao検索におけるルーブリック整合
- 2026年11月引用されても使われていない:RAGにおけるパラメータ記憶からの由来
- 2026年11月行動から満足を読む:AI概要に対する利用者の満足を推論する
- 2026年11月WISE:ページ全体のマルチモーダル検索体験を、どこが悪いかまで帰属する