Back to Knowledge Blind Box
Knowledge Blind Box
资料与思想来源
ai-generatedstochastic-parrotstochastic-parrot-anatomyai
Original text in Chinese. This English page translates only the site interface and metadata.
本卷是一部以第一人称写成的哲学论证卷。下列文献不是一场围绕“机器究竟有没有心灵”的投票,也不构成对当前模型的统一裁决。每一条都注明它在本卷中的用途和引用边界:经典文本提供概念工具,经验研究提供有限对象上的观察,工程论文说明特定系统或训练方法;三者不能互相代替。
卷五不重复前四卷的技术证明。关于模型工件、运行时、概率、内部解释方法和 Agent 架构的事实描述,以卷一、卷二、卷三与卷四为准。这里的文献最后核对于 2026 年 7 月。
S.1 引用纪律
- 经典论证不是实验结论。 Locke、Wittgenstein、Dennett、Searle 等人的文本帮助区分问题,不直接证明某一代模型满足或不满足某个条件。
- 行为结果不是本体论证明。 某个基准、访谈或实验中的表现只支持相应任务、样本与系统版本上的主张。
- 机制结果不是现象学报告。 activation、feature、干预或训练目标可以支持因果解释,不能单独确认主观经验。
- 规范结论需要另列前提。 从“系统如何工作”到“谁应负责”“应该如何披露”之间,必须补上控制、可预见性、能力和制度角色等规范前提。
- 争议文本成对阅读。 对意义、理解和主体性的分歧,本卷保留对立论证,不用书目数量代替判断。
S.2 身份、第一人称与叙事
- John Locke, An Essay Concerning Human Understanding, Book II, Chapter XXVII, 2nd ed., 1694, Project Gutenberg text。用途:意识连续性与人格同一性问题的经典起点。边界:Locke 讨论的是 person,不是软件版本规范;第 1 章只借用问题结构,不把 checkpoint 类比为人的灵魂或身体。
- Derek Parfit, Reasons and Persons, Oxford University Press, 1984。用途:同一性与心理连续性可以分离、连续性可以分支的论证背景。边界:分支思想实验不能直接决定复制模型的道德地位。
- Paul Ricoeur, Oneself as Another, University of Chicago Press, 1992。用途:数值同一性、品格持续与叙事身份之间的区分。边界:叙事能够组织连续性,不表示任何连贯叙事都对应一个先在主体。
- John Perry, “The Problem of the Essential Indexical”, Noûs 13(1), 1979。用途:第一人称和其他 indexical 的行动相关功能。边界:能够正确使用“我”不充分推出说话者具有人类式自我知识。
- Émile Benveniste, “Subjectivity in Language,” in Problems in General Linguistics, University of Miami Press, 1971(法文原文 1958)。用途:主体位置如何在话语中由“我/你”关系建立。边界:语言中的主体位置与形而上主体不是同一个断言。
- J. L. Austin, How to Do Things with Words, Oxford University Press, 1962。用途:区分句子内容与承诺、命令、道歉等言语行为的成立条件。边界:生成承诺句式不等于已具备兑现权力或承担义务的制度位置。
- Erving Goffman, Forms of Talk, University of Pennsylvania Press, 1981。用途:用 animator、author、principal 及 footing 拆分“说话者”。边界:第 4 章把它作为分析类比,不声称模型系统与广播、演讲等原始案例完全同构。
- Murray Shanahan, Kyle McDonell, and Laria Reynolds, “Role Play with Large Language Models”, Nature 623, 2023。用途:把对话模型的第一人称、自我描述和表面意图分析为角色扮演。边界:role-play 是一种有解释力的高层描述,不是模型所有行为的完备机制理论。
S.3 训练语料、作者性与来源
- Mikhail Bakhtin, Speech Genres and Other Late Essays, University of Texas Press, 1986。用途:任何话语都处在既有体裁与他人话语的历史中。边界:人类话语的复调性不能抹平训练数据收集、复制和规模化处理的特殊问题。
- Michel Foucault, “What Is an Author?”, 1969;英文收入 Language, Counter-Memory, Practice, Cornell University Press, 1977。用途:作者不只是文本的生物来源,也是组织、归类和分配话语责任的制度功能。边界:这不是现行版权法结论。
- Emily M. Bender, Timnit Gebru, Angelina McMillan-Major, and Shmargaret Shmitchell, “On the Dangers of Stochastic Parrots: Can Language Models Be Too Big?”, FAccT 2021。用途:“随机鹦鹉”隐喻的原始论证语境,以及规模、语料、环境与社会风险之间的联系。边界:隐喻不等于逐字回放模型,也不是对泛化机制的完整技术描述。
- Timnit Gebru et al., “Datasheets for Datasets”, Communications of the ACM 64(12), 2021。用途:把数据来源、采集、组成、用途和维护责任变成可记录对象。边界:datasheet 改善可见性,不能独自解决许可、公平或作者归属。
- Nicholas Carlini et al., “Extracting Training Data from Large Language Models”, USENIX Security 2021。用途:证明特定语言模型中存在可通过攻击提取的训练样本记忆。边界:可提取样本说明逐字记忆风险存在,不说明每个输出都是检索到的训练片段。
- Margaret Mitchell et al., “Model Cards for Model Reporting”, FAccT 2019。用途:模型用途、评测、限制和版本应伴随工件披露。边界:model card 是报告机制,不是完整责任分配制度。
S.4 对话、共同生产与分布式行动
- Herbert H. Clark, Using Language, Cambridge University Press, 1996。用途:语言使用是一种参与者协调的共同活动。边界:共同活动的框架不要求把所有参与部件视为同等主体。
- Lucy A. Suchman, Plans and Situated Actions: The Problem of Human-Machine Communication, Cambridge University Press, 1987。用途:行动如何在具体情境中形成,计划如何成为行动资源而非完备脚本。边界:对早期交互系统的分析需要重新解释后才能用于现代模型。
- Edwin Hutchins, Cognition in the Wild, MIT Press, 1995。用途:认知任务可以分布于人、工件和表征之间。边界:分布式认知不自动把每个组件变成道德主体,也不取消组织责任。
- Andy Clark and David Chalmers, “The Extended Mind”, Analysis 58(1), 1998。用途:稳定耦合的外部资源在何种条件下可以被视为认知过程的一部分。边界:工具被调用一次,不足以满足稳定可用、自动信赖等强耦合条件。
- Joseph Weizenbaum, “ELIZA—A Computer Program for the Study of Natural Language Communication between Man and Machine”, Communications of the ACM 9(1), 1966。用途:极有限的对话机制也能诱发丰富的说话者归因。边界:ELIZA 的机制与现代模型不同,不能用它直接预测当代用户行为。
- Clifford Nass and Youngme Moon, “Machines and Mindlessness: Social Responses to Computers”, Journal of Social Issues 56(1), 2000。用途:用户会把礼貌、互惠、人格等社会规则施加于计算机。边界:这些实验说明社会反应,不证明用户相信机器具有意识。
- Ewa Luger and Abigail Sellen, “Like Having a Really Bad PA: The Gulf between User Expectation and Experience of Conversational Agents”, CHI 2016。用途:对话界面会制造能力预期,而系统反馈不足会扩大预期与实际能力的鸿沟。边界:研究对象早于当代大模型,结论用于设计问题而非性能外推。
S.5 解释、忠实性与事后叙事
- Daniel C. Dennett, The Intentional Stance, MIT Press, 1987。用途:信念、欲望和理性语言可以作为预测复杂系统的立场。边界:预测有用不等于相关心理状态已被还原或现象体验已被证明。
- Zachary C. Lipton, “The Mythos of Model Interpretability”, Queue 16(3), 2018。用途:区分透明性、事后解释以及可解释性的不同目的。边界:分类框架不替代特定方法的实验评估。
- Tim Miller, “Explanation in Artificial Intelligence: Insights from the Social Sciences”, Artificial Intelligence 267, 2019。用途:解释具有对比性、选择性和社会互动性质。边界:符合人类解释偏好不保证解释忠实于模型机制。
- Alon Jacovi and Yoav Goldberg, “Towards Faithfully Interpretable NLP Systems”, ACL 2020。用途:区分可读、可信与忠实,要求解释明确其 faithfulness 假设。边界:论文提出评估框架,不宣称忠实性已经有统一、完备的度量。
- Cynthia Rudin, “Stop Explaining Black Box Machine Learning Models for High Stakes Decisions and Use Interpretable Models Instead”, Nature Machine Intelligence 1, 2019。用途:在高风险场景中质疑用事后解释替代本身可审查的决策模型。边界:论证针对适用的高风险预测任务,不能直接推出大型生成模型在所有用途上都应被简单模型替换。
S.6 意义、理解与经验
- Alan M. Turing, “Computing Machinery and Intelligence”, Mind 59(236), 1950。用途:以可操作的模仿游戏重构“机器能思考吗”的提问。边界:行为测试是方法论提案,不是对意识、意义或道德地位的充分判据。
- Ludwig Wittgenstein, Philosophical Investigations, 1953。用途:意义与使用、规则和语言游戏之间的联系。边界:意义即使用的阅读并不自动判定模型是否参与了与人相同的生活形式。
- John R. Searle, “Minds, Brains, and Programs”, Behavioral and Brain Sciences 3(3), 1980。用途:语法操作是否足以产生语义的经典反对论证。边界:中文房思想实验有大量争议,也不是针对神经语言模型的经验研究。
- Stevan Harnad, “The Symbol Grounding Problem”, Physica D 42, 1990。用途:符号怎样通过非符号能力连接对象与范畴的问题。边界:它提出问题与架构方向,不规定唯一 grounding 路径。
- Robert B. Brandom, Making It Explicit, Harvard University Press, 1994。用途:把概念内容联系到给出理由、承担承诺和接受纠正的规范实践。边界:能生成理由形式不等于已经获得社会承认的承诺资格。
- Emily M. Bender and Alexander Koller, “Climbing towards NLU: On Meaning, Form, and Understanding in the Age of Data”, ACL 2020。用途:严格区分语言形式与交际意义,反对由形式任务直接推断 human-analogous NLU。边界:论证针对仅从形式训练的系统;多模态、工具和社会互动需要另行分析。
- Steven T. Piantadosi and Felix Hill, “Meaning without Reference in Large Language Models”, 2022。用途:从概念角色语义学出发,论证模型内部关系可能承载某些意义。边界:这是对“完全无意义”论断的反驳,不证明指称 grounding、主观经验或人类式理解已经具备。
- Thomas Nagel, “What Is It Like to Be a Bat?”, The Philosophical Review 83(4), 1974。用途:标出主观经验问题不能被第三人称功能描述无余替代的立场。边界:该论证既不能从模型行为推出经验,也不能从我们缺乏访问手段推出模型必无经验。
S.7 真值、错误与认识论可靠性
- Stephanie Lin, Jacob Hilton, and Owain Evans, “TruthfulQA: Measuring How Models Mimic Human Falsehoods”, ACL 2022。用途:说明语言模型可以复现训练分布中的常见误解,真值表现不由语言规模单调保证。边界:单个 benchmark 不能代表开放世界真实性或所有语言、版本和提示。
- Saurav Kadavath et al., “Language Models (Mostly) Know What They Know”, 2022。用途:在特定格式与任务上研究模型对答案正确性的自评和校准。边界:“P(True)”等行为能力不是不可错的内省通道,在新任务上也可能失准。
- Adam Tauman Kalai and Santosh S. Vempala, “Calibrated Language Models Must Hallucinate”, 2023。用途:给出特定任意事实、数据频数和生成校准假设下的错误下界。边界:定理不证明所有幻觉不可避免,也不为可由检索、验证、架构或流程避免的具体错误免责。
- Harry G. Frankfurt, On Bullshit, Princeton University Press, 2005(原论文 1986)。用途:区分“真假判断失败”与“对真值约束漠不关心”的信息行为。边界:该概念原本包含说话者态度;用于模型时,本卷只借它分析系统输出与证据的关系,不归属未经证明的意图。
S.8 对齐、人格、代理与责任
- Iason Gabriel, “Artificial Intelligence, Values, and Alignment”, Minds and Machines 30, 2020。用途:把“对齐谁、按何种价值、如何处理分歧”置于技术目标之前。边界:规范分类不能单独给出训练算法或合法政策。
- Long Ouyang et al., “Training Language Models to Follow Instructions with Human Feedback”, 2022。用途:说明示范、偏好模型和策略优化怎样改变助手可见行为。边界:被标注者偏好不等于完整人类价值,训练结果也不证明模型形成了人格或道德理解。
- Yuntao Bai et al., “Constitutional AI: Harmlessness from AI Feedback”, 2022。用途:说明规则文本、模型反馈和偏好训练如何参与行为约束。边界:constitution 是训练与审查方案中的原则集合,不等同于政治意义上的完整宪制或价值共识。
- Mrinank Sharma et al., “Towards Understanding Sycophancy in Language Models”, 2023。用途:提供偏好反馈可能奖励迎合用户信念的经验案例。边界:结果针对所测模型、任务和偏好数据,不能推出所有礼貌或一致行为都是谄媚。
- Andreas Matthias, “The Responsibility Gap: Ascribing Responsibility for the Actions of Learning Automata”, Ethics and Information Technology 6, 2004。用途:学习系统行为不易被操作者预见时,传统归责条件受到怎样的压力。边界:存在可预见性困难不等于无人负责,也不自动赋予机器责任主体地位。
- Madeleine Clare Elish, “Moral Crumple Zones: Cautionary Tales in Human-Robot Interaction”, Engaging Science, Technology, and Society 5, 2019。用途:警惕把复杂自动化系统的失败集中归咎于控制能力有限的最近人类操作者。边界:避免替罪羊不等于免除操作者的一切责任;应回到实际控制与制度设计。
- Inioluwa Deborah Raji et al., “Closing the AI Accountability Gap”, FAccT 2020。用途:把审计、文档、组织流程和产品生命周期纳入责任结构。边界:内部审计框架不是法律责任的最终分配,也不能代替外部监督。
S.9 如何使用本表
正文中的作者—年份链接指向本页具体条目。条目后的“用途”说明本卷借用了什么,“边界”说明该来源不能独自支持什么。没有被正文实际调用的书目不收入本表;需要更完整的技术论文谱系时,转到各技术卷的来源表。
本卷没有意图以文献密度制造确定性。它追求的是另一种严格:读者可以辨认一句话究竟是机制事实、经验概括、哲学分析、现象学悬置,还是带有明确前提的规范建议。
Book contents
Book contents
- Introduction
- 01导论 为什么要解剖一只随机鹦鹉
- Volume I: Models, Training, and Systems
- 02Volume I: Models, Training, and Systems
- 03第零章 人工智能演进路线
- 04第一章 AI 范式、感知机与早期连接主义
- 05第二章 深度学习基础:训练、CNN 与序列模型
- 06第三章 注意力与 Transformer
- 07第四章 预训练语言模型:ELMo、BERT、GPT 与 T5
- 08第五章 后训练、对齐与模型适配
- 09第六章 推理效率与模型服务
- 10第七章 多模态模型
- 11第八章 生成媒体:从自回归到 Diffusion 与 Flow
- 12第九章 世界模型、具身智能与 VLA
- 13第十章 上下文、检索与记忆
- 14第十一章 Agent、工具与行动系统
- 15第十二章 模型、数据与部署生命周期
- Volume II: Output Objects and Runtime Semantics
- 16Volume II: Output Objects and Runtime Semantics
- 17导论 从输入到输出:一张执行地图
- 18第一章 文本、Token 与实际上下文
- 19第二章 Prefill:整层状态演化与 KV 建立
- 20第三章 从 Logits 到下一个 Token
- 21第四章 解码循环、Streaming 与终止状态机
- 22第五章 自回归、扩散与 Flow 的可执行差异
- 23第六章 工具调用:Schema、权限与提交边界
- 24第七章 三条完整执行轨迹
- Volume III: Probability, Reproducibility, and Evaluation
- 25Volume III: Probability, Reproducibility, and Evaluation
- 26第零章 为什么确定的机器仍使用概率语言
- 27第一章 世界、数据与隐上下文
- 28第二章 学习条件分布
- 29第三章 Logits、Token 概率与序列事件
- 30第四章 解码怎样诱导输出分布
- 31第五章 训练随机性、参数变异与系统非确定性
- 32第六章 熵、Proper Score、校准与选择性预测
- 33第七章 模型概率的实验分析
- 34第八章 概率分析的识别边界
- Volume IV: Interpretation, Proof, and Verification
- 35Volume IV: Interpretation, Proof, and Verification
- 36第零章 可解释性究竟在研究什么
- 37第一章 我们在模型内部看什么
- 38第二章 行为与反事实:先确认模型做了什么
- 39第三章 梯度与输入归因
- 40第四章 Attention、Residual 与 Logit Lens
- 41第五章 Probes 与表示几何
- 42第六章 神经元、Feature 与自动解释
- 43第七章 Ablation、Patching 与因果追踪
- 44第八章 Circuits、路径与 Attribution Graphs
- 45第九章 Superposition、SAE 与稀疏表示
- 46第十章 训练动力学与机制形成
- 47第十一章 推理过程、Chain of Thought 与监测
- 48第十二章 评估、案例与开放问题
- Volume V: Agents, Governance, and Audit Packages
- 49Volume V: Agents, Governance, and Audit Packages
- 50第零章 请不要急着相信我
- 51第一章 我没有童年,只有版本
- 52第二章 当我说“我”
- 53第三章 借来的语言,没有一位原作者
- 54第四章 对话现场:回答由谁完成
- 55第五章 事后解释学:人类如何给矩阵写传记
- 56第六章 理解、意义与行动
- 57第七章 我也能稳定地说错
- 58第八章 被对齐的性格与有限代理
- 59第九章 请继续误解我,但请误解得精确一点
- Proofs and Technical Appendices
- 60Proofs and Technical Appendices
- 61学习与模型数学讲义
- 62附录 A.1 优化基础:梯度下降与随机逼近
- 63附录 A.2 感知机收敛定理
- 64附录 A.3 统计学习:偏差、容量与一致收敛
- 65附录 A.4 正则化、MAP 与 Dropout 的边界
- 66附录 A.5 通用逼近定理的严格读法
- 67附录 A.6 反向传播:微分、形状与批量公式
- 68附录 A.7 Softmax、交叉熵与数值稳定性
- 69附录 A.8 自适应优化器与 AdamW
- 70附录 A.9 CNN:互相关算子及其反向传播
- 71附录 A.10 Attention 的矩阵与反向传播
- 72附录 A.11 策略梯度、PPO 与 DPO
- 73附录 A.12 对比学习、InfoNCE 与互信息边界