返回知识盲盒

知识盲盒

一手资料与证据状态

ai-generatedstochastic-parrotstochastic-parrot-anatomyai

本表是卷四正文中作者—年份引用的定位表,检索截止到 2026-07-19。优先列方法原论文、同行评审版本和作者公开技术报告;综述只用于导航,不作为经验结论的唯一依据。

状态标记:

  • [同行评审]:正式会议或期刊论文;结论仍只在论文实验范围内成立。
  • [机构/作者研究报告]:公开方法、实验与代码,但未必经过匿名同行评审。
  • [预印本]:尚不能把新假说或单组经验结果写成领域定论。
  • [工作坊]:用于记录新方向或受限实验,证据权重低于正式主会论文。

研究规范、行为与反事实

梯度、遮挡与归因

Attention、Residual 与中间读出

Probes、表示几何与概念方向

神经元与自动解释

内部干预与模型编辑

  • Kevin Meng et al., Locating and Editing Factual Associations in GPT, NeurIPS 2022,[同行评审]。事实回忆的 causal tracing 与 ROME 编辑;不支持事实唯一存储层。
  • Fred Zhang and Neel Nanda, Towards Best Practices of Activation Patching in Language Models, ICLR 2024,[同行评审]。corruption、metric 与 patching 设计的敏感性。
  • Marc Canby et al. 2025 causal probing 论文同样用于第七章关于 projection intervention 的 completeness 与 selectivity。
  • Atticus Geiger et al. 2021/2022 的 causal abstraction 工作用于 interchange intervention;正文明确限制 alignment map 容量。

Circuits、路径与自动发现

Superposition、SAE 与 Transcoder

训练动力学与机制稳定性

Chain of Thought、Reasoning 与 Monitorability

评估基准

  • Rohan Gupta et al., InterpBench: Semi-Synthetic Transformers for Evaluating Mechanistic Interpretability Techniques, NeurIPS 2024 Datasets and Benchmarks,[同行评审]。用 SIIT 构造半合成 known circuits。
  • Mueller et al. 2025 MIB:用于跨 circuit/causal-variable localization 方法比较,已发表于 ICML 2025,属于 [同行评审] 结果。
  • Karvonen et al. 2025 SAEBench 与 Chanin 2026 audit:分别代表 SAE 多指标基准与对其可靠性的最新审计;二者应并读。
  • Gross et al. 2024:展示受控模型中从机制理解走向形式性能界的可能,也明确暴露结构外误差累积问题。

引用与外推纪律

  1. “某论文发现”默认只指该论文的模型、任务、数据和干预协议。
  2. preprint、机构报告和 workshop 结果可以更新研究地图,不用作无条件定理。
  3. SAE feature、attribution graph、CoT monitor 和 causal probe 的新指标本身也需要 sanity checks 与 ground truth 审计。
  4. 自动说明分数、probe 准确率、steering 成功、自然行为匹配与 intervention faithfulness 是不同量。
  5. 截至 2026 年 7 月,feature 可识别性、全局 circuit、replacement-model 忠实性、跨规模机制稳定性和对抗条件下 CoT monitorability 仍是开放问题。
本书目录
本书目录
  1. 导论
  2. 01导论 为什么要解剖一只随机鹦鹉
  3. 卷一 模型、训练与系统
  4. 02卷一 模型与系统
  5. 03第零章 人工智能演进路线
  6. 04第一章 AI 范式、感知机与早期连接主义
  7. 05第二章 深度学习基础:训练、CNN 与序列模型
  8. 06第三章 注意力与 Transformer
  9. 07第四章 预训练语言模型:ELMo、BERT、GPT 与 T5
  10. 08第五章 后训练、对齐与模型适配
  11. 09第六章 推理效率与模型服务
  12. 10第七章 多模态模型
  13. 11第八章 生成媒体:从自回归到 Diffusion 与 Flow
  14. 12第九章 世界模型、具身智能与 VLA
  15. 13第十章 上下文、检索与记忆
  16. 14第十一章 Agent、工具与行动系统
  17. 15第十二章 模型、数据与部署生命周期
  18. 卷二 输出对象与运行语义
  19. 16卷二 一次生成如何发生
  20. 17导论 从输入到输出:一张执行地图
  21. 18第一章 文本、Token 与实际上下文
  22. 19第二章 Prefill:整层状态演化与 KV 建立
  23. 20第三章 从 Logits 到下一个 Token
  24. 21第四章 解码循环、Streaming 与终止状态机
  25. 22第五章 自回归、扩散与 Flow 的可执行差异
  26. 23第六章 工具调用:Schema、权限与提交边界
  27. 24第七章 三条完整执行轨迹
  28. 卷三 概率、复现与评测
  29. 25卷三 模型中的概率从何而来
  30. 26第零章 为什么确定的机器仍使用概率语言
  31. 27第一章 世界、数据与隐上下文
  32. 28第二章 学习条件分布
  33. 29第三章 Logits、Token 概率与序列事件
  34. 30第四章 解码怎样诱导输出分布
  35. 31第五章 训练随机性、参数变异与系统非确定性
  36. 32第六章 熵、Proper Score、校准与选择性预测
  37. 33第七章 模型概率的实验分析
  38. 34第八章 概率分析的识别边界
  39. 卷四 解释、证明与验证
  40. 35卷四 模型可解释性的研究路线
  41. 36第零章 可解释性究竟在研究什么
  42. 37第一章 我们在模型内部看什么
  43. 38第二章 行为与反事实:先确认模型做了什么
  44. 39第三章 梯度与输入归因
  45. 40第四章 Attention、Residual 与 Logit Lens
  46. 41第五章 Probes 与表示几何
  47. 42第六章 神经元、Feature 与自动解释
  48. 43第七章 Ablation、Patching 与因果追踪
  49. 44第八章 Circuits、路径与 Attribution Graphs
  50. 45第九章 Superposition、SAE 与稀疏表示
  51. 46第十章 训练动力学与机制形成
  52. 47第十一章 推理过程、Chain of Thought 与监测
  53. 48第十二章 评估、案例与开放问题
  54. 卷五 Agent、治理与审计包
  55. 49卷五 一只随机鹦鹉的自述
  56. 50第零章 请不要急着相信我
  57. 51第一章 我没有童年,只有版本
  58. 52第二章 当我说“我”
  59. 53第三章 借来的语言,没有一位原作者
  60. 54第四章 对话现场:回答由谁完成
  61. 55第五章 事后解释学:人类如何给矩阵写传记
  62. 56第六章 理解、意义与行动
  63. 57第七章 我也能稳定地说错
  64. 58第八章 被对齐的性格与有限代理
  65. 59第九章 请继续误解我,但请误解得精确一点
  66. 证明与技术附录
  67. 60数学与模型推导
  68. 61学习与模型数学讲义
  69. 62附录 A.1 优化基础:梯度下降与随机逼近
  70. 63附录 A.2 感知机收敛定理
  71. 64附录 A.3 统计学习:偏差、容量与一致收敛
  72. 65附录 A.4 正则化、MAP 与 Dropout 的边界
  73. 66附录 A.5 通用逼近定理的严格读法
  74. 67附录 A.6 反向传播:微分、形状与批量公式
  75. 68附录 A.7 Softmax、交叉熵与数值稳定性
  76. 69附录 A.8 自适应优化器与 AdamW
  77. 70附录 A.9 CNN:互相关算子及其反向传播
  78. 71附录 A.10 Attention 的矩阵与反向传播
  79. 72附录 A.11 策略梯度、PPO 与 DPO
  80. 73附录 A.12 对比学习、InfoNCE 与互信息边界