5D Library › 算法之镜 · English
序 镜子照出了什么
注
本书是怎样写成的。 本书本身就是书中所讨论的那种工作流程的一个例子。作者确定问题、每一章的框架和跨领域假说;一个 AI 模型起草正文、标注框和代码;作者审阅草稿,出版前核对了出处、引文和计算。凡是核对改变了作者原先提出的说法的地方,书中都如实写明。读者应当依据本书的出处、代码和检验来评判它,而不是依据它是怎样写成的。
两个人就同一个主题问同一个语言模型,得到的印象可能截然相反。一个人觉得它肤浅、回避问题;另一个人觉得它是不知疲倦的合作者,能打开新的思路。差别有一部分在模型,它擅长某些事、不擅长另一些事。但很大一部分在问题本身:提问者带来了什么,问题框定得多精确,以及他能够核实什么。
本书围绕这种差别发展出一个想法,并从几个方向检验它。粗略地说,语言模型是一个学得的条件分布:给定一段上下文,它为接下来可能出现的内容分配概率,这些概率由训练文本和后来的微调塑造。因此,它返回什么,在很大程度上取决于它得到的上下文。在这个有限但重要的意义上,它像一面镜子:它反射并重新组合问题把它引向的东西。本书称之为算法之镜,并追问:对于用这些系统来思考的人,这意味着什么。
本书主张什么,不主张什么
镜子是一个类比,可能被推得太远。模型不只是镜子:它有自己的错误,可以流畅地说出错误的事,带着训练数据和微调者的偏差,而且在许多任务上可能比使用者更强。因此本书区分三类陈述。一类是数学,例如条件熵和注意力的定义,或阿什比的必要多样性定律。一类是已发表的研究结果,例如微调对输出多样性的影响、递归训练下的模型崩溃,以及人机团队好坏参半的记录。还有一类是作者关于这些结果对人类使用者意味着什么的假说。后者放在假说框中,每一条都写明什么样的结果会推翻它。
如何阅读标注框
与 5D Library 的其他书一样,不同性质的陈述分开标注。
证据
证据框报告已发表的研究结果,并注明出处。
推导
计算框给出公式和简短的 Python 程序。每段程序都能在标准的 Python 3 环境中按原样运行,不需要任何其他软件,程序下方附有输出。
假说 · 尚未验证
假说框是作者自己的想法,标注为「尚未确立」,并写明什么样的结果会证明它是错的。
原典
原典框引用古典文献,附作者的翻译。
注
注框给出提醒,并解释取舍。
全书结构
- 作为条件分布的机器。 熵、条件熵与互信息,以及模糊的提示和有约束的提示对答案分布的影响。
- 自注意力的几何。 从零实现缩放点积注意力,用一个玩具模型展示停留在一个领域或跨越几个领域的查询,并与《学记》撞钟之喻并读。
- 阿什比必要多样性定律。 为什么唯有多样性才能吸收多样性,以及一个关于使用者能核实多少生成内容的模型。
- 投射、巴纳姆效应与确认偏误。 精度加权的信念更新与偏向同化,以及读者(无论喜爱还是不信任机器)如何在模棱两可的文本中看见自己。
- 回音室与模型崩溃。 用生成数据递归训练、分布尾部的丧失,以及为什么新鲜的真实数据能防止它。
- 半人马智能。 从自由式国际象棋到「锯齿状前沿」,以及一项关于人机团队的元分析实际发现了什么。
- 原典中的镜子。 庄子「至人之用心若镜」、《学记》撞钟、华严宗因陀罗网,以及唯识学对心识的分析。
- 实践与预注册试验。 一份审计提示词或研究任务书信息量的四步核查表,以及一项比较单一领域提示与跨领域结构化提示的盲评随机试验。
本版说明
这是 1.0.0 版,第一个完整版:序与八章,中英双语。欢迎通过 5D Library 网站指正错误、补充作者遗漏的文献。
利益披露
作者创办并经营 Asia Influencer X 与 Yafu Global,在网红营销、数字营销和内容制作中使用 AI 工具,并提倡本书所描述的「人类架构师 + AI 起草 + 人类核查」工作方式,因此与本书主题及第八章试验的结果有利益关系。本书不推销任何 AI 产品或服务。如上所述,本书是在作者指导下借助 AI 模型完成的。书中所有代码与试验方案均公开,供任何人检验。
Fan, Y. (2026). The Algorithmic Mirror: Self-Attention Geometry, Ashby's Requisite Variety and Cognitive Projection in Information Theory and East Asian Philosophy of Mind [算法之镜] (Version 1.0.0). 5D Library. https://doi.org/10.5281/zenodo.23723557 · Licensed under Creative Commons Attribution-NonCommercial-NoDerivatives 4.0 International (CC BY-NC-ND 4.0).