5D Library › 科学方法论、可证伪性与可重复性危机的数理统计 · English
序:一个说法,凭什么相信
注
请先读这一段。 本书讨论科学方法论与统计学,书中的程序、模型与核查表都是为了说明论证。本书不是医疗、心理、投资或法律建议。 第八章的核查表可以帮助你判断一篇报道、一份商业报告或一则保健品广告的证据有多强,但它不能代替医生、药师或其他专业人员的意见;不要仅凭核查表的结果开始、停止或更改任何治疗或用药。书中出现的「商业报告」「保健品广告」「论文」都是虚构的示例,不指向任何真实的产品、公司或作者。
一种保健品宣称「经临床研究证实」;一家机构的案例报告说某种方法让转化率提高了三倍;一篇论文在摘要里写着 。三种说法的语气同样笃定,背后的证据却可能天差地别。这本书问的是一个朴素的问题:一个说法,凭什么相信?
回答这个问题需要两套工具:科学哲学告诉我们什么样的命题算是科学命题,为什么「无论发生什么都能解释」的理论什么也没有说;统计学告诉我们一个「显著」的结果有多大概率为真,分析中的自由选择与选择性发表会把假阳性率与效应量抬高多少,以及为什么事先锁定分析方案能让这些问题大部分消失。
本书的内容
- 可证伪性与研究纲领: 波普尔的划界标准与「经验内容」、巴-希勒尔与卡尔纳普的语义信息量、杜恒—蒯因论题与拉卡托斯的研究纲领。
- 伊奥尼迪斯的阳性预测值: 逐项核对公式,并讨论古德曼与格林兰的批评和贾格尔与利克的经验估计。
- p 值操纵与分岔花园: 用蒙特卡洛程序重做西蒙斯、纳尔逊与西蒙森 2011 年的模拟。
- 发表偏倚与赢家诅咒: 抽屉问题、漏斗图检验,以及低功效研究中 M 型与 S 型错误。
- 大规模重复检验: 三个重复项目说了什么、没说什么,以及围绕重复本身的争议。
- 元科学的解药: 预注册、注册报告与等效性检验,并检验本系列判定规则的统计性质。
第七章把这些现代讨论与《汉书》的「实事求是」、《中庸》的「无征不信」、《论语》的「文献不足」,以及明清考据学者的证据观并读,并说明二者的界限。第八章给出一份「四步防忽悠元科学核查表」,以及一项预注册随机对照试验方案。
本书与 5D Library 第 26 本《概率判断、布莱尔分数校准与群体智慧的统计理论》互为补充:那本书讨论基础率、贝叶斯更新与信号检测论,本书只在需要时简要回顾并注明出处,不重复它的程序。
本书也是 5D Library 的方法论总纲:它解释为什么这套书的每一本都把已发表的证据、作者的推导与作者的假说分开标注,为什么每一本的第八章都写一项预注册试验。所以本书也要把同样的标准用在这套书自己身上(第六章、第八章),包括它的局限。
核对后修正的说法
作者给出的框架中,有几处经核对需要修正或限定,各章遇到时都如实说明,并汇总在随书发布的《编辑说明》中:
- 伊奥尼迪斯公式与示例数字。 框架中的阳性预测值写法与伊奥尼迪斯 2005 年原文的分母逐项相等(程序在近一万二千组参数上验证,差异只有舍入误差)。但功效 0.20、事前比值 、偏倚 时,阳性预测值是 13.0%,不是约 12.8%;原文表 4 中的「0.12」对应的是 。
- 「六成假阳性」。 西蒙斯等人表 1 的各条件数字(9.5%、7.7%、11.7%、12.6%、14.4%、30.9%、60.7%)经核对无误。本书的重做在性别按效应编码时得到 57.9%,按 0/1 编码时得到 61.2%,后者与原文相差在蒙特卡洛误差之内;原文没有写明性别的编码方式。
- 赢家诅咒的幅度。 真实效应 、功效约 20% 时,显著结果报告的效应量平均约为 0.45(夸大约 2.2 倍),不是约 0.65(3 倍以上);方向弄反的概率约 0.5%。
- 重复检验的分母。 开放科学协作组 2015 年的「36%」是 97 项原本显著的研究中有 35 项在重复中显著,不是 100 项中的 36 项。卡默勒等人 2016 年的经济学重复发表在《科学》(18 项中 11 项,61%),2018 年的 21 项《自然》《科学》社会科学实验发表在《自然·人类行为》(13 项,62%)。
- 「四档」判定规则。 本系列第八章的判定规则实际上有五种结论(达到最小关注效应的获益、获益但幅度未确定、有害、没有值得行动的差异、无法判断),另加「不可解释」等前置条件。第六章的程序还显示,「至少达到最小关注效应」这一最强结论,在真实效应恰好等于最小关注效应时只有约 2.5% 的机会出现;「90% 把握度」指的是得到某种「获益」结论的概率。
- 信息论的出处。 「命题禁止的可能世界越多,信息量越大」属于巴-希勒尔与卡尔纳普的语义信息论,所用的是逻辑概率;香农的信息论处理的是通信中信号的统计性质,香农明确说通信的语义方面与工程问题无关。二者形式相似(都取对数),但不是同一个理论。
- 原典篇名与出处。 「实事求是」出自《汉书》卷五十三《景十三王传》中河间献王刘德的传文,不是一篇单独的「河间献王传」;颜师古注为「务得事实,每求真是也」。「孤证不为定说」是梁启超在《清代学术概论》中对乾嘉学风的概括,不是哪一位清儒的原话;戴震《与姚孝廉姬传书》中有「据于孤证以信其通」一语,是与它最接近的清人原文。胡适「大胆的假设,小心的求证」见于《清代学者的治学方法》;「有一分证据说一分话」是流传很广的概括,本书未能在胡适著作中找到这一字面形式,按转述处理。
如何阅读标注框
与 5D Library 的其他书一样,不同类型的陈述分开标注。本书第六章会解释,这样分开本身就是一种方法论上的选择。
证据
证据框报告已发表的研究结果,并注明出处。
推导
推导框给出简短的 Python 程序,程序前的正文说明它计算什么。每段程序都可以在标准 Python 3 环境中原样运行,只用标准库,固定了随机种子,程序下方附有实际运行结果。书中的「研究」「文献」「受试者」与数据都是程序合成的,不是任何真实的研究。
假说 · 尚未验证
假说框是作者的想法,标明「尚未确立」,并写明什么样的结果能证明它是错的。
原典
原典框引用古代文献,并附作者的白话解释。
注
注框给出提醒并解释取舍。
本版说明
这是 1.0.0 版,第一个完整版:序与八章,中英双语。书中共有 14 段 Python 程序与 4 张矢量图。正文、标注框与代码由 AI 写作工具依据作者提供的书名、框架与要点起草,作者负责审阅、修改并核对出处。按照本书自己的标准,读者应当知道:AI 起草的文字可能在文献细节上出错;作者与本书主题有商业利益关系(见下);书中的试验目前只是方案。欢迎通过 5D Library 网站指正错误、补充作者遗漏的文献。
利益披露
作者以 5D Library 的著作(包括本书)作为其社群课程、升维牌卡(5D Ascension Cards,Dimensional Shift Card Decks)与 Yafu AI 知识库的方法论基础,因此与本书主题有商业利益关系。本书不推销任何课程、牌卡或服务;第八章的试验设计为由独立于作者企业的研究人员实施和分析,不从作者的社群、学员或客户中招募;书中所有代码与研究方案均公开,供任何人检验。
Fan, Y. (2026). Scientific Methodology, Falsifiability and the Mathematical Statistics of the Replication Crisis: From Popper's Demarcation and p-Hacking to Ioannidis's Theorem and Pre-Registration, Read Beside Classical Chinese Evidential Scholarship [科学方法论、可证伪性与可重复性危机的数理统计] (Version 1.0.0). 5D Library. https://doi.org/10.5281/zenodo.23782104 · Licensed under Creative Commons Attribution-NonCommercial-NoDerivatives 4.0 International (CC BY-NC-ND 4.0).