《夜间自治漏斗微创调优、多臂赌博机流量自动倾斜与零人工转化率自举母典》各章定量结论
流行说法认为,网站不再需要人工盯盘:凌晨自动找出漏斗流失最大的环节、生成候选改动,白天用汤普森采样把流量倾斜给最好的版本并自动淘汰差的版本,转化率就会自己往上爬。本书逐一检查这台机器要越过的四道坎,并据文献做了四处蓝图修正。第一,赌博机为少付后悔而设计,不为得出可信效应量而设计:自适应数据的朴素均值偏低 7.0%,须用逐批记录的分配概率做逆概率加权;每晚看一眼、差了就删的朴素规则会误删 0.241 的同等好版本,改用最小曝光、后验胜率与时间均匀置信序列三重规则后降到 0.001。第二,转化率不平稳,已知周期要分组,按日型分组的后验把流向当天较好版本的份额提到 0.889。第三,目标是净利而非转化率:以付款率为奖励的汤普森采样把 0.623 的流量送给打折版本,以每访客净贡献为奖励时打折版本只得 0.064。第四,「零人工」改写为每周人工复核上界 99 分钟与永远须人工签字的例外清单。
DOI 待发布 · 专著页正式发布后上线(本站暂无专著页) · 5DL-B-405 · English version
- 第 1 章 · 漏斗体检:六步 Beta 后验、夜间改动优先级与合规候选池
单晚的 B 夜换了一组小样本:进来 1,650 人,往后依次是 1,010、445、190、112、77 人。这时试读的 P(top) 只有 0.714,首屏占 0.286。试读的优先级区间从 3,511 到 5,140,首屏从 3,270 到 4,968,中位数 4,305 对 4,067,确实分不开。规则给出 HOLD:今晚不改,明晚再合并一天的数据重算。 - 第 2 章 · 汤普森采样与后悔:从 1933 年的两份小样本到对照均分
第二章比较平均分、先试后定、UCB1 与汤普森采样; - 第 3 章 · 奖励函数:每访客净贡献,而不是转化率
以付款率为奖励时,实现的付款率是 0.0550,每访客净贡献是 1.7140;流量份额里打折版拿走 0.623,信任版只有 0.124。以净贡献为奖励时,付款率是 0.0505,略低;每访客净贡献却是 1.9453,高出一截;信任版拿到 0.615 的流量,打折版只剩 0.064。 - 第 4 章 · 流量不平稳:星期效应、折扣遗忘与滑动窗口
每日折扣 0.9 在第一周给 B 0.345,第二周升到 0.707,第三、四周稳定在 0.843 与 0.847,总后悔 105.5 单。折扣 0.7 第一周反应更快,给到 0.544,但之后只在 0.754、0.763、0.730 附近徘徊,总后悔 129.7 单。忘得太快,平时也要多付学费。七天窗口表现最好:第一周 0.568,第三周 0.901,总后悔 87.0 单。 - 第 5 章 · 淘汰规则:最小曝光、后验胜率与时间均匀置信序列
先看检验水平 0.05 这四行。误删率在 0.003 到 0.006 之间,好版本遭删率始终是 0.000。差版本第 28 晚遭删比例在 0.139 到 0.143 之间,第 56 晚升到 0.532 至 0.577。最小曝光量从 0 加到 8,000,几乎不影响结果。 - 第 6 章 · 数据可信度:自适应数据的负偏、样本比例失衡与护栏回滚
第六章讲自适应数据负偏、样本比例失衡(日志故障可凭空造出 3.1% 的提升)与护栏回滚; - 第 7 章 · 东西方原典考辨:《系辞下》「穷则变」、《孙子·虚实》与皮尔士和贾斯特罗的随机分配
第七章考辨《周易·系辞下》「穷则变,变则通,通则久」、《孙子·虚实》与皮尔士和贾斯特罗 1885 年的随机分配,并给出四件套蒸馏规格; - 第 8 章 · 夜间漏斗台账:实战工具与检查器规格、预注册检验与推翻条件
第八章给出夜间漏斗台账、试算工具、按四件套分组的检查器与预注册检验:基准先验下半年累计净贡献提升中位数约 +0.082,仍有 0.093 的概率一无所获。书中参数为示意;全部计算由书中 23 段程序生成;本书是非个人化的经营分析,不构成经营、法律或财务建议,不宣称任何转化率提升的保证。
模型示意算例,非实时报价