{"type":"rich","version":"1.0","provider_name":"Transistor","provider_url":"https://transistor.fm","author_name":"课代表立正","title":"立正说 174｜AB实验，有哪些重要却不为人知的知识？｜课代表数据大师课5","html":"<iframe width=\"100%\" height=\"180\" frameborder=\"no\" scrolling=\"no\" seamless src=\"https://share.transistor.fm/e/8f9af94f\"></iframe>","width":"100%","height":180,"duration":1739,"description":"A/B实验的价值不是替好想法背书，而是尽早发现判断与现实之间的偏差。本期结合亚马逊、Meta、腾讯与 Statsig 的经验，从功能开关、实验文化到 CUPED 和序贯检验，拆解工业界如何把实验变成可规模化的决策系统。\n适合数据科学家、产品经理和实验平台建设者，帮助你判断团队该先补可信指标与系统架构，还是引入更复杂的统计方法。\n这期你会听到\n• 为什么 A/B实验最重要的产出是“惊喜”，而不是验证既有信念？\n• 功能开关与实验系统结合后，如何降低每次实验的额外成本？\n• Statsig 式规模化实验为什么依赖可信数据和集中定义的指标？\n• CUPED 如何通过降低方差缩短实验时间？\n• 序贯检验如何约束数据偷看，减少错误上线决策？\n章节\n\n00:00:54 — A/B实验究竟解决什么问题\n\n00:02:07 — 实验价值来自意料之外的结果\n\n00:04:21 — 功能开关如何实现全面实验覆盖\n\n00:06:24 — 实验文化如何赋予工程师自主权\n\n00:09:24 — 可规模化实验体系的设计原则\n\n00:11:08 — 可信数据与统一指标为何是基石\n\n00:13:22 — 复杂方法可能拖慢真实决策\n\n00:18:14 — 工业实践如何修正教科书式假设检验\n\n00:19:02 — CUPED：用方差缩减加快实验\n\n00:20:22 — 贝叶斯与频率学派的决策差异\n\n00:23:36 — 序贯检验如何约束数据偷看\n\n00:28:33 — 选择前沿方法前先确认问题\n相关内容\n\n\n我是孙煜征，大家叫我立正，康奈尔经济学博士、《真本事》作者、超线性学院创始人。在这里，和我一起把AI、工作与人生中的重要问题想明白。\n了解我、阅读文章与查找往期节目\nhttps://www.lizheng.ai/\n问问立正｜把问题想明白\n听完还有问题，或想把一个观点用到自己的处境里？试试我做的「问问立正」：AI会从我的公开文章、视频和《真本事》中寻找相关内容，整理回答，并附上出处。每天可免费提问3次。\nhttps://ask.lizheng.ai/\n不怕AI天天变，就来超线性学院\n学点真本事，做点真东西。超线性学院是我创办的免费AI社区，两万多人在这里分享真实项目，你也可以带着问题来讨论。App Store搜「超线性学院」也能加入。\n把正在设计的实验方案和指标口径带来，讨论偏差风险与上线决策。\nhttps://www.superlinear.academy/\nAI Builders｜系统学懂AI，真正用起来\n想系统学懂AI、用它做好重要工作，把想法做成作品？了解我和鸭哥一起做的AI Builders课程。\nhttps://ai-builders.com/","thumbnail_url":"https://img.transistorcdn.com/SrdgszKfQdMzHkFcqyor7qCKHRdyeQYSqgfLgUTg7CI/rs:fill:0:0:1/w:400/h:400/q:60/mb:500000/aHR0cHM6Ly9pbWct/dXBsb2FkLXByb2R1/Y3Rpb24udHJhbnNp/c3Rvci5mbS9kZTM0/ZmVjMjA2NzRkZGM5/YjI4ZGUxYjdkMTFj/NDM4YS5qcGc.webp","thumbnail_width":300,"thumbnail_height":300}