01 Introduction
- LinkedIn 营销解决方案帮助广告商通过赞助帖子广告等方式接触目标受众。
- 领英拥有强大的实验文化和先进的实验基础设施,日常进行大量实验,涵盖需求、匹配、供应等多个环节。
- 在线平台中的实验通常观察到整体收入提升较小。
02 实验性挑战和误导性结果
- A/B 测试结果可能存在误导,市场实验中常见蚕食偏差。
- 蚕食偏差指标:假设100%预算广告活动,实际收入影响不超过0%,但实验中测量的收入影响为100%,偏差可达230%。
- 为解决蚕食偏差,领英采用迭代实验,每个坡道进行发射前增加分配的实验,确保治疗效果估计准确。
03 Marketplaces 中的典型实验设计
- 实验设计原则:治疗效果估计需准确,低最小可检测效应(MDE),避免实验者进行数据分析以确定结果。
- 预算分割实验设计:
- 温和假设:有限干扰,系统稳定。
- 优势:无偏见、高功率、30倍实验速度。
- 领英已将预算分割实验扩展至招聘市场等其他市场,并针对市场中的独特挑战进行创新实验设计和分析。