为什么导航测试具有高杠杆效应
电商中的A/B测试最常应用于产品页面、邮件主题行、广告创意和结账流程。尽管导航测试相对于其他场景具有显著的结构优势,却较少被测试:导航变更影响每个页面上的每位访客,而产品页面测试只影响到达该特定产品的访客,邮件测试只影响订阅者。
一项覆盖100%会话、使转化率提升0.2个百分点的导航测试,与覆盖40%会话、提升0.5个百分点的产品页面测试产生相同的收入增长——但导航测试的实施难度远低于后者,并且对会话深度、每次访问页面数和复购率具有更广泛的二阶效应。导航的覆盖优势使其成为可用的资本效率最高的A/B测试场景之一。
「我们今年统计上最显著的测试,既不是产品页面测试,也不是结账测试,而是Tab Bar标签测试。我们在通用Tab Bar插槽中测试了'Shop All'对'All Products'对'Browse'。'Browse'在导航参与度上赢得了18%的提升,收入差距在10天内即可测量。测试只需30分钟配置,无需开发人员。这是我推荐每家店在使用Navi+的第一个月就运行的测试——标签的重要性超出大多数人的想象。」
— 一位Navi+客户,特色食品品牌
导航中应该测试什么
并非所有导航变量都同样可测试或具有高影响力。以下变量在测试时能持续产生可测量的结果:
Tab Bar插槽分配。 哪五个目的地占据Tab Bar是一个战略决策,大多数店铺只做一次从不重新考量。对Tab Bar配置进行A/B测试——用替代方案换掉一个插槽、对比以品类优先与以促销优先的配置、测试搜索插槽与特色品类插槽——可提供直接归因于收入的数据,明确哪种Tab Bar配置最适合该店铺的受众。这是大多数店铺杠杆效应最高的导航变量。
导航标签语言。 "Sale"对"Deals"、"New Arrivals"对"Just In"、"Bestsellers"对"Most Popular"——标签语言以可预测且可测量的方式影响点击率。测试标签是低风险、快速见效的实验,可以揭示访客对不同术语反应的显著差异。获胜标签通常反映访客自身的语言(来自搜索词、客服邮件和评价),而非内部品牌术语。
导航项目顺序与层级。 导航列表中的第一个项目获得不成比例的关注和点击。测试超级菜单面板内的不同排列——哪个品类最先出现、哪个子品类在某列顶部突出显示——可以有效改变某品类内的流量分布,转化效果取决于各品类转化率的高低。
FAB的存在与目的地。 测试是否设置FAB,以及如果设置,它指向哪个目的地,可以获得持久浮动行动按钮是否为该店铺特定受众带来价值的数据。一些店铺发现FAB提升了转化,另一些则认为它造成干扰。测试比假设更经济。
如何正确衡量导航测试结果
导航测试经常被错误解读,因为分析师测量了错误的指标:
| 指标 | 适合导航测试? | 原因 |
|---|---|---|
| 导航点击率 | 是 — 主要参与度信号 | 直接衡量导航效果 |
| 会话转化率 | 是 — 最终收入信号 | 需要足够的样本量(2周以上) |
| 跳出率 | 有用的早期信号 | 导航改进通常能快速降低跳出率 |
| 特定页面转化率 | 单独看具有误导性 | 更好的导航可能向某页面输送更少但更高质量的访客,在没有收入增长的情况下推高CVR |
导航测试最清晰的衡量方式是测试期间每个变体的每会话收入。这同时考虑了转化率和订单金额效应,是衡量商业影响最直接的指标。对于0.2个百分点的效果,在95%置信水平达到统计显著性通常需要每个变体1,000至2,000个会话——对于流量中等的店铺,2至3周内即可实现。
Navi+的配置灵活性使导航A/B测试变得简单:更改导航配置,按所需样本量运行测试,对比该时段内的每会话收入。变更即时生效,回滚同样即时,测试周期的任何阶段均无需开发人员参与。