A/B 测试中 12 个常见的误区(下)( 三 )
如果你决定使用重叠流量运行 A / B 测试,请记住流量应始终均匀分配。如果测试产品页面 A 与 B,和结帐页面 C 与 D,请确保来自 B 的流量在 C 和 D 之间的分配是对半的,而不是 2:3 或其他。
忽略细微的成果
你的新版本比对照组高出了 4%,但总有人会说“这个比例太小了!我甚至都不愿意实施它。”
但问题是,如果你的网站做的非常好,那么你将无法获得那样大规模的转化提升,而事实上,大规模的转化提升也非常罕见。除非你的网站很垃圾,测试之后很容易获得 50% 以上的转化提升,但即使这样,这种场景也不会持续不断地出现。
大多数测试带来的都是小幅增长,比如 1%、5%、8%等。有时,1% 的提升可能意味着数百万的收入,但重点是:你需要从 12 个月的时间跨度来看待它。
一项测试就只是一项测试,你必须要做很多很多测试。比如你每月将转化率提高 5%,那么 12 个月内的转化率将提高 80%,这是复利,是数学的工作原理。而 80% 将是一个极其壮观的数字。
推荐阅读
- ez|《哈利波特:魔法觉醒》测试服关于《增强剂》的不完全测试说明书
- 魔兽世界|魔兽世界TBC:猎人宠物挑选指南,引怪是其次,这个误区不能犯
- 孙尚香|孙尚香异界灵契皮肤上线,而玩好他需要解决5大常见操作问题
- |哈利波特:策划和玩家唱反调?测试服三大调整,卡姐终于被削弱
- vg战队|我的世界:没能“活着”走出测试版本的设定,一块肉占一格空间!
- 网游|《暗区突围》二测试玩:操作手感提升!玩法硬核但趣味不足
- 仙剑奇侠传七|《仙剑奇侠传七》硬件需求测试:RTX 3060即可拥抱夺目光追
- 永劫无间|《永劫无间》新英雄\岳山\在测试服推出,游戏性能进一步提升
- 龙龟|灵药龙龟打野节奏带动全场:这是我测试服胜率最高的打野
- 游戏主播|《暗区突围》“冲锋测试”今日启动!大魔王赛事邀你突围