90%以上的人做的根本不是真正的落地页A/B测试,只是改了个页面换着跑而已。最后得到的结论全是错的,反而把原本转化好的页面给换掉了,成本直接涨30%以上都是常事。
落地页A/B测试的核心前提是单一变量原则,这个原则只要破了,整个测试就没有任何参考价值。很多人同时改了标题、配图、表单位置三个地方,最后发现版本B好,根本不知道到底是哪个因素起的作用,下次再改还是瞎蒙。甚至有人把整个页面全部推翻重做,然后说这是A/B测试,这其实就是重新做了个页面,根本没法归因,就算B比A好,也不知道好在哪里,下次还是没法复制成功经验。
绝对不能用50:50的流量分配,尤其是新账户或者日消耗低于5000的账户,50:50会直接把原本稳定的转化冲垮。正确的做法是先给新版本10%-20%的流量,跑24小时看基础数据,没有明显异常再逐步提到30%,最多不要超过50%,直到测试结束。很多人上来就对半分,结果新版本第一天转化就崩了,整个账户的成本直接拉上去,好几天都缓不过来。
落地页转化影响权重从高到低是:首屏核心卖点>信任背书模块>表单/转化按钮>页面配色>其他细节。很多人上来就改按钮颜色,改了半个月,转化波动不到1%,完全是浪费时间和预算。首屏的核心卖点改对了,转化直接能涨20%-50%,这个是最值得先测的。比如同样是做财税服务的,首屏写“专业记账报税”和“0元注册公司 3天下证”,转化差一倍都很正常。等首屏和信任背书都测完了,再去测按钮和表单,最后再考虑配色这些细枝末节的东西。
绝对不能跑一天就下结论,也不能只看转化量不看样本量。很多人跑了一天,发现版本B有5个转化,版本A只有2个,就立刻全量切到B,结果第二天版本B一个转化都没有,成本直接翻三倍。正确的样本量要求是,每个版本至少要有30个以上的有效转化,或者至少跑满7天,覆盖完整的一周流量周期。因为工作日和周末的流量质量、转化意愿完全不一样,周一和周五的转化差能到40%以上,只跑一两天的数据根本没有统计意义。
测试期间绝对不能调整账户的其他任何设置,包括出价、定向、创意、预算,任何一个变量的改变都会直接污染测试数据。很多人测试到一半,觉得出价高了,调了5毛钱,或者加了几个关键词,最后两个版本的数据差根本不知道是页面的问题还是账户设置的问题。测试期间账户要保持绝对稳定,除了两个测试版本的流量分配,其他什么都不能动。
不能只看转化率,还要看转化成本、咨询率、留电质量。很多时候新版本的转化率更高,但是转化成本也更高,留电质量更差,其实还不如老版本。比如版本A转化率3%,转化成本80块,留电有效率70%;版本B转化率5%,转化成本120块,留电有效率40%,明显版本A的实际效果更好。很多人只看转化率这个单一指标,就切到了B,结果最后算总账,赚的钱反而少了。还要注意异常数据的剔除,比如某个版本突然来了一个恶意点击,或者一个无效转化,会把整个数据带偏,测试结束后要把这些异常数据去掉再做对比。
测试结束后,不要立刻把差的版本删掉,先保留7天,观察一下有没有长尾转化。有些落地页的转化周期比较长,比如教育、装修这些行业,用户可能当天看了,过了三四天才留资。如果测试结果差异在5%以内,其实没有统计学意义,优先保留老版本,因为老版本已经跑了很长时间,数据更稳定,新版本的小优势可能只是随机波动。只有当两个版本的转化差异超过10%,并且样本量足够、测试时间足够的时候,才能全量切换到新版本。
落地页加载速度每慢1秒,转化率会下降15%-20%。很多人改了页面之后,加了很多高清图片和视频,加载速度从1秒变成了3秒,结果测试了半天,发现新版本转化差,根本不是内容的问题,是加载太慢了,用户打开页面转半天,直接就关掉走了。改完页面一定要先测加载速度,移动端加载速度最好控制在2秒以内,超过3秒就会流失一半以上的用户。
PC端和移动端的落地页要分开测,不能用同一个页面同时跑PC和移动端。两者的用户行为习惯完全不一样,PC端用户屏幕大,愿意看更多的内容,落地页可以做的长一点,信息更详细一点;移动端用户屏幕小,耐心差,落地页要短平快,核心信息放在首屏,转化按钮要大,方便点击。同一个页面在PC端转化好,在移动端可能转化很差,反过来也一样。
不同关键词的落地页也要分开测。品牌词和通用词的用户需求完全不一样,品牌词的用户已经有一定的认知了,落地页应该侧重信任背书和转化引导;通用词的用户还在了解阶段,落地页应该侧重痛点和卖点。如果用同一个落地页跑所有关键词,肯定会有一部分关键词的转化很差。
日消耗很低的账户也能做A/B测试,只是周期会更长。比如日消耗只有1000块,每天只有3-5个转化,那就要跑10天以上,才能凑够30个转化的样本量。不要着急,慢慢跑,总比跑两天就下错误结论强。最多同时测3个版本,再多的话每个版本的流量太少,数据误差会非常大,而且会严重影响整体账户的转化。
测试期间转化成本上涨是正常的,只要上涨幅度在20%以内,继续跑就行,样本量够了之后数据会回归正常。如果上涨超过50%,并且持续24小时以上,就要立刻暂停新版本,检查是不是页面有问题,比如打不开、表单提交不了,或者流量分配有问题。
很多代运营公司喜欢给客户做A/B测试,其实就是改个按钮颜色,改个标题,然后跑两天,就说测试成功了,显得自己很专业,其实根本没有任何实际效果。还有很多人迷信所谓的“高转化模板”,直接拿别人的模板过来用,结果转化还不如自己原来的页面。不同的行业、不同的产品、不同的目标人群,适合的落地页完全不一样,没有通用的高转化模板。真正有效的落地页,都是通过一次次的A/B测试,一点点打磨出来的,没有一蹴而就的事情。
所有的A/B测试结果都应该记录下来,记录每个变量对转化的影响,比如红色按钮比蓝色按钮转化高8%,首屏放客户案例比放公司介绍转化高15%。时间长了,就能形成自己的高转化落地页标准,下次做页面的时候直接用这些验证过的结论,不用每次都从头开始瞎试。很多人做了几十次A/B测试,但是从来没有记录过,下次做页面还是和第一次一样,这才是最大的浪费。