用AB测试减少“争议”、带来增长

百姓网Wap平台车类目的信息详情页中用户联系发帖人的方式只有打电话,Wap产品负责人叶永津认为应该添加发短信的联系方式,就找到负责车类目的产品经理一起聊这个想法,没想到车类目产品经理很反对这样做,因为他经常跑车市见车商,也与一些车商成为了朋友,基本见到的是用打电话的方式与用户进行联系,也基本没有见到车商发短信,所以认为加入短信的做法不符合车商的使用习惯,而叶永津认为当用户在一个很安静的场所或者手机信号不稳定的场所,比如地铁上、图书馆可能会选择发短信,还有当用户不明确自己对这部车有明确的购买意愿,只是想确定一下发帖人是否是个人的时候可能会选择发短信方式。

二人各有各的道理,僵持不下,之后二人决定做AB测试来用数据证明到底哪一种好,在设计好效果图之后就开发上线,他们将用户根据UDID分为二组,用户会随机进入有短信和无短信的页面。

左图:不带短信icon   右图:带有短信icon

zengzhang截图

经过数日的AB测试得出的数据结果显示:给Wap平台车类目联系次数带来了15%左右的增幅,而对于原本的电话拨出量只有微小的下降影响几乎可以忽略不计。

之后与一些Wap用户见面访谈,了解到当用户只想了解基本信息类似于只是想询问一下发帖人是不是个人车主,车子有没有卖出去是会选择发短信的,有些话费套餐是包含免费短信的,发短信会比较省钱;打电话是一种比较“重”的联系方式,当有明确的购买需求或者有大量问题的时候会选择打电话。

图左:Wap运营   图中:Wap用户 图右:Wap产品(我)

屏幕快照 2016-07-17 下午12.42.46

 

数据表现好加上从用户访谈中得出相同的结论,就果断在车类目里面放全量上线了。上线之后发帖者得到更多用户发来的信息,更相信百姓网的效果,也更加愿意付费,营收部门知晓之后很看好这个改变,强烈建议推广至全类目。

叶永津紧接着就将短信扩展至全类目,AB测试数据结果显示:Wap平台中各个类目的联系次数有12.2%~32.2%范围内不同程度的提升,同时对于电话量影响很小。

现在如果你访问百姓网Wap平台的详情页的话,会在大多数的类目看到短信的icon的。

AB测试的方法在百姓网已经被广泛使用,在拿不定主义的时候不妨使用AB测试,可以在短短几天的时间里面从数据分析中得出结论,避免了不必要的“争议”、带来增长。