短信A/B测试的思路

相信大家都接触过、做过或者听过接触渠道尴尬文案的A/BTest。所谓文案A/BTest，就是选择一两种用户作为样本，通过给他们放不同的文案，找出哪种文案对官方想要引导的行为更有帮助，然后推广给更大样本的用户群。所以，你看，这是一种测试方法。很多年前，当我们讨论一个活动推出时，如果没有人参与我们能做的事情，其中一个方法就是调整活动广告地图，然后重新投放，试试排水效果是否会更好。其实这种方法是A/BTest的延续，也可以从另一个角度来看，这种方法是A/BTest不流行时原理相同的粗糙原型。但是，如果将这种方法提前预热到活动开始前，并将不同内容的预热文案推送到不同渠道的同类用户，甚至预热页面，则可以在正式活动中更准确地设计Banner。短信、EDM等渠道也是如此。然而，由于短信和EDM渠道在早期的电子商务中有点糟糕——几乎所有渠道的电子商务测试的效果都是用户想要折扣。因此，所有电子商务理念也一致推荐折扣信息和活动信息。用户疲劳后，很难再次使用这些渠道。但事实上，这仍然是由于对用户的广泛理解。令人尴尬的是，即使在智能手机的推送上，也很少有应用程序真正做到完整和精细。如果你不相信，看看这张照片：亮哥在手机上留下了一些关于电子商务和购物指南的推送。你可以看看。除了第一张图片，红线框的部分肯定是天猫根据之前的购买习惯推送给用户的，其他的似乎大多与用户的习惯无关，但它与企业的需求直接相关。说实话，连天猫的消费习惯Push都不想打开——因为湿巾每次都会买很多，而且消耗不那么快，其他Push就更不会打开了。说实话，连天猫的消费习惯Push都不想打开——因为湿巾每次都会买很多，而且消费也没那么快，其他Push就更不会打开了。短信神马的逻辑是一样的，用户会拒绝看吗？精细化是一种方法论，所以一个非常简单的逻辑是:如何知道他在乎什么，就是我们想通过A/BTest得到什么。这里有一些方法，但要尝试：建立假设分类设计分批推送效果回收实验证形成结论这六个步骤是我接下来想说的方法，以下是一个接一个的：1、首先，为你的用户建立一个假设。这个假设不是每个人都来你这里买东西的原因，而是来你这里买东西的用户最关心的。有些关键词可以提炼出来。这些关键词需要匹配一些近义词或结果相似但表达相反的词。例如，节省时间，提高效率；努力工作；等等，这一步是有一个一般的认知：我的测试主要测试用户对哪些单词更敏感，更敏感的单词应该切断用户更需要的点，以促进设计。2、当您选择不同的假设敏感短语时，分类设计肯定会形成不同的肖像人群，这些肖像用户需要围绕敏感短语进行相应的设计。比如我曾经开过玩笑，Airbnb的Usereferal文案:「GiveyourFriend$15 」与「 InviteaFriend，Get$15」这两个文案，放在欧洲和美国的测试结果可能是第一个好，但是放在亚洲，可能是第二个好。之所以开这个玩笑，是因为在我的假设中，亚洲人或中国人更喜欢强调保护自己的利益，而欧美人更喜欢分享自己的利益。但这只是开玩笑的假设，其实没有证据。只是为了强调人群的差异应该体现在文案设计上。3、原则上，当你有肖像时，你可以筛选相应的用户，但因为我们必须进行测试，我们可能只限制一定比例样本的用户收到副本。此时，文案的推送必须分批进行。例如，共有1万名用户。我分为两类5000人。然后试着推1000人，看看哪种文案看起来不错，然后根据效果进行后续推送。4、无论什么渠道的效果回收，都必须有能够验证效果的数据，如：链接点击次数、页面到达人数等。因此，在文案推送之前，一定要有相关的数据埋点，文案推送之后，就要开始关注相关的数据变化。区分不同文案对用户的差异。5、这里的实测验证既可以称为实测，也可以称为后续。前两组5000人，我们只推了1000人，剩下的4000人也要推了。这时，我们将开始尝试做一件事:合并文案。也就是说，把同样的文案推给最后剩下的人。此时要考虑的是，剩下的总共有8000人，应该分几次推，每次推又要验证什么。这里有很多方法，比如先更换文案，然后推1000人，然后根据效果合并；直接合并，推动剩余8000人；如果没有合并，他们将按照之前的方法推动；……6、形成结论，无论你是否在第五步合并了文案，你都应该在最终推送完成后形成结论，即用户更喜欢哪种或哪种类型的文案，以及在推送类似的活动、内容和商品时应该使用哪种类型的文案。就这么简单。