多年来,我一直在对邮件活动的响应进行 t 检验。最近我受到挑战,我们实际上应该对利润而不是响应进行测试。
所以,让我把它放在上下文中。如果您有两组客户,每组样本大小为 10,000,您将发送两个不同的报价。一个人可以免费送货(a 组),一个人下次购买可享受 25% 的折扣(b 组)。并假设两组反应如下。
- a 组 - 10,000 名邮寄的客户中有 10% 回复了
- b 组 - 10,000 名邮寄客户中有 15% 回复了
我将对响应率(10% 和 15%)进行 t 检验,这是正确的。
我被要求对盈利能力进行测试,我不愿意这样做。再次将其置于上下文中:
- a 组 - 每位邮寄客户产生 1 英镑的利润(即 10,000 英镑)
- b 组 - 每位邮寄客户产生的利润为 1.50 英镑(即 15,000 英镑)
我被要求对 1 英镑和 1.50 英镑的利润进行测试,但我担心有许多可变因素会影响最终的利润数字,例如利润、客户收到的邮寄成本等,它们是设置组时没有真正考虑。
我是否正确地认为对于这种特殊情况,利润测试不是正确的做法,而是像我们目前所做的那样测试响应,然后在做出最终商业决策时考虑所有其他可变成本?