如何评估某活动带来的大盘增量

双11期间上线某功能/活动，用户开通后参与能给大盘带来交易增量吗？,业务第一反应大概率是说“会！”。那么，某活动/功能上线与大盘交易提升之间确实存在因果关系吗？如果真实存在，具体增量是多少？,为了判断之间的具体联系，可以从5个步骤、2种常见判断方法进行分析。,从前文可知，双11期间业务上线了某活动/功能。,给大盘带来了更多交易用户/订单/gmv。,,如果双11期间没有上线这个活动，大盘交易量会不会减少？,很明显，如果将大促期间参与了活动和不参与活动的人分成两组，因为参与活动的用户更活跃更成熟，而不参与活动的用户质量相对较差，这种明显选择性偏差的存在，导致直接对比是不公平的，不存在可比性。必须把两组数据调整到可以比较的状态，分组用户上要真正体现出“随机”性。常见的有2种判断方法，包括随机对照试验、双重查分法。可根据实际背景条件选择使用。,在没有随机实验的情况下去模拟一种随机分配实验。锁定目标用户，模拟实验分组，然后跟踪不同用户组在受活动干预前后的大盘交易表现。,前提假设,图示,,,将全部的样本数据分为两大组，分组逻辑是根据是否受到营销活动干预。,确定观测的目标指标，大盘动支率、户均大盘gmv。,随机圈选平销期（10.10为例）用户，观察不同分组在10.10-11.11期间的户均gmv变化趋势是否一致。,,验证完满足假设前提后进行两次差分，第一次差分得出干预前后总差异，第二次差分得到干预净效应。,（1）大盘收益，同一时间段多个活动共同干预时，无法剥离单个活动效益大小。如，11.11当天，针对新客既做了活动1，又做了活动2，则无法分别评估活动1、活动2的效果。,（2）无法涵盖“所有”增量。如平销期与大促期之间新增用户、中途开通的用户表现。