记录改动前后的基线,核心不是把改动当天所有报表截图保存,而是先固定一组在改动前后都按同一口径取数的指标,再标注改动时间点与其它同期变化。做法是:确定对比指标与时间窗口,在改动前导出原始数据并留存取数条件,改动后按相同条件再导一次,最后把差值归因到改动本身之前,先排除季节、投放、抓取异常等干扰。
基线至少要覆盖三层,缺一层就容易误判。第一层是站内统计,例如页面浏览量、独立访客、站内搜索词;第二层是搜索引擎侧的报告,例如展现量、点击量、平均排名;第三层是第三方估算流量。这三层口径不同:站内统计按访问计数,搜索引擎报告只覆盖该引擎的自然结果,第三方估算多基于抽样与模型。把三者混在一张表里比较,差值可能来自口径差异而非改动效果。
准备时还要固定取数条件,包括:日期范围、时区、设备类型、国家或地区、是否含品牌词、是否含付费流量。把这些条件写进一张“取数说明”表,和数字放在一起。以后任何人复核,都能按同样条件重跑,而不是凭记忆猜当时筛了什么。
最关键的一步是在改动上线前完成导出,并记录改动生效的准确时间。一旦上线后再补,改动前的数据只能靠回溯报表,而回溯报表可能因数据处理延迟或口径调整而与当时不同。
改动后按同一取数条件再导出,初期建议看 7 天与 28 天两个窗口。7 天用于发现抓取或索引层面的异常,28 天用于观察趋势,因为单日波动通常不足以判断方向。
比较时不要只看总量。建议同时看三类对照:
判断结果时区分“可能原因”和“已经定位的原因”。例如改动后自然点击下降,可能原因包括排名下滑、展现量减少、搜索结果样式变化、季节波动;只有在搜索引擎报告确认展现量与排名同步下滑、且同期无投放或季节因素时,才能说与本次改动相关。第三方估算流量与站内统计出现方向不一致时,优先以可复核的原始报告为准,并说明两者口径差异。
把每次改动做成一条记录:改动日期、改动内容、取数条件、改动前窗口数据、改动后窗口数据、同期干扰项、结论与置信程度。结论要写明是“已定位”“可能相关”还是“无法判断”。无法判断也是有效结论,比强行归因更有用。
基线表建议按月或按季度更新一次长期参照值,例如近 90 天的日均展现量与点击量,用于判断当前波动是否超出正常范围。更新时保留旧版本,不要覆盖,否则历史对比会断链。
下一步:挑一个你近期准备改动的页面,先按上面的取数条件导出一份改动前 28 天数据,写下改动内容与上线时间,等改动后再用同一张表对比。第一次不必追求完美,先把取数条件固定下来。