变量相关性描述

以下内容从数据科学角度，系统描述“日投放预算（或实际日消耗）与注册转化率（CVR）之间的相关性”的定义、测量方法、建模流程与解释要点。适用于广告投放效果分析与预算管理。

一、指标定义与问题澄清

• 自变量：日投放预算 Budget_t，若平台存在未跑满情况，应优先使用实际日消耗 Spend_t。
• 因变量：注册转化率 CVR_t。需统一口径：
  • 点击基准：CVR_click = Registrations / Clicks（更稳定，弱化曝光质量波动）。
  • 曝光基准：CVR_imp = Registrations / Impressions（可能受CTR波动影响，更易受创意与定向变化影响）。
• 归因口径：明确归因窗口（如1日点击/7日点击），并保证注册计入天与消耗天匹配（可采用日级分布式归因或移位对齐）。
• 分析粒度：建议按“日×活动/广告组×渠道×地区/设备”细粒度聚合，以便后续分层与控制。

二、数据预处理与质量控制

• 缺失与异常处理：
  • 剔除点击极低天（如 Clicks < 30）或使用贝叶斯/收缩估计稳定CVR：CVR_eb = (reg + α) / (click + α + β)。
  • Winsorize极端值（如Spend与CVR的1%/99%分位）以减少异常影响。
• 同步与一致性：
  • 剔除追踪中断日、重大投放切换日（素材大换版/定向大幅变更）或作为哑变量控制。
  • 固定货币、时区，校正促销日/节假日/大盘波动（加入DoW、节假日哑变量）。
• 去混杂：
  • 记录并控制关键协变量：出价策略、CPC/CPM、CTR、受众重定向比例、创意版本、渠道/版位占比。

三、探索性分析（相关性的直接观测）

• 可视化：
  • 散点图：x=log(Spend+1), y=CVR（或logit(CVR)），用点大小表示Clicks/Impr，对高低花费做分箱散点/均值线。
  • LOESS/样条曲线检视非线性与阈值/饱和点。
  • 分层图：按渠道/广告组/受众类型分面，避免辛普森悖论。
• 相关系数：
  • 皮尔逊：corr(log(Spend+1), logit(CVR))，度量线性相关。
  • 斯皮尔曼：corr(rank(Spend), rank(CVR))，对非线性与异常稳健。
  • 加权相关：用Clicks作为权重，减少小样本CVR波动影响。
• 局部相关（偏相关）：
  • 在控制CPC、CTR、渠道、DoW后，计算Spend与CVR的偏相关，剥离已知混杂因素。

四、统计建模（在控制变量下估计相关关系）

• 二项广义线性模型（GLM，推荐）：
  • 设注册数 reg_t ~ Binomial(click_t, p_t)，logit(p_t) = β0 + f(log(Spend_t+1)) + γX_t。
  • X_t 包含：log(CPC)、CTR、出价策略、渠道/版位固定效应、DoW、季节项等。
  • f(·) 用样条（如自然样条ns，3–5自由度）刻画非线性。
  • 拟合时对每条观测加权=click_t。
• 分层/混合效应（GLMM）：
  • 对“活动/广告组/渠道”设随机截距（必要时随机斜率），捕捉不同单元的基线CVR差异与预算敏感度异质性。
• 稳健性检验：
  • 更换CVR口径（click基/imp基）。
  • 以实际花费替代预算上限。
  • 使用相邻日差分Δ（减弱慢变趋势）：Δlogit(CVR) ~ Δlog(Spend)+ΔX。
• 相关性的量化输出：
  • 边际效应曲线：d logit(CVR) / d log(Spend) 随Spend变化的函数。
  • 弹性：ε = d ln(CVR) / d ln(Spend)（在不同花费位点的估计值）。

五、因果与内生性注意

• 内生性：平台常基于转化预估动态分配流量，高预算与高CVR可能互为结果，简单相关无法解释因果。
• 设计改进：
  • 预算随机化实验：在相似单元间随机调整预算；或采用地理-时间分组的准实验（Geo experiment）。
  • 差分中的差分：对只改预算的实验组与不改的对照组对比CVR变化。
  • 工具变量（IV）：利用外生预算冲击（如预算政策变更的硬阈值）作为工具变量。
• 即使无因果识别，偏相关与模型边际效应仍可作为运营监控和假设生成的证据。

六、典型模式与解释框架（不预设方向，仅给出可诊断信号）

• 负相关迹象：
  • 边际受众质量下降（拓量导致低意向人群增加）。
  • 创意/频次疲劳上升而未及时优化。
• 正相关迹象：
  • 学习与稳定投放带来算法更优分配（尤其在小预算阶段）。
  • 预算提高伴随更高出价与更优版位/库存获取。
• 非线性与阈值：
  • 常见“先升后降”或递减收益形态：低预算阶段CVR随花费提升而改善，跨过学习阈值后趋缓或因扩量而回落。
• 若“无显著相关”：
  • 表明预算主要影响量（注册数）而非率（CVR），可将优化重心放在CPC、定向与创意。

七、最小可实现分析流程（示例伪代码）

• 数据字段：date, campaign, spend, budget, clicks, regs, cpc, ctr, channel, placement, dow

Python/StatsModels示意：

• 计算稳定化CVR与变换
• 可视化与相关分析
• 二项GLM + 样条 + 固定效应 + 加权

八、结果报告建议

• 报告三类证据：
  1. 加权斯皮尔曼ρ与皮尔逊r（含置信区间）。
  2. GLM样条的边际效应曲线与关键花费分位点的弹性ε。
  3. 分层结果：不同渠道/广告组的相关性异质性。
• 补充稳健性：更换口径、去除异常日、差分回归的结果一致性。
• 解释应区分“统计相关”与“业务因果”，并明确潜在混杂来源。

九、可执行决策指引

• 若在中高花费区间出现显著负弹性：考虑设定预算上限、提高定向门槛、引入频控与创意轮播。
• 若在低花费区间存在正弹性且未达学习阈值：考虑逐步加预算并监控CVR曲线是否稳定。
• 针对关键渠道开展预算A/B或地理随机化，验证相关性是否具有因果性质。

结论

• “日投放预算（或实际消耗）与注册转化率”的相关性常呈非线性且受多重混杂影响。应在统一口径与严格控制变量下，通过加权相关、二项GLM/GLMM与分层分析进行量化，并辅以实验或准实验以避免内生性误判。最终以边际效应与弹性曲线指导预算的增减与结构优化。

以下为“渠道触点数（一个线索在指定时间窗内经历的跨渠道互动次数）与线索质量评分（Lead Quality Score，LQS）”之间相关性的技术性描述与分析框架。

1. 变量定义与度量

• 渠道触点数：建议以总触点数（含重复触达）与唯一渠道数（不同渠道的种类数）分别度量；定义统一时间窗（如首次接触后30/60/90天），避免时间窗不一致导致偏差。
• 线索质量评分（LQS）：若为连续分数，按连续变量处理；若为分档（如低/中/高）或序数（如1–5），采用序数建模；若包含行为指标（打开、点击）或触点相关特征，需剔除或单独建模以避免循环定义。

2. 数据预处理与质量控制

• 主键统一与去重：基于邮箱/设备ID/CRM ID进行实体解析；消除跨渠道重复计数。
• 缺失与异常：对极端高触点数进行截尾或Winsorize（如顶部1%），对触点数使用log1p变换应对长尾分布。
• 时间对齐：确保触点发生在LQS评估之前；若LQS随时间更新，采用固定评估时点或事件索引（例如MQL时间点）。
• 分层变量准备：意向来源（Inbound/Outbound）、行业/地域、付费与自然、投放强度（Spend）、引流渠道组合（渠道占比）、线索阶段（TOFU/MOFU/BOFU）等作为协变量。

3. 探索性分析

• 分布与关系：绘制触点数与LQS的散点（大样本可用分箱散点或二维密度图），并叠加非参数平滑曲线（LOESS）观察非线性与拐点。
• 分层对比：按意向来源、渠道组合、高低客单价等分层绘制，检验可能的Simpson悖论（整体负相关但分层内正相关或反之）。
• 相关性初步度量：
  • Pearson r（线性、连续；对log1p(触点)更稳健）
  • Spearman ρ（单调关系、抗异常值）
  • Kendall τ（序数LQS适用）

4. 相关性与回归建模

• 偏相关：在控制协变量（意向来源、渠道组合、Spend、行业、地域、时段）后计算偏相关系数，评估净相关性。
• 线性/广义线性模型：
  • 连续LQS：线性回归 LQS ~ β0 + f(触点数) + 控制变量
  • 序数LQS：有序Logit/Probit
  • 二元优质线索（Good/Bad）：Logistic 回归
• 非线性与边际效应：
  • 使用样条（自然样条、GAM）拟合 f(触点数) 以捕捉递减/拐点
  • 拟合分段线性或二次项，估计最优触点区间（边际效应为零的点）
• 交互项：
  • 触点数 × 渠道组合（如付