实验指标报表

离线指标和实时指标分别对应不同的报表，您可以在实验平台 > 效果报表页面，通过实验组查看各个实验的指标值以及与base实验的差异，或通过设置维度来区分实验效果。

离线报表

在离线报表页签中，配置推荐场景、实验组、分析时间窗口、待分析实验、待分析流量、基准实验设置和分析指标组后，即可查看离线指标的趋势分析图表。图表以折线图形式展示各实验组与基准实验在所选指标（如 PV）上随时间的变化趋势，便于对比不同实验组的效果差异。

假设检验报告

在假设检验报告页签中，选择推荐场景、实验组、统计日期、指标、显著性水平和检验方法后点击查询，即可查看假设检验结果。结果表格展示各实验组的进组人数、分子/分母值、指标值、绝对差异、t统计值、p值和置信区间，帮助您判断实验组之间的指标差异是否具有统计学显著性。

结论：p 值 = 0.2877 > 显著性水平 0.05，置信区间跨越 0，因此 group_hot 与 global_hot 的 CTR 差异 不显著，不能认为两种召回策略有统计学上的显著差异。

Q&A

1. 如何设置base实验，用于对比自有推荐系统和PAI-REC推荐系统

   在导航栏 推荐场景 选择场景名称 点击编辑，填写流量配置。

2. 如何设置实验组

   参考基本概念。