一句话回答
安斯库姆四重奏是 Francis Anscombe 于 1973 年发表的四组数据,均值、方差、相关系数和线性回归线几乎相同,分布却差别很大,用来说明画图看数据的重要性。
什么是安斯库姆四重奏?
安斯库姆四重奏(Anscombe's Quartet)是四组小数据集,每组 11 个 (x, y) 点,汇总统计几乎完全相同,画出来却截然不同。统计学家 Francis Anscombe 在 1973 年发表了它,用来说明:相信汇总数字之前,一定要先把数据画出来。
四组数据
| 第 I 组 x | 第 I 组 y | 第 II 组 x | 第 II 组 y | 第 III 组 x | 第 III 组 y | 第 IV 组 x | 第 IV 组 y |
|---|---|---|---|---|---|---|---|
| 10 | 8.04 | 10 | 9.14 | 10 | 7.46 | 8 | 6.58 |
| 8 | 6.95 | 8 | 8.14 | 8 | 6.77 | 8 | 5.76 |
| 13 | 7.58 | 13 | 8.74 | 13 | 12.74 | 8 | 7.71 |
| 9 | 8.81 | 9 | 8.77 | 9 | 7.11 | 8 | 8.84 |
| 11 | 8.33 | 11 | 9.26 | 11 | 7.81 | 8 | 8.47 |
| 14 | 9.96 | 14 | 8.10 | 14 | 8.84 | 8 | 7.04 |
| 6 | 7.24 | 6 | 6.13 | 6 | 6.08 | 8 | 5.25 |
| 4 | 4.26 | 4 | 3.10 | 4 | 5.39 | 19 | 12.50 |
| 12 | 10.84 | 12 | 9.13 | 12 | 8.15 | 8 | 5.56 |
| 7 | 4.82 | 7 | 7.26 | 7 | 6.42 | 8 | 7.91 |
| 5 | 5.68 | 5 | 4.74 | 5 | 5.73 | 8 | 6.89 |
几乎一样的统计量
我们重新计算了四组的汇总统计:
| 统计量 | 第 I 组 | 第 II 组 | 第 III 组 | 第 IV 组 |
|---|---|---|---|---|
| x 的均值 | 9 | 9 | 9 | 9 |
| x 的方差 | 11.00 | 11.00 | 11.00 | 11.00 |
| y 的均值 | 7.50 | 7.50 | 7.50 | 7.50 |
| y 的方差 | 4.13 | 4.13 | 4.12 | 4.12 |
| x 与 y 的相关系数 | 0.816 | 0.816 | 0.816 | 0.817 |
| 线性回归方程 | y = 3.00 + 0.500x | 相同 | 相同 | 相同 |
| R² | 0.67 | 0.67 | 0.67 | 0.67 |
只看这张表的人,会以为四组数据描述的是同一种关系。
画出来看到了什么
- 第 I 组和统计量说的一样:带噪声的线性关系。
- 第 II 组是一条很规整的曲线。直线是错误的模型,二次曲线几乎完美拟合。
- 第 III 组除了一个离群点,几乎是一条直线;这个点拉偏了斜率,把本来接近 1 的相关系数拉低了。
- 第 IV 组根本没有关系:十个点的 x 相同,一个极端点制造了全部的相关性。
给每组画一张散点图只要几秒,四个故事一目了然。
对数据分析意味着什么
看板建立在汇总统计上:平均数、比率、相关系数和趋势线。安斯库姆的教训可以直接套用:
- 平均转化率相同的两个活动,表现可能完全不同:一个每天都很稳定,另一个全靠某一天爆量。
- 停留时长和购买之间的相关,可能来自一个大买家而不是普遍规律,这就是第 IV 组的问题,见相关和因果。
- 给季节性序列画趋势线,等于拿直线去拟合曲线,这是第 II 组的问题。
- 一次机器人高峰或一个埋点错误,能像第 III 组的离群点拉偏斜率那样拉偏平均数,见数据里的离群值。
实用习惯:
- 报平均数之前,先看分布或每日序列。
- 引用两个变量的相关系数之前,先把它们画成散点图。
- 去掉某个点或某一天重新计算,看结果是不是被它左右。
- 少数值占主导时,用中位数和百分位数,见平均数和中位数。
「恐龙数据集」
2017 年,Autodesk 研究院的 Justin Matejka 和 George Fitzmaurice 把这个想法扩展成 Datasaurus Dozen:13 组数据集,其中一组画出来是一只恐龙,它们的均值、标准差和相关系数精确到小数点后两位都相同。他们在保持统计量不变的前提下逐步挪动数据点,说明几乎任何形状都能藏在同一组数字后面。
参考资料
- Anscombe, F. J. (1973). Graphs in statistical analysis. The American Statistician, 27(1).
- Matejka, J. and Fitzmaurice, G. (2017). Same stats, different graphs. Autodesk Research.
- Wikipedia. Anscombe's quartet.
这个解释清楚吗?
我们会根据反馈修改和补充这篇内容。
提交没有成功,请稍后再试。
谢谢你的反馈,我们会据此改进这篇内容。你已经反馈过这篇了,谢谢。
