## 5.3 什么使模型“良好”?
从我们的统计模型中,我们通常需要两种不同的东西。首先,我们希望它能够很好地描述我们的数据;也就是说,我们希望它在建模数据时具有尽可能低的错误。第二,我们希望它能够很好地概括为新的数据集;也就是说,当我们将其应用于新的数据集时,我们希望它的错误尽可能低。事实证明,这两个特性经常会发生冲突。
为了理解这一点,让我们考虑一下错误的来源。首先,如果我们的模型是错误的,就可能发生这种情况;例如,如果我们不准确地说身高随年龄而下降而不是上升,那么我们的错误将高于正确模型的错误。同样,如果我们的模型中缺少一个重要因素,这也会增加我们的误差(就像我们把年龄从模型中排除在身高之外时那样)。然而,即使模型是正确的,误差也可能发生,因为数据的随机变化,我们通常称之为“测量误差”或“噪声”。有时,这实际上是由于我们的测量误差造成的——例如,当测量值依赖于人时,例如使用秒表测量竞走中经过的时间。在其他情况下,我们的测量设备是高度精确的(像测量体重的数字秤),但被测量的东西受到许多不同因素的影响,这些因素导致它是可变的。如果我们知道所有这些因素,那么我们就可以建立一个更精确的模型,但事实上,这几乎不可能。
让我们用一个例子来说明这一点。我们不使用实际数据,而是为示例生成一些数据;我们将在本课程后面更详细地讨论模拟数据的生成。假设我们想了解一个人的血液酒精含量(BAC)和他们在模拟驾驶考试中的反应时间之间的关系。我们可以生成一些模拟数据并绘制关系图(参见图[5.5](#fig:BACrt)的面板 A)。
![Simulated relationship between blood alcohol content and reaction time on a driving test, with best-fitting linear model. A: linear relationship with low measurement error. B: linear relationship with higher measurement error. C: Nonlinear relationship with low measurement error and (incorrect) linear model](https://img.kancloud.cn/cc/03/cc03de28482f078d2ef42fd846190502_576x576.png)
图 5.5 驾驶试验中血液酒精含量与反应时间的模拟关系,最佳拟合线性模型。A:线性关系,测量误差小。B:线性关系,测量误差较大。C:具有低测量误差和(不正确)线性模型的非线性关系
在这个例子中,反应时间随血液中的酒精含量而有系统地增加——蓝线表示最合适的模型,我们可以看到误差很小,这很明显,所有的点都非常接近这条线。
我们也可以想象数据显示相同的线性关系,但有更多的误差,如图[5.5](#fig:BACrt)的面板 B 所示。在这里,我们看到仍然有一个系统的反应时间增加与细菌,但它是更多的个人变量。
这两个例子都是 _ 线性模型 _ 似乎合适的,并且误差反映了我们测量中的噪声。线性模型规定两个变量之间的关系遵循直线。例如,在线性模型中,无论 BAC 的级别如何,BAC 的变化总是与反应时间的特定变化相关。
另一方面,还有其他情况下线性模型是不正确的,并且由于没有正确地指定模型,误差会增加。假设我们对咖啡因摄入量和测试表现之间的关系感兴趣。咖啡因等兴奋剂与测试成绩之间的关系往往是非线性的,也就是说,它不遵循直线。这是因为随着咖啡因含量的减少(当这个人变得更加警觉时),工作表现也会随之上升,但随着咖啡因含量的增加(当这个人变得紧张和紧张时),工作表现也会开始下降。我们可以模拟这种形式的数据,然后将线性模型拟合到数据中(参见图[5.5](#fig:BACrt)的面板 C)。蓝线表示最符合这些数据的直线;显然,存在高度错误。虽然在测试表现和咖啡因摄入量之间有着非常合法的关系,但它是一条曲线而不是一条直线。线性模型误差很大,因为它是这些数据的错误模型。
- 前言
- 0.1 本书为什么存在?
- 0.2 你不是统计学家-我们为什么要听你的?
- 0.3 为什么是 R?
- 0.4 数据的黄金时代
- 0.5 开源书籍
- 0.6 确认
- 1 引言
- 1.1 什么是统计思维?
- 1.2 统计数据能为我们做什么?
- 1.3 统计学的基本概念
- 1.4 因果关系与统计
- 1.5 阅读建议
- 2 处理数据
- 2.1 什么是数据?
- 2.2 测量尺度
- 2.3 什么是良好的测量?
- 2.4 阅读建议
- 3 概率
- 3.1 什么是概率?
- 3.2 我们如何确定概率?
- 3.3 概率分布
- 3.4 条件概率
- 3.5 根据数据计算条件概率
- 3.6 独立性
- 3.7 逆转条件概率:贝叶斯规则
- 3.8 数据学习
- 3.9 优势比
- 3.10 概率是什么意思?
- 3.11 阅读建议
- 4 汇总数据
- 4.1 为什么要总结数据?
- 4.2 使用表格汇总数据
- 4.3 分布的理想化表示
- 4.4 阅读建议
- 5 将模型拟合到数据
- 5.1 什么是模型?
- 5.2 统计建模:示例
- 5.3 什么使模型“良好”?
- 5.4 模型是否太好?
- 5.5 最简单的模型:平均值
- 5.6 模式
- 5.7 变异性:平均值与数据的拟合程度如何?
- 5.8 使用模拟了解统计数据
- 5.9 Z 分数
- 6 数据可视化
- 6.1 数据可视化如何拯救生命
- 6.2 绘图解剖
- 6.3 使用 ggplot 在 R 中绘制
- 6.4 良好可视化原则
- 6.5 最大化数据/墨水比
- 6.6 避免图表垃圾
- 6.7 避免数据失真
- 6.8 谎言因素
- 6.9 记住人的局限性
- 6.10 其他因素的修正
- 6.11 建议阅读和视频
- 7 取样
- 7.1 我们如何取样?
- 7.2 采样误差
- 7.3 平均值的标准误差
- 7.4 中心极限定理
- 7.5 置信区间
- 7.6 阅读建议
- 8 重新采样和模拟
- 8.1 蒙特卡罗模拟
- 8.2 统计的随机性
- 8.3 生成随机数
- 8.4 使用蒙特卡罗模拟
- 8.5 使用模拟统计:引导程序
- 8.6 阅读建议
- 9 假设检验
- 9.1 无效假设统计检验(NHST)
- 9.2 无效假设统计检验:一个例子
- 9.3 无效假设检验过程
- 9.4 现代环境下的 NHST:多重测试
- 9.5 阅读建议
- 10 置信区间、效应大小和统计功率
- 10.1 置信区间
- 10.2 效果大小
- 10.3 统计能力
- 10.4 阅读建议
- 11 贝叶斯统计
- 11.1 生成模型
- 11.2 贝叶斯定理与逆推理
- 11.3 进行贝叶斯估计
- 11.4 估计后验分布
- 11.5 选择优先权
- 11.6 贝叶斯假设检验
- 11.7 阅读建议
- 12 分类关系建模
- 12.1 示例:糖果颜色
- 12.2 皮尔逊卡方检验
- 12.3 应急表及双向试验
- 12.4 标准化残差
- 12.5 优势比
- 12.6 贝叶斯系数
- 12.7 超出 2 x 2 表的分类分析
- 12.8 注意辛普森悖论
- 13 建模持续关系
- 13.1 一个例子:仇恨犯罪和收入不平等
- 13.2 收入不平等是否与仇恨犯罪有关?
- 13.3 协方差和相关性
- 13.4 相关性和因果关系
- 13.5 阅读建议
- 14 一般线性模型
- 14.1 线性回归
- 14.2 安装更复杂的模型
- 14.3 变量之间的相互作用
- 14.4“预测”的真正含义是什么?
- 14.5 阅读建议
- 15 比较方法
- 15.1 学生 T 考试
- 15.2 t 检验作为线性模型
- 15.3 平均差的贝叶斯因子
- 15.4 配对 t 检验
- 15.5 比较两种以上的方法
- 16 统计建模过程:一个实例
- 16.1 统计建模过程
- 17 做重复性研究
- 17.1 我们认为科学应该如何运作
- 17.2 科学(有时)是如何工作的
- 17.3 科学中的再现性危机
- 17.4 有问题的研究实践
- 17.5 进行重复性研究
- 17.6 进行重复性数据分析
- 17.7 结论:提高科学水平
- 17.8 阅读建议
- References