第 2 章 模型评估与选择

1. 经验误差与过拟合

2. 评估方法

2.1 留出法

2.2 交叉验证法

2.3 自助法

2.4 调参与最终模型

3. 性能度量

3.1 错误率与精度

3.2 查准率、查全率 与 $F_1$

3.3 ROC 与 AUC

3.4 代价敏感错误率与代价曲线

4. 比较检验

4.1 假设检验

4.2 交叉验证 $t$ 检验

4.3 McNemar 检验

4.4 Friedman 检验与 Nemenyi 后续检验

5. 方差与偏差

6. 阅读材料

习题

参考文献