一旦模型,策略,算法被确定下来,那么统计学习的方法也就被确定下来了。即:
方法=模型+策略+算法。
- 模型
简单的说,监督学习的过程中,模型就是所要学习的条件概率分布或者决策函数,即模型是基于数学来抽象实际问题,为之后的算法求解提供柴米油盐和理论基础,以便可以严谨与合理的使用由算法提供的可能的解决路径。 - 策略
策略应该就是用来选择最优的模型,保证逼近真解。在统计学习方法这本书上的第一章讲了经验风险最小化和结构风险最小化两种策略。 - 算法
我对于算法的理解,算法是将实际问题抽象成数学模型后的求解方法。各个算法的求解的环境由模型来提供,算法是在模型中成长起来的果实。