2.20机器学习:交叉熵 信息熵 相对熵

数据分析师->SQL+机器学习算法理论
算法工程师->LeetCode刷题+机器学习理论
数据挖掘方向->SQL+集群操作+机器学习理论

01信息熵

在这里插入图片描述

02单位bit 默认2 为底

在这里插入图片描述

03联合熵

在这里插入图片描述

pX
在这里插入图片描述

在这里插入图片描述

在这里插入图片描述

在这里插入图片描述

在这里插入图片描述

交叉熵的计算

在这里插入图片描述
在这里插入图片描述
二类损失

在这里插入图片描述

在这里插入图片描述

在这里插入图片描述

在这里插入图片描述

在这里插入图片描述

在这里插入图片描述

在这里插入图片描述

发布了93 篇原创文章 · 获赞 17 · 访问量 8189

猜你喜欢

转载自blog.csdn.net/Captain_DUDU/article/details/104405348