基于语言模型的分词(考虑语义)

在这里插入图片描述

缺点:step 1 里面分割出来的种类可能会很多,效率太低

分词总结:

知识点总结:

  1. 基于匹配规则的方法
  2. 基于概率统计方法(LM,HMM,CRF)
  3. 分词可以认为是已经解决的问题
发布了18 篇原创文章 · 获赞 0 · 访问量 146

猜你喜欢

转载自blog.csdn.net/weixin_43979941/article/details/104971987