word2vec 词向量 分词效果对比

分词前后效果对比


【不分词】 所有的商品名称本身作为term

蔬菜 >>>>>>>> [马铃薯, 古柯叶, 芋头, 油茶籽, 生地, 皮大麦, 种用谷物, 土豆, 蒲芹萝卜, 生大麻]

油茶籽 >>>>>>>> [根洋芹菜, 瓜类蔬菜, 中草药材, 蒜叶婆罗门参, 罂粟杆, 双低油菜籽, 红萝卜, 核桃, 硬质小麦, 黑大豆]


【分词后】结巴先分词,后word2vec

蔬菜 >>>>>>>> [萝卜, 等, 带壳, 姜芋, 绿豆芽, 茄, 糯稻, 及, 番, 欧防风]

油茶籽 >>>>>>>> [蒟, 圆根, 苷, 干制, 姜黄, 莲蕉, 黄连, 李干, 芜菁, 婆罗门参]


猜你喜欢

转载自blog.csdn.net/shangyt/article/details/79664969