中文维基百科获取与处理流程

一、获取

http://dumps.wikimedia.org/    

enwiki(英文)zhwiki(中文)

指导文档:

https://www.cs.bgu.ac.il/~elhadad/nlp12/jwpl/wikification.html

二、处理

参考:https://dkpro.github.io/dkpro-jwpl/HowToGetJWPL/

Cmd问题不太好解决(主要是看不懂改不了) 选择了eclipse

配置问题包括:

Jdk 环境设置(系统及eclipse)

Vm环境设置(eclips.ini)https://dkpro.github.io/dkpro-jwpl/DeveloperSetup/

数据结构设置(文件位置)

仔细阅读官方文档  各文件位置也很重要

 

他在运行。。。。。

等待ing(3小时吧)

结束

三、创建相应的数据库

1创建数据库命令(数据库名DB_NAME可以自行设定):注意要保证创建的数据库的编码是utf-8

CREATE DATABASE WIKI2019 DEFAULT CHARACTER SET utf8 DEFAULT COLLATE utf8_general_ci;

 后面按大家的来,没什么问题不写了

参考(感谢):

https://www.cnblogs.com/CherishFX/p/5280259.html

https://blog.csdn.net/qq_39023569/article/details/88556301

 

猜你喜欢

转载自www.cnblogs.com/ann-1012/p/11764497.html