Skip to content

renhongkai/CWS

Folders and files

NameName
Last commit message
Last commit date

Latest commit

 

History

20 Commits
 
 
 
 
 
 

Repository files navigation

CWS

中文分词

word_segement_model.py:分词模型,能跑通,但速度很慢(之前的代码没有记录时间,所以没有记录确切的时间,但是github上的代码添加了记录时间)。

word_segement_model_cuda.py:使用cuda加速计算,调用utils文件

word_segement_model_Dataset.py:使用pytorch的Dataset处理数据。调用utils_dataset文件。没跑通。

使用的训练数据文件为:pku_training_BIO.utf8

使用的测试数据文件为:pku_test_gold_BIO.utf8

About

中文分词

Resources

License

Stars

Watchers

Forks

Releases

No releases published

Packages

No packages published

Languages