1、将中文标点排除在全角、半角转换范围之外; 2、根据新的标点转换规则,更新分词模型;
Unclaimed project
Are you a maintainer of MiNLP? Claim this project to take control of your public changelog and roadmap.
1、将中文标点排除在全角、半角转换范围之外; 2、根据新的标点转换规则,更新分词模型;
1、新增多进程分词支持; 2、词典干预策略,采用新的模型内干预,替换原先的模型外干预;
Release v3.2.4
Python 3.5~3.8,TensorFlow>=1.14
Release v3.2.2