go中文分词：cwsharp-go

fm3d 9年前

Go中文分词库，支持中英文，混合词组，自定义字典。

安装&运行

go get github.com/zhengchun/cwsharp-go

go run test.go

说明

  • StandardTokenizer.go - 基于词典的分词类

  • BigramTokenizer.go - 二元分词类

  • StopwordTokenizer.go - 扩展类，提供过滤词的分词

  • WordUtil.go - 提供字典管理帮助类

使用帮助可以查看对应的测试用例。

项目主页：http://www.open-open.com/lib/view/home/1439132977754