没有合适的资源?快使用搜索试试~ 我知道了~
温馨提示
构建词库 从原始文本中,自动构建词库,目前只适用于中文。参考: new in 0.0.3 使用radix tree代替ternary search tree,提升性能。 加入LOG信息,展示抽取的进度。 new in 0.0.2 直接导入源码, thx 将之前的maven项目,转变为一个gradle项目,方便打包使用。 成词条件 互信息 左右熵 位置成词概率 ngram 频率 运行方法 或者gradle distTar打包程序 解压dict_build-x.x.x.tar 解压之后,进入bin. 运行:./dict_build 你的数据文件的绝对路径 结束之后,在数据文件同目录有文件:words_sort.data 四列分别为:词,词频,互信息,左右熵,位置成词概率. 注意 数据文件一定要是UTF8编码的 如果数据文件较大, 出现out of memory问题,可以尝试如下方式,限mac和
资源推荐
资源详情
资源评论
收起资源包目录
dict_build-master.zip (53个子文件)
dict_build-master
gradlew.bat 2KB
gradlew 5KB
pom.xml 2KB
dict_build-0.0.3.tar 3.31MB
.github
workflows
codeql-analysis.yml 2KB
SECURITY.md 619B
LICENSE 11KB
gradle
wrapper
gradle-wrapper.properties 231B
.settings
org.eclipse.m2e.core.prefs 86B
org.eclipse.core.resources.prefs 55B
src
main
resources
logback.xml 8KB
dict.properties 194B
pos_prop.txt 566KB
java
dict.properties 194B
com
fasterxml
sort
IterableSorterException.java 402B
IteratingSorter.java 5KB
std
StdComparator.java 438B
RawTextLineWriter.java 3KB
ByteArrayComparator.java 725B
StdTempFileProvider.java 1006B
TextFileSorter.java 4KB
RawTextLineReader.java 5KB
DataReaderFactory.java 180B
SorterBase.java 12KB
SortingState.java 3KB
DataWriterFactory.java 183B
Sorter.java 3KB
DataReader.java 810B
TempFileProvider.java 330B
Merger.java 4KB
util
SegmentedBuffer.java 7KB
BlockingQueueReader.java 2KB
CollectionReader.java 1KB
CastingIterator.java 524B
NaturalComparator.java 428B
SortConfig.java 3KB
DataWriter.java 216B
dict
build
TernaryTree.java 12KB
TernaryNode.java 2KB
SplitStringComparator.java 630B
LineReader.java 2KB
LineWriter.java 1KB
CounterMap.java 1009B
PosProbability.java 2KB
Builder.java 14KB
SplitFileSorter.java 4KB
Main.java 708B
FastBuilder.java 17KB
pos_prop.txt 566KB
.gitignore 356B
README.md 10KB
settings.gradle 32B
build.gradle 812B
共 53 条
- 1
资源评论
我是卖报的小砖家
- 粉丝: 20
- 资源: 4617
上传资源 快速赚钱
- 我的内容管理 展开
- 我的资源 快来上传第一个资源
- 我的收益 登录查看自己的收益
- 我的积分 登录查看自己的积分
- 我的C币 登录后查看C币余额
- 我的收藏
- 我的下载
- 下载帮助
最新资源
- ### 词向量的介绍、使用技巧和优缺点的文章
- 基于STM32F103CBT6单片机GC65+MP2625+CC1101 GPSTrack模块板硬件(原理图+PCB)工程文件
- ### 通道处理过程模拟概念、优缺点和使用技巧
- ### MyBatis动态SQL介绍说明、使用技巧和优缺点
- 上传下载仿163网盘无刷新文件上传 for Jsp-fileupload-jsp.rar
- VMware Workstation业界非常稳定且安全的桌面虚拟机软件-计算机上运行多个操作系统,支持Windows、DOS等
- 基于STM8L101F3P6单片机+LY2508A33P+CC1100遥控器硬件(原理图+PCB)工程文件.zip
- 上传下载WAP图铃下载系统-unimg.rar
- YTX-0.1.0-Win
- 上传下载ExtJS 2.2 开源网络硬盘系统-dogdisk.rar
资源上传下载、课程学习等过程中有任何疑问或建议,欢迎提出宝贵意见哦~我们会及时处理!
点击此处反馈
安全验证
文档复制为VIP权益,开通VIP直接复制
信息提交成功