iflytekTextBrewerNer任务的增强版，TextBrewer是一个基于pytorch的、为实现NLP中的知识蒸馏任务而设计的工具包资源-CSDN文库

共51个文件

py：31个

pyc：17个

md：2个

89 浏览量 2024-11-22 10:58:08 上传评论收藏 112KB ZIP 举报

资源推荐

资源详情

资源评论

收起资源包目录

package

TextBrewerNer-master.zip （51个子文件）

folder

TextBrewerNer-master

main.distill.dist.py 13KB

utils.py 1KB

__init__.py 0B

train_eval.py 8KB

matches.py 9KB

cmd_ner_eletradistill.py 6KB

LICENSE 11KB

modeling.py 3KB

main.train.dist.py 12KB

folder

torch_crf

__init__.py 0B

CRF.py 18KB

folder

__pycache__

__init__.cpython-37.pyc 147B

CRF.cpython-37.pyc 9KB

utils_ner.py 7KB

README.en.md 838B

test.py 1KB

folder

textbrewer

utils.py 5KB

__init__.py 699B

distillers.py 244B

losses.py 14KB

distiller_general.py 10KB

schedulers.py 1KB

distiller_multiteacher.py 6KB

configurations.py 14KB

compatibility.py 267B

projections.py 1KB

distiller_train.py 11KB

presets.py 5KB

distiller_utils.py 7KB

distiller_basic.py 21KB

snippet.py 1KB

distillation.py 48KB

distiller_multitask.py 11KB

folder

__pycache__

compatibility.cpython-37.pyc 434B

configurations.cpython-37.pyc 13KB

distiller_multitask.cpython-37.pyc 8KB

distiller_utils.cpython-37.pyc 6KB

distiller_basic.cpython-37.pyc 12KB

distiller_train.cpython-37.pyc 6KB

distiller_general.cpython-37.pyc 7KB

__init__.cpython-37.pyc 790B

schedulers.cpython-37.pyc 2KB

utils.cpython-37.pyc 4KB

distillers.cpython-37.pyc 423B

losses.cpython-37.pyc 12KB

distiller_multiteacher.cpython-37.pyc 6KB

presets.cpython-37.pyc 2KB

projections.cpython-37.pyc 1KB

data_utils.py 4KB

README.md 681B

config.py 5KB

# TextBrewerNER #### 介绍基于 iflytek TextBrewer优化修改点： 1.增加CRF解码层； 2.数据预处理优化等 #### 软件架构软件架构说明 #### 安装教程 1. skip. #### 使用说明 1. 训练Teacher模型、Student模型及评测见cmd_ner_eletradistill.py 2. 训练测试数据、模型资源及训练好的模型资源见链接：https://pan.baidu.com/s/1ujHU-KReaVDTfggEKj8usw 提取码：zwfn #### 任务&效果 1.分词任务（训练数据基于人民日报2014数据集），Teacher模型F1 98.74，Student模型F1 97.83 分词效率：Teacher模型Titan V单卡约1.5万字/s，Student模型Titan V单卡约3万字/s #### 参与贡献

内容反馈

0仰望星空007

粉丝: 4220
资源: 585

最新资源

资源上传下载、课程学习等过程中有任何疑问或建议，欢迎提出宝贵意见哦~我们会及时处理！点击此处反馈

feedback-tip