fastNLP自然语言处理（NLP）工具包

fastNLP是一款轻量级的自然语言处理（NLP）工具包，目标是减少用户项目中的工程型代码，例如数据处理循环、训练循环、多卡运行等。 fastNLP具有如下的特性： 便捷。在数据处理中可以通过apply函数避免循环、使用多进程提速等；在训练循环阶段可以很方便定制操作。 高效。无需改动代码，实现fp16切换、多卡、ZeRO优化等。 兼容。fastNLP支持多种深度学习框架作为后端。 :warning: 为了实现对不同深度学习架构的兼容，fastNLP 1.0.0之后的版本重新设计了架构，因此与过去的fastNLP版本不完全兼容， 基于更早的fastNLP代码需要做一定的调整: fastNLP文档 中文文档 安装指南 fastNLP可以通过以下的命令进行安装 pip install fastNLP>=1.0.0alpha 如果需要安装更早版本的fastNLP请指定版本号，例如 pip install fastNLP==0.7.1 另外，请根据使用的深度学习框架，安装相应的深度学习框架。 Pytorch Paddle oneflow jittor 项目结构 fastNLP的项目结构如下： fastNLP 开源的自然语言处理库 fastNLP.core 实现了核心功能，包括数据处理组件、训练器、测试器等 fastNLP.models 实现了一些完整的神经网络模型 fastNLP.modules 实现了用于搭建神经网络模型的诸多组件 fastNLP.embeddings 实现了将序列index转为向量序列的功能，包括读取预训练embedding等 fastNLP.io 实现了读写功能，包括数据读入与预处理，模型读写，数据与模型自动下载等