没有合适的资源?快使用搜索试试~ 我知道了~
belgpt2::Belgium:BelGPT-2
共51个文件
py:33个
sh:9个
md:2个
需积分: 12 0 下载量 149 浏览量
2021-05-09
04:58:50
上传
评论
收藏 1.3MB ZIP 举报
温馨提示
比利时GPT-2 :Belgium: GPT-2模型在非常大型且异构的法国语料库(〜60Gb)上进行了预训练。 用法 您可以将BelGPT-2与 如下: import torch from transformers import GPT2Tokenizer , GPT2LMHeadModel # Load pretrained model and tokenizer model = GPT2LMHeadModel . from_pretrained ( "antoiloui/belgpt2" ) tokenizer = GPT2Tokenizer . from_pretrained ( "antoiloui/belgpt2" ) # Generate a sample of text model . eval () output = model . generate (
资源推荐
资源详情
资源评论
收起资源包目录
belgpt2-master.zip (51个子文件)
belgpt2-master
.gitignore 2KB
LICENSE 1KB
scripts
preprocess.sh 8KB
pretrain_parallel.sh 2KB
merge.sh 300B
learn_bpe.sh 373B
split_train_val_test.sh 1KB
tools
generate_text.py 2KB
split_sentences.py 400B
learn_bpe.py 4KB
preprocess_bpe.py 1KB
utils.py 572B
clean_text.py 4KB
gutenberg_cleaner.py 10KB
xlm
trainer.py 41KB
evaluation
glue.py 11KB
__init__.py 0B
multi-bleu.perl 5KB
xnli.py 8KB
flue.py 15KB
evaluator.py 25KB
data
loader.py 15KB
__init__.py 0B
dataset.py 14KB
dictionary.py 8KB
model
__init__.py 8KB
pretrain.py 3KB
embedder.py 5KB
transformer.py 31KB
memory
__init__.py 34B
utils.py 5KB
memory.py 32KB
query.py 9KB
__init__.py 0B
slurm.py 6KB
utils.py 10KB
optim.py 10KB
logger.py 2KB
gutenberg_downloader.py 7KB
merge_files.py 1KB
run_language_modeling.py 36KB
pretrain_distributed.sh 2KB
tokenize.sh 1KB
download.sh 5KB
eval.sh 629B
README.md 1KB
-
tensorboard_run
events.out.tfevents.1588409792.megafat.113501.0 2.98MB
eval_dev_set.json 855B
eval_test_set.json 856B
docs
index.md 8KB
test_set_evaluation.png 270KB
共 51 条
- 1
资源评论
AR新视野
- 粉丝: 24
- 资源: 4651
上传资源 快速赚钱
- 我的内容管理 展开
- 我的资源 快来上传第一个资源
- 我的收益 登录查看自己的收益
- 我的积分 登录查看自己的积分
- 我的C币 登录后查看C币余额
- 我的收藏
- 我的下载
- 下载帮助
安全验证
文档复制为VIP权益,开通VIP直接复制
信息提交成功