没有合适的资源?快使用搜索试试~ 我知道了~
iQAN:Visaul问题生成是视觉问答的双重任务(PyTorch版本)
共112个文件
py:72个
yaml:23个
ipynb:6个
需积分: 9 1 下载量 93 浏览量
2021-05-13
04:10:06
上传
评论
收藏 18.51MB ZIP 举报
温馨提示
可逆问答网络(iQAN) 这是我们在提出的可逆问题回答网络(iQAN)的PyTorch实施,它是。 请遵循准则以执行规则。 ps这只是一个初始版本。 更多详细信息即将推出。 介绍 视觉问题生成(VQG)和视觉问题回答(VQA)任务都是在由三胞胎构成的多峰数据集上以端到端的方式训练模型: 具有比原始像素没有其它信息的图像, 有关相关图像上视觉内容的问题, 该问题的简短答案(一个或几个单词)。 如您在下面的插图中所见,VQA(顶部)和VQG(底部)的问题解决方案都利用了编码器-融合-解码器流水线,其中Q和A的顺序相反: 编码器使用LSTM,GRU或预先训练的Skipthoughts对问题进行编码,或者对具有答案嵌入表的答案进行编码 融合方案,可以是按元素求和,串联, , 或 , 解码器通过线性变换预测答案或使用LSTM GRU生成问题序列。 可以是预训练的VGG16或Res
资源推荐
资源详情
资源评论
收起资源包目录
iQAN:Visaul问题生成是视觉问答的双重任务(PyTorch版本) (112个子文件)
.gitignore 248B
.gitmodules 405B
visualize_results.ipynb 18.24MB
visualize_results_CLEVR.ipynb 5.23MB
visu.ipynb 14KB
CLEVR_per_type_acc.ipynb 7KB
augment_data.ipynb 5KB
dataset_count.ipynb 2KB
cvpr2018_iqan_results.jpg 479KB
cvpr2018_iqan_pipeline.jpg 99KB
.keep 6B
README.md 12KB
vqa_vqg.png 58KB
train_dual_model.py 18KB
vqa_processed.py 16KB
vqa.py 15KB
clevr_processed.py 14KB
att.py 12KB
engine_v2.py 11KB
engine.py 11KB
vec2seq.py 10KB
dataloader.py 9KB
dual_model.py 9KB
dual_model_MLB.py 9KB
beam_search.py 9KB
att.py 9KB
visu.py 8KB
vqg_modules.py 8KB
engine.py 7KB
attention_modules.py 7KB
joint_eval.py 7KB
extract.py 7KB
engine.py 6KB
vgenome_processed.py 6KB
vqa_interim.py 6KB
vqa2_interim.py 6KB
engine_v2_vqa.py 6KB
dual_model_baseline.py 6KB
engine.py 6KB
engine_v2_vqg.py 5KB
shared_dual_model.py 5KB
fusion.py 5KB
engine_baseline.py 5KB
engine_concept.py 5KB
utils.py 5KB
joint_model.py 4KB
vgenome.py 4KB
evaluate.py 4KB
convnets.py 4KB
coco.py 4KB
clevr_interim.py 4KB
logger.py 4KB
logger.py 4KB
seq2vec.py 4KB
caption.py 4KB
utils.py 3KB
features.py 3KB
vas_modules.py 3KB
vqa_modules.py 3KB
utils.py 2KB
clevr.py 2KB
images.py 2KB
noatt.py 2KB
utils.py 2KB
eval_res.py 2KB
criterions.py 2KB
vgenome_interim.py 2KB
Baseline_models.py 1KB
json2txt.py 1KB
sampler.py 1KB
criterions.py 1KB
criterions.py 795B
utils.py 731B
__init__.py 239B
__init__.py 184B
__init__.py 169B
__init__.py 139B
__init__.py 1B
__init__.py 0B
__init__.py 0B
__init__.py 0B
__init__.py 0B
__init__.py 0B
__init__.py 0B
__init__.py 0B
run.sh 107B
selected_question_types.txt 408B
requirements.txt 42B
selected_question_types_clevr.txt 21B
dual_model_MUTAN_skipthought.yaml 2KB
dual_model_MUTAN_skipthought.yaml 2KB
dual_model_MUTAN_lstm.yaml 2KB
dual_model_MLB.yaml 2KB
mutan_att_train.yaml 1KB
mutan_att_trainval_vg.yaml 1KB
dual_model_iBOWIMG.yaml 1KB
dual_model_iBOWIMG.yaml 1KB
mlb_att_train.yaml 1KB
Merge_Att_Mutan.yaml 1KB
mutan_att_trainval.yaml 1KB
共 112 条
- 1
- 2
资源评论
JinTommy
- 粉丝: 39
- 资源: 4550
上传资源 快速赚钱
- 我的内容管理 展开
- 我的资源 快来上传第一个资源
- 我的收益 登录查看自己的收益
- 我的积分 登录查看自己的积分
- 我的C币 登录后查看C币余额
- 我的收藏
- 我的下载
- 下载帮助
安全验证
文档复制为VIP权益,开通VIP直接复制
信息提交成功