dual-mfa-vqa:VQA的共同参与区域和检测

双MFA-VQA VQA的多模式乘法嵌入共同参与区域和检测。 该网络有两个关注分支，分别采用提议的乘法特征嵌入方案：一个分支参与自由格式的图像区域，另一个分支参与用于对与问题相关的视觉特征进行编码的检测框。 对于VQA 1.0数据集，此当前代码可以在开放式测试中获得66.09 ，在测试标准拆分中获得69.97。 聚光灯 关于arXiv的论文： : Faster R-CNN预训练模型基于边界框的注意力 与整个图像和物体检测共同关注 多峰可乘嵌入特征方法 采用多GPU加速的火炬实施 依存关系 该代码的主要部分是用Lua编写的，并且需要 。 在安装了割炬之后，可以通过运行以下命令来安装这些依赖项： 安装相关的炬管库 cd ~/torch luarocks install loadcaffe luarocks install hdf5 pip install h5py luaroc