分布式深度 Q 学习
入门
该项目中包含一个稍微过时的 Caffe 版本作为子模块，对 pycaffe 接口进行了一些修改。 启动并运行 Distributed Deep Q 的最简单方法是使用此子模块。
使用子模块
如果您使用 --recursive 标志克隆了项目，则所有 Caffe 源文件都应位于caffe子目录中。 否则，它将为空，您应该执行以下操作：
git submodule init; git submodule update;
然后按照上的说明构建 Caffe 和 pycaffe。
安装 Redis 和 Celery
Redis是一个nosql数据库，Celery是一个任务调度队列，用于在不同线程中执行作业。
pip install -U celery[redis]
redis_collections
此模块用于在 Python 的 redis 中存储字典对象
