summarization-datasets:预处理并在某些情况下下载“深度学习模型摘要中的内容选择”论文的数据集。

汇总数据集 预处理并在某些情况下下载“深度学习模型摘要中的内容选择”论文的数据集。 需要 python 3.6 或更高版本。 要安装运行： $ python setup.py install 如果您之前没有在当前环境中安装 spacy，您还应该运行： python -m spacy download en 此外，将您的 OMP 线程数设置为较小的数量可能会很好，例如export OMP_NUM_THREADS=2 CNN/DailyMail 数据集 跑步： python summarization-datasets/preprocess_cnn_dailymail.py \ --data-dir data/ 这将在目录data/cnn-dailymail创建 CNN/DM 数据。 这个数据集非常大，需要一段时间来预处理。 来杯咖啡！ 纽约时报数据集 您必须从 LDC