比较嵌入

捕获词相似性的词嵌入比较分析 本文的源代码：。 扩展版本：。 抽象的 在各种自然语言处理任务中，分布式语言表示已成为使用最广泛的语言表示技术。 大多数基于深度学习技术的自然语言处理模型都使用已经预先训练的分布式单词表示形式，通常称为单词嵌入。 对于这些模型，确定最定性的词嵌入至关重要。 但是，选择合适的单词嵌入是一项令人费解的任务，因为投影的嵌入空间对人类而言并不直观。 在本文中，我们探索了用于创建分布式单词表示的不同方法。 我们对几种最先进的词嵌入方法进行了内在评估。 使用现有基准测试数据集分析了它们在捕获单词相似性方面的性能，以获取单词对相似性。 本文的研究在地面真词相似度与通过不同词嵌入方法获得的相似度之间进行相关分析。