nlp - 寻找不同词之间的语义相似性和关系

Question

我正在从事一个涉及计算不同概念之间相关性的项目。

例子:“着陆” - 与:“到达；来到”和“着陆”有关，“电话” - 与“电子；电力”和“交谈；沟通”有关，“电影”- 与“移动；改变”和“图片；图像”相关, 等等。

我检查了 WordNet 框架和 WordNet::Similarity Perl 模块，但在某些情况下它们不可用，特别是在我需要将名词与动词连接起来的情况下(例如名词“dog”和动词“to”吠”)。此外，WordNet 以层次结构组织所有同义词集(例如:计算机 -> 机器 -> 设备 -> 仪器)，这并不是我项目中真正需要的(当然，我可能是错的)。

问题是 - 哪个框架或数据库，我应该使用什么方法来解决问题？我从哪里开始？

如果你能给我一些建议，那将非常有帮助。

Answer 1

word2vec 嵌入可能会很好地完成您的任务。它给出了比 wordnet 更柔和的相似性概念。您可以从此处获得一些预训练嵌入链接 https://code.google.com/p/word2vec/ .