word2vec - 如何使用word2vec区分带有反义词的句子

Question

假设我有两个句子，它们很相似，只是只有一个不同的词意思相反。例如“我喜欢她” 与 “我讨厌她”。word2vec 在我的分类项目中使用。据我所知，word2vec 似乎无法找出反义词之间的差异。有什么办法可以解决吗？

Answer 1

不幸的是，我们认为的“反义词”在 word2vec 坐标空间中通常非常相似。这是因为这些词几乎在所有方面都非常相似——除了它们强调的一个对比。

而且，如果 word2vec 方向可能捕捉到这些对比，它们将在许多不同的方向上。 “热”-vs-“冷”对比将不同于“亮”-vs-“暗”和“小”-vs-“大”。

可能有一些关于词向量集的分析技术可以帮助发现反义方向/对，但我没有注意到有人讨论过，尤其是任何简单/直观或适用于一般词向量集的内容。 (一旦你确实知道单词是相反的，就像在查阅先前标记的词典或类比问题时一样，那么它们的单词向量之间的方向在其他分析中可能会有用，比如发现其他对比相同的单词 -方式，就像解决类比问题时一样。)

您能否更具体地说明您的最终目标，并举例说明您将拥有的输入类型以及您希望软件报告哪些具体结果？

你给出的一个例子，“我喜欢她” vs “我恨她”，可以更普遍地被视为一种情绪分类，而 word2vec 支持的分类器可以在这些挑战上做得很好(尽管远非完美)。也就是说，有了足够的标记训练数据，具有大量“正面”和“负面”文本示例的分类器将倾向于学习“喜欢”(和类似的词)是正面的，“讨厌”(和类似的)是负面的, 并且对正面/负面陈述的其他变体做 OK(除了更复杂的结构，如否定、微妙的限定、轻描淡写、讽刺等)

因此，关于您希望检测/报告的具体内容以及您已尝试并发现不足之处的更多信息可能会产生更多关于如何实现它的想法。