algorithm - 词类数组的相似性

Question

K 最近邻和自然语言处理:如何测试词类数组之间的距离？例如

('动词','副词','名词') 和 ('形容词','副词','代词')?

一个措辞更好的问题是，在它们是词性而不仅仅是字符串的上下文中，您如何判断两者之间的相似性？

Answer 1

作为一般方法，您可以使用 cosine在 POS 向量之间作为它们相似性的度量。替代方法是使用 hamming distance两个向量之间。

向量之间还有很多其他的距离函数。但这实际上取决于您想做什么以及您的数据是什么样的。您应该回答诸如职位重要吗？这些向量的相似度有多少？ ('名词'，'动词')和('动词'，'名词')？ ('副词')和('形容词')之间的距离是否小于('副词')和('名词')之间的距离？等等。