n-gram - 自然语言处理中的 Unigram、Bigram 和 Posgram

Question

我想知道unigram、bigram和posgram之间的含义和区别是什么。我在互联网上搜索过，但找不到全面的答案。任何帮助将非常感激。

Answer 1

“这是一个例句”

一元语法:一次考虑一个单词 ->“This”或“is”或“an”...

Bigram(或 n-gram):考虑 n 个单词组合 (bi -> n=2) -> “This is”, “is an”, “an example”, “例句”

Posgram(对此不太确定):还考虑词性上下文(示例是“名词”“动词”...)来预测更多信息。更正式地说，它减少了所选择内容的维度(减少为从名词集中选择一个单词，而不是更大的所有单词集合)。