nlp - 如何将地名词典或词典表示为 crf++ 中的特征？

Question

如何使用地名词典或词典作为 CRF++ 中的功能？

详细说明:假设我想对人名进行 NER，并且我有一个包含常见人名的地名词典(或字典)，我想使用这个地名词典作为 crf++ 的输入，我该怎么做？

我正在使用条件随机场包 crf++ 来执行命名实体识别任务。我知道如何在 crf++ 中表示一些常用的功能。例如，如果我们想使用大写作为一项特征，我们可以在 crf 的特征模板中添加一个单独的列，指示单词是否大写。

Answer 1

您可以创建一个新功能来指示 token 是否在字典/地名词典中。只需检查集合成员身份并将地名词典功能设置为 1 或 0。