java - 为什么 GATE 与我的阿拉伯语地名词典列表中的单词不匹配？

Question

我已经构建了包含一些阿拉伯单词的列表，然后在 def 文件中添加与此列表相关的记录，并将这两个文件放在同一目录中，然后在我编写的 java 代码中:

FeatureMap params = Factory.newFeatureMap();
params.put("encoding", "UTF-8");       
params.put("listsURL","file:/D:/ThesisProj/Gazetteers/lists.def");
LanguageAnalyser gazetteer = (LanguageAnalyser)Factory.createResource("arabic.ArabicGazetteer",params);
gazetteer.init();

当列表和文件 - 我匹配其中的单词 - 包含英语单词时，匹配完成，因为结果注释具有与匹配单词的查找注释，但是当我尝试使用阿拉伯语言并且列表和比较文件中都只有阿拉伯单词时，结果注释中没有查找注释，谁能帮我让GATE识别阿拉伯字符并匹配它们，我认为utf-8不适合

Answer 1

可能是字符编码问题。您可以使用与 utf-8 不同的编码来创建包含一些阿拉伯单词的列表...

还要检查文档的编码，它也可能被破坏..

GATE 绝对有能力处理阿拉伯语。您可以在 GUI 中轻松验证一切是否正常。

查看使用 GATE 插件 Language: Arabic 创建的两个简单屏幕截图

检查地名词典列表是否正常:

检查文档是否正常: