gpt4 book ai didi

xml - 使用 Perl XML::DOM 模块的解析器错误, "reference to invalid character number"

转载 作者:数据小太阳 更新时间:2023-10-29 01:47:50 27 4
gpt4 key购买 nike

我是一个完全的 Perl 新手,但我确信学习 Perl 比弄清楚如何在 awk 中解析 XML 更容易。我想从这个数据集中解析 .sgm 文件:

http://kdd.ics.uci.edu/databases/reuters21578/reuters21578.html

这是十年前来自新闻专线的 20,000 篇路透社文章的集合,是特定类型文本处理的标准测试集。为了简化我的 perl 测试,我从第一个文件中抓取了前几百行并制作了 test.sgm 直到我的脚本在上面正确运行。它开始是这样的:

<!DOCTYPE lewis SYSTEM "lewis.dtd">
<REUTERS TOPICS="YES" LEWISSPLIT="TRAIN" CGISPLIT="TRAINING-SET" OLDID="5544" NEWID="1">
<DATE>26-FEB-1987 15:01:01.79</DATE>
<TOPICS><D>cocoa</D></TOPICS>
<PLACES><D>el-salvador</D><D>usa</D><D>uruguay</D></PLACES>
<PEOPLE></PEOPLE>
<ORGS></ORGS>
<EXCHANGES></EXCHANGES>
<COMPANIES></COMPANIES>
<UNKNOWN>
&#5;&#5;&#5;C T
&#22;&#22;&#1;f0704&#31;reute
u f BC-BAHIA-COCOA-REVIEW 02-26 0105</UNKNOWN>
<TEXT>&#2;
<TITLE>BAHIA COCOA REVIEW</TITLE>
<DATELINE> SALVADOR, Feb 26 - </DATELINE><BODY>Showers continued throughout the week in
the Bahia cocoa zone, alleviating the drought since early
January and improving prospects for the coming temporao,...

我使用了来自 http://www.xml.com/pub/a/2001/05/16/perlxml.html 的 perl 脚本举个例子,最后是这个,extract.pl:

use XML::DOM;

my $file = $ARGV[0];

my $parser = XML::DOM::Parser->new();
my $doc = $parser->parsefile($file);

#print $doc->getElementsByTagName('DATE');

print "\n";

我得到了这个输出:

> perl extract.pl test.sgm

reference to invalid character number at line 11, column 0, byte 343 at /usr/lib64/perl5/vendor_perl/5.8.5/x86_64-linux-thread-multi/XML/Parser.pm line 187
>

Google 无济于事(点击率最高的页面似乎出现了与我相同的错误),而我的 Perl 黑客 friend 仍在维加斯的 Blackhat 大会上留连忘返。任何想法我做错了什么,或者我如何清理文件?我假设坏事发生在那个“未知”标签内,我什至不需要它。我真的只想从每篇文章中提取文本。如果您需要更多信息,请告诉我。

最佳答案

数字字符引用“”在有效的 XML 文档中是不合法的。我建议您参阅 4.1 Character and Entity References 部分在 XML 推荐中:

Characters referred to using character references MUST match the production for Char.

现在,如果我们点击链接并查看 production for Char :

Char ::= #x9 | #xA | #xD | [#x20-#xD7FF] | [#xE000-#xFFFD] | [#x10000-#x10FFFF]

我们看到有些字符既不能按字面意义出现,也不能作为有效 XML 文档中的数字字符引用出现。

奇怪的是;我今天学到了一些关于 XML 的东西:)。

ASCII control characters in XML 上查看此对话寻找可能的解决方法。

关于xml - 使用 Perl XML::DOM 模块的解析器错误, "reference to invalid character number",我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/1223391/

27 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com