gpt4 book ai didi

c# - 解析 RSS 提要最近引发文档类型定义 (DTD) 错误

转载 作者:数据小太阳 更新时间:2023-10-29 01:58:02 35 4
gpt4 key购买 nike

这是一个最近开始困扰我的 rss 提要解析器的错误。今天早上我的四个 rss 提要开始抛出这个异常:

出于安全原因,此 XML 文档中禁止使用 DTD。要启用 DTD 处理,请将 XmlReaderSettings 上的 DtdProcessing 属性设置为 Parse,并将设置传递给 XmlReader.Create 方法。

代码过去工作正常,但我相信这四个特定的 rss 提要发生了变化,导致了这个问题。 Feed 在之前未使用 DTD 时使用 DTD,或者我的 SyndicationFeed 无法解析的某种模式更改。

所以我把我的代码改成了

string url = RssFeed.AbsoluteUri;
XmlReaderSettings st = new XmlReaderSettings();

st.DtdProcessing = DtdProcessing.Parse;
st.ValidationType = ValidationType.DTD;

XmlReader reader = XmlReader.Create(url,st);

SyndicationFeed feed = SyndicationFeed.Load(reader);

reader.Close();

然后我开始收到这个错误:

'html' 元素未声明。System.Xml.XmlValidatingReaderImpl.ValidationEventHandling.System.Xml.IValidationEventHandling.SendEvent(异常异常,XmlSeverityType 严重性)在 System.Xml.Schema.BaseValidator.SendValidationEvent(字符串代码,字符串 arg)在 System.Xml.Schema.DtdValidator System.Xml.Schema.DtdValidator.ValidateElement() System.Xml.Schema.DtdValidator.Validate() System.Xml.XmlValidatingReaderImpl.ProcessCoreReaderEvent() .Xml.XmlReader.MoveToContent() 在 System.Xml.XmlReader.IsStartElement(String localname, String ns) (XmlReader 阅读器)位于 System.ServiceModel.Syndication.SyndicationFeed.Load(XmlReader 阅读器)

我不知道这个“html”元素是从哪里来的,因为提要和提要中任何可见的 dtd 定义 (http://jobs.huskyenergy.com/RSS) 都没有提到它。我还尝试将 Dtdprocessing 设置为 DtdProcessing.ignore 但是这会导致以下错误:

名称为“html”且命名空间为“”的元素不是允许的提要格式。

这更令人困惑,因为命名空间是空白的,我不确定这个被上帝遗弃的 html 元素来自哪里。

我非常接近编写我自己的 xml 阅读器并抓取 SyndicationFeed,但是我想确保在走这条路之前用尽所有可能的解决方案。

如果有帮助的话,其中一个 rss 提要: http://jobs.huskyenergy.com/RSS

最佳答案

这是一个解决方案,它为/从给定的 RSS url 提供新的和填充的 SyndicationFeed 对象:

var feedUrl = @"http://jobs.huskyenergy.com/RSS";
try
{
var webClient = new WebClient();
// hide ;-)
webClient.Headers.Add ("user-agent", "Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.2; .NET CLR 1.0.3705;)");
// fetch feed as string
var content = webClient.OpenRead(feedUrl);
var contentReader = new StreamReader(content);
var rssFeedAsString = contentReader.ReadToEnd();
// convert feed to XML using LINQ to XML and finally create new XmlReader object
var feed = SyndicationFeed.Load(XDocument.Parse(rssFeedAsString).CreateReader());
// take the info from the firdst feed entry
var firstFeedItem = feed.Items.FirstOrDefault();
Console.WriteLine(firstFeedItem.Title.Text);
Console.WriteLine(firstFeedItem.Links.FirstOrDefault().Uri.AbsoluteUri);
}
catch (Exception exception)
{
Console.WriteLine(exception.Message);
}

该站点显然只处理来自“浏览器”的调用,因此伪装代码 resp。作为一个电话。结果是:

Summer Student UEO Regulatory & Environment Strategy - (Calgary, AB)
http://jobs.huskyenergy.com/ca/alberta/student/jobid4444904-summer-student-ueo-regulatory--environment-strategy-jobs

WebClient class还支持事件和任务的异步操作,因此让阅读器成为非阻塞是没有问题的。


html 问题的解释如下:网站更改了某些内容和/或他们以某种方式不允许自动提要(不再)。 html 消息来自服务中断 消息。我尝试访问该服务(使用 LINQ to XML 和 LINQPad,不要怀疑 Dump 函数):

var feedUrl = @"http://jobs.huskyenergy.com/RSS";
var feedContent = XDocument.Load(feedUrl);
feedContent.Dump();
//var feed = SyndicationFeed.Load(feedContent.CreateReader());
//feed.Dump();

得到了这个答案:

<!DOCTYPE html []>
<!--[if IE 7]><html lang="en" prefix="og: http://ogp.me/ns#" class="non-js lt-ie9 lt-ie8"><![endif]-->
<!--[if IE 8]><html lang="en" prefix="og: http://ogp.me/ns#" class="non-js lt-ie9"><![endif]-->
<!--[if gt IE 8]><!-->
<html lang="en" prefix="og: http://ogp.me/ns#" class="non-js">
<!--<![endif]-->
<head>
<meta charset="utf-8" />
<meta name="viewport" content="width=device-width" />
<title>
Service Interruption
</title>
<link rel="stylesheet" href="http://seostatic.tmp.com/SiteOutage/style.css" />
</head>
<body>
<p id="outageMessage">This system is currently experiencing a service interruption. <br />We apologize for any inconvenience.</p>
</body>
</html>

所以 html 元素显示出来了。 :-) 该站点在浏览器中打开时看起来很好,这意味着 XmlReader resp。 LINQ to XML 工作正常。

关于c# - 解析 RSS 提要最近引发文档类型定义 (DTD) 错误,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/19775345/

35 4 0
Copyright 2021 - 2024 cfsdn All Rights Reserved 蜀ICP备2022000587号
广告合作:1813099741@qq.com 6ren.com