r - 网页抓取需要点击鼠标？

Question

我正在尝试(在 R 中)从以下位置抓取一些数据:

http://www.soccerbase.com/matches/results.sd?date=2012-11-04

即，我想获得当您按下 i 按钮时出现在页面上的比赛详情。但是，点击按钮时出现的信息并不包含在原始 html 代码中。我只能看到一条线(我希望包含数据的地方)...

<span class="infoField"><a href="#" class="info finished" title="Show full match details"></a></span>

......这几乎让我陷入了死胡同......有什么想法吗？

Answer 1

require(XML)
require(RCurl)
dataurl<-'http://www.soccerbase.com/matches/results.sd?date=2012-11-04'
sdata<-htmlParse(dataurl)
sid<-xpathSApply(sdata,'//*/tr/@id')
sid<-gsub('^tgc','',sid)
mUrl<-paste0('http://www.soccerbase.com/matches/additional_information.sd?id_game=',sid)

上面的代码将获得额外数据所需的 url。但是，我会与该网站核实有关收集他们的数据的信息。