app-store - 应用商店评论抓取不再有效

Question

与许多其他人一样，我使用了 http://blogs.oreilly.com/iphone/2008/08/scraping-appstore-reviews.html 中的一般准则。 (以及评论)构建一个脚本来抓取应用商店评论。 “Steve”于 2011 年 5 月 8 日发表的评论中的详细信息对我来说几周以来一直运行良好，显然从那时起也对很多人都有效。

但就在几天前，突然间，这不再起作用了。我知道 Apple 正在慢慢弃用旧版本的 iTunes，因此也弃用这些访问它们的方法。但是检索这些信息的新方法是什么？

因此，为了记录我正在使用:

• 网址 = http://ax.phobos.apple.com.edgesuite.net/WebObjects/MZStore.woa/wa/viewContentsUserReviews?id= &pageNumber=0&sortOrdering=2&type=紫色+软件
• 用户代理 = iTunes/9.2(Macintosh；U；PPC Mac OS X 10.6)
• X-Apple 店面:

这最近有效，但现在不再有效。

成功的测试是这个测试请求(针对美国的 Netflix 应用)应该可以从命令行运行:curl -A“iTunes/9.2(Macintosh；U；PPC Mac OS X 10.6)”-H“X-Apple-Store-Front:143441-1”'http://ax.phobos.apple.com.edgesuite.net/WebObjects/MZStore.woa/wa/viewContentsUserReviews?id=284222807&pageNumber=0&sortOrdering=2&type=Purple+Software'

有什么想法吗？

Answer 1

用https://itunes.apple.com替换http://ax.phobos.apple.com.edgesuite.net对我有用......