python - urllib2 不返回完整网页

Question

我刚开始使用 Python，我正在尝试使用 urllib2 请求站点的 html 源代码。但是，当我尝试从站点获取 html 内容时，我没有获取完整的 html 内容 - 缺少标签。我知道它们丢失了，因为当我在 Firebug 中查看该站点时，代码出现了。这是由于我请求数据的方式 - 还是由于网站？如果是的话，有什么方法可以用 python 获取站点的完整源代码，然后对其进行解析？

目前我用来请求内容的代码和我正在尝试的网站是:

import urllib2

url = 'http://marinetraffic.com/ais/'
response = urllib2.urlopen(url)
html = response.read()
print(html)

特别是 - div id="map_area"- 之间的内容丢失了。非常感谢任何帮助/指点!

Answer 1

您获得的数据不完整，因为此页面上的大部分内容都是通过 Javascript 动态生成的...