python - 网站在浏览器中打开但在 Python 中打开时返回 403

Question

有一个网站很高兴在浏览器中打开，但在 Python 中打开时返回 403 HTTP 错误，如下所示:

from bs4 import BeautifulSoup
import urllib2

link = 'http://niezalezna.pl/'

r = urllib2.urlopen(link).read()
soup = BeautifulSoup(r, 'lxml')

print soup.prettify()

该网站是一种流行的新闻服务。然后是否有可能使 URL 在使用上面的一段代码打开时返回 HTTP 403 错误？谢谢，

Answer 1

感谢上面的评论，找到了答案。代码如下，完整的答案可以在这里找到:Changing user agent on urllib2.urlopen

from bs4 import BeautifulSoup
import urllib2

link = 'http://niezalezna.pl/'

opener = urllib2.build_opener()
opener.addheaders = [('User-agent', 'Mozilla/5.0')]
response = opener.open(link)

soup = BeautifulSoup(response, 'lxml')

print soup.prettify()