python - Beautiful Soup 返回空 html

Question

所以这是我关于 Beautiful Soup 的第二个问题(抱歉，我是初学者)

我试图从这个网站获取数据:

https://www.ccna8.com/ccna4-v6-0-final-exam-full-100-2017/

我的代码:

from urllib.request import urlopen as uReq
from bs4 import BeautifulSoup as soup

url = 'https://www.ccna8.com/ccna4-v6-0-final-exam-full-100-2017/'

uClient = uReq(url)
page_html = uClient.read()
uClient.close()
page_soup = soup(page_html, "lxml")

print(page_soup)

但由于某种原因，它返回一个空字符串。

我一直在搜索类似的线程，显然它与使用外部 api 的网站有关，但该网站没有。

Answer 1

响应的内容类型似乎是 gzip，因此您需要先处理它，然后才能处理 html 响应。

from urllib.request import urlopen as uReq
from bs4 import BeautifulSoup as soup
import gzip

url = 'https://www.ccna8.com/ccna4-v6-0-final-exam-full-100-2017/'

uClient = uReq(url)
page_html = gzip.decompress(uClient.read())
uClient.close()
page_soup = soup(page_html, "lxml")
print(page_soup)