python - 无法使用 BeautifulSoup 解析 twitter 隐藏输入

Question

我正在尝试检索推文计数。我发现用户推文的实际数量在隐藏字段中。

其中，我正在使用 BeautifulSoup 进行解析:

def get_twitter(url):
  soup = BeautifulSoup(urllib2.urlopen(url))
  for match in soup.find_all("input", type="hidden"):
    print match

结果:[ 2

正如您所看到的，您可以在浏览器的屏幕截图中找到没有隐藏的输入字段。为什么会这样？

Answer 1

已解决。使用 Twitter API。不知怎的，我认为解析会更容易。感谢alecxe 的建议。

import simplejson
from twython import Twython

def get_twitter():
    t = Twython(app_key='', 
    app_secret='',
    oauth_token='',
    oauth_token_secret='')

    user = t.lookup_user(screen_name = username)
    print "Tweets: " + str(user[0]['statuses_count'])
    print "Followers: " + str(user[0]['followers_count'])
    print "Likes: " + str(user[0]['favourites_count'])