为了账号安全,请及时绑定邮箱和手机立即绑定

为什么用Beautifulsoup无法提取微博粉丝列表的page数

为什么用Beautifulsoup无法提取微博粉丝列表的page数

慕无忌1623718 2018-09-10 12:22:25
用python写小脚本想爬取新浪科技的粉丝http://weibo.com/1642634100/fans,先要获得粉丝页数,用chrome看到的html结构如下:写的脚本如下,获得的list为空def getFansPage(urlfans):     req = urllib2.Request(urlfans, headers=headers)     time.sleep(sletime)     html_sample = exceptRequest(req).read()     # 分析得到pagenum所在属性     soup = BeautifulSoup(html_sample,'html.parser')     pagenum = soup.find_all("a",class_="page prev S_txt1 S_line1 page_dis")    return pagenum后来发现这样连都是空的:pagenum = soup.find_all("a",class_="WB_frame")这是为什么呢?
查看完整描述

1 回答

  • 1 回答
  • 0 关注
  • 744 浏览
慕课专栏
更多

添加回答

举报

0/150
提交
取消
意见反馈 帮助中心 APP下载
官方微信