比如要抓取这条微博下的评论,通过抓取HTML来获取呢还是微博接口来获取,我看了下接口,需要一个授权获取access_token然后才能获取评论,直接通过代码怎么让用户授权获取access_token呢?
2 回答
杨__羊羊
TA贡献1943条经验 获得超7个赞
如果不是全量抓取,建议你用微博api来抓,如果爬虫来抓,是需要登录相关信息的,也就是在curl的时候需要带上cookie相关信息,会比较复杂,如果cookie有一定实效性更麻烦了
添加回答
举报
0/150
提交
取消