为了账号安全,请及时绑定邮箱和手机立即绑定

【求解】nodejs豆瓣小组爬虫分析与解决。

【求解】nodejs豆瓣小组爬虫分析与解决。

侃侃无极 2019-03-30 09:28:54
豆瓣小组地址:http://www.douban.com/group/(采用request、http.get全部是403错误)(ALL)具体小组地址:http://www.douban.com/group/小组ID/例如:分页地址http://www.douban.com/group/kaopulove/discussion?start=数字(采用request、http.get,还是TM403错误)该小组下的具体主题地址:http://www.douban.com/group/topic/54905582/(采用request、http.get,吐血还是403错误)大伙有没有相应的解决方案呢?demo等等之类的,这TM的全是403错,这是为毛呢!!电影的那个爬虫我看过了,测试了是可以爬的。为毛小组爬不了呢?我也看了不少Python写的爬虫都有爬小组的。为毛nodeJS不行呢?
查看完整描述

2 回答

?
慕斯709654

TA贡献1840条经验 获得超5个赞

User-Agent修改了没有,
Cookie有没有禁止掉,
时间设置了没有,不要影响别人正常使用
                            
查看完整回答
反对 回复 2019-03-30
  • 2 回答
  • 0 关注
  • 360 浏览
慕课专栏
更多

添加回答

举报

0/150
提交
取消
意见反馈 帮助中心 APP下载
官方微信