为了账号安全,请及时绑定邮箱和手机立即绑定

求助,爬虫运行失败,错误提示如下

C:\Python27\python.exe C:/Users/Administrator/PycharmProjects/baike/baike/spider_main.py

craw 1 : https://baike.baidu.com/item/Python/407313?fr=aladdin

Traceback (most recent call last):

  File "C:/Users/Administrator/PycharmProjects/baike/baike/spider_main.py", line 34, in <module>

    obj_spider.craw(root_url)

  File "C:/Users/Administrator/PycharmProjects/baike/baike/spider_main.py", line 19, in craw

    new_urls,new_data = self.parser.parse(new_url,html_cont)

TypeError: 'NoneType' object is not iterable


Process finished with exit code 1


正在回答

1 回答

在获取节点的地方,加上try :   except:  处理一下

比如:

summary_node = soup.find('div',class_='lemma-summary')
try:
   res_data['summary'] = summary_node.get_text()
except:
   res_data['summary'] = ''

0 回复 有任何疑惑可以回复我~

举报

0/150
提交
取消
Python开发简单爬虫
  • 参与学习       227670    人
  • 解答问题       1219    个

本教程带您解开python爬虫这门神奇技术的面纱

进入课程

求助,爬虫运行失败,错误提示如下

我要回答 关注问题
意见反馈 帮助中心 APP下载
官方微信