为什么爬取360百科的时候下载的数据是b''
爬取百度百科是ok的,下载了100条数据,但是把spider_main文件里面的root_url改成360百科的链接,还有解析文件的匹配改了下。运行发现报错:'NoneType' object has no attribute 'find'
后面发现
request.urlopen(url)
下载下来的数据是b''
改了好久也不知道哪里出问题了。
爬取百度百科是ok的,下载了100条数据,但是把spider_main文件里面的root_url改成360百科的链接,还有解析文件的匹配改了下。运行发现报错:'NoneType' object has no attribute 'find'
后面发现
request.urlopen(url)
下载下来的数据是b''
改了好久也不知道哪里出问题了。
2019-09-02
举报