                        课程
                    
                        /后端开发
                        
                            /Python
                        
                        /Python开发简单爬虫

为什么只爬去两个词条的网页，就不动了？？？？

运行代码时，为什么只爬去两个词条的网页，就不动了。。代码如下：

craw 1 : http://baike.baidu.com/view/21087.htm

craw 2 : http://baike.baidu.com/view/10812319.htm

追逐sunny

2016-10-17

源自：Python开发简单爬虫 7-7

关注问题我要回答

883

操作

收起

4 回答

塔兰图拉
2017-01-23

url-manager中

def has_new_url(self):

return len(self.new_urls) != 0

def get_new_url(self):

new_url = self.new_urls.pop()

self.old_urls.add(new_url)

return new_url

0 回复有任何疑惑可以回复我~

追逐sunny 提问者
2016-11-02

问题已经解决啦。。。。是匹配的不正确。修改以后，运行成功

0 回复有任何疑惑可以回复我~

#1

请问你是怎么解决的，怎么匹配不正确的啊

2016-12-06 回复有任何疑惑可以回复我~

#2

请问是怎么个匹配不正确？求教

2017-01-12 回复有任何疑惑可以回复我~

慕粉4324124
2016-11-01

我也出现这种情况了。打开第二个链接貌似是锁定词条？楼主问题解决了吗

0 回复有任何疑惑可以回复我~

yo_te_amo
2016-10-31

啥也没出来吗？按理说应该有异常抛出

0 回复有任何疑惑可以回复我~

举报

0/150

提交

取消

Python开发简单爬虫

参与学习 227670 人
解答问题 1219 个

本教程带您解开python爬虫这门神奇技术的面纱

为什么只爬去两个词条的网页，就不动了？？？？

我要回答关注问题

意见反馈帮助中心 APP下载