仔细看看你的代码哪里写的有问题，估计是不仔细。或者是你爬的网页有问题，换个东西爬爬看

刚看到一个最近的相似的问题-_-||有可能你的try-except中间的print 'craw %d : %s' %(count, new_url)到except那一块某个地方使用的代码打错了而不是self.urls.has_new_url()==0导致的错误，python的百科里面是有别的链接的，你可以试着把try-except去掉，让错误直接显示出来中间这一块指的是：html_cont=self.downloader.download(new_url)new_urls,new_data=self.pa...

这只是简单的讲了讲，有兴趣的下来还有很多要学。