为了账号安全,请及时绑定邮箱和手机立即绑定

在add_new_urls方法内,是不是应该也判断下添加的新的urls是否在self.old_urls里面?

在add_new_urls方法内,是不是应该也判断下添加的新的urls是否在self.old_urls里面?

for url in urls:     if url not in self.old_urls:         self.new_urls.add(url)如果不添加的话,就会重复爬取吧?
查看完整描述

1 回答

?
weibo_小强同学慢慢走在冷风_0

TA贡献1条经验 获得超0个赞

问错地方了

查看完整回答
反对 回复 2016-01-15
  • 1 回答
  • 0 关注
  • 1470 浏览
慕课专栏
更多

添加回答

举报

0/150
提交
取消
意见反馈 帮助中心 APP下载
官方微信