为了账号安全,请及时绑定邮箱和手机立即绑定

crawlspider中deny的设置无效?

crawlspider中deny的设置无效?

holdtom 2019-01-28 14:25:12
在Rule中设置了deny,但是并未生效:代码如下:'123123':(        Rule(LinkExtractor(allow='\d+-\d+-\d+/.*?-.*?.shtml', deny=('http://search.******.com.cn/.*?')),          callback='parse_item', follow=True),        Rule(LinkExtractor(allow='a[href^="http"]',deny_domains=('http://auto.******.com.cn')), follow=True)         )运行的时候还是有debug是禁止的链接
查看完整描述

1 回答

  • 1 回答
  • 0 关注
  • 521 浏览
慕课专栏
更多

添加回答

举报

0/150
提交
取消
意见反馈 帮助中心 APP下载
官方微信