为了账号安全,请及时绑定邮箱和手机立即绑定

使用起始网址在分页链接中刮擦不起作用

使用起始网址在分页链接中刮擦不起作用

开满天机 2021-05-14 19:19:30
我试图刮掉一个带有分页链接的网站,所以我这样做了import scrapyclass SummymartSpider(scrapy.Spider):    name = 'dummymart'    allowed_domains = ['www.dummrmart.com/product']    start_urls = ['https://www.dummymart.net/product/auto-parts--118?page%s'% page for page in range(1,20)]有效!!与单个网址,它的工作原理,但当我尝试做到这一点:  import scrapy    class DummymartSpider(scrapy.Spider):        name = 'dummymart'        allowed_domains = ['www.dummymart.com/product']        start_urls = ['https://www.dummymart.net/product/auto-parts--118?page%s',        'https://www.dummymart.net/product/accessories-tools--112?id=1316264860?page%s'% page for page in range(1,20)]它不起作用,但是对于多个URL,我如何实现相同的逻辑?谢谢
查看完整描述

1 回答

  • 1 回答
  • 0 关注
  • 149 浏览
慕课专栏
更多

添加回答

举报

0/150
提交
取消
意见反馈 帮助中心 APP下载
官方微信