为了账号安全,请及时绑定邮箱和手机立即绑定

scrapy爬虫循环页码这样对吗?

scrapy爬虫循环页码这样对吗?

尚方宝剑之说 2018-10-09 16:15:15
scrapy爬虫,要爬取1-100页的内容,用循环把网址生成,代码如下:def start_requests(self):     pages=[]         for i in range(1,100):         newpage=scrapy.Request("http://www.yyyy.com/yyy/yyy-list.php?page=%s"%i)         pages.append(newpage)return pages这样对吗?
查看完整描述

1 回答

  • 1 回答
  • 0 关注
  • 1398 浏览
慕课专栏
更多

添加回答

举报

0/150
提交
取消
微信客服

购课补贴
联系客服咨询优惠详情

帮助反馈 APP下载

慕课网APP
您的移动学习伙伴

公众号

扫描二维码
关注慕课网微信公众号