你好，想知道python scrapy 如何获取当前页面url?

Question

python scrapy 如何获取当前页面url

Answer 1

你好，在response中有url的信息，你可用下面的代码：
def parse(self, response):
print "URL: " + response.request.url

Answer 2

爬虫跟踪下一页的方法是自己模拟点击下一页连接，然后发出新的请求。请看：
item1 = Item()
yield item1
item2 = Item()
yield item2
req = Request(url='下一页的链接', callback=self.parse)
yield req
注意使用yield时不要用return语句。