Scrapy+Xpath+Python：无法抓取数据点

Question

我想在这里抓取网址：我试过这些：response.xpath('//header[@class="geodir-entry-header"]/a/@href').extract()response.xpath('//div[class="geodir-content "]/header/a/@href').extract()response.xpath('//div[@class="geodir-content "]/header[@class="geodir-entry-header"]/a/@href').extract()都返回了一个空列表。

Answer 1

做

response.xpath('//h3[@class="geodir-entry-title"]/a/@href').extract() 或者 response.xpath('//header[@class="geodir-entry-header"]/h3/a/@href').extract()

为你工作？

看起来您刚刚错过了h3包含a您需要的标签的标签。

Answer 2

您所需要的只是添加您不小心错过的 h3 标签。

response.xpath('//header[@class="geodir-entry-header"]/h3/a/@href').extract()

&如果您只想获取第一个网址，请添加

response.xpath('//header[@class="geodir-entry-header"]/h3/a/@href').extract_first()

或者

response.xpath('//header[@class="geodir-entry-header"]/h3/a/@href').extract()[0]