                        课程
                    
                        /后端开发
                        
                            /Python
                        
                        /Python最火爬虫框架Scrapy入门与实践

每页最后的条目出现重复？

请教一下，按照老师的代码，为何抓取后每页最后的条目出现重复？即两个25、50......

慕仙2055982

2018-11-05

源自：Python最火爬虫框架Scrapy入门与实践 2-7

关注问题我要回答

967

操作

收起

2 回答

qq_过河之卒_0
2018-11-18

不用print（）时也会输出一次爬取到的item内容，看看是不是你填充item时print了一下？

0 回复有任何疑惑可以回复我~

收起回答

qq_爱吃猫的老鼠_1
2018-11-06

没有吧,你是不是代码有问题

0 回复有任何疑惑可以回复我~

收起回答

0/150

提交

取消

Python最火爬虫框架Scrapy入门与实践

参与学习 67423 人
解答问题 223 个

做为爬虫工程师Python Scrapy主流爬虫框架你必须要会！

进入课程

本课相似问答

3 回答我怎么解析出来就是最后一条数据

2 回答老师，如果在这个页面 https://movie.douban.com/top250中，只获取每条电影的链接，然后还要爬这个链接对应的页面信息。这样应该怎么设计和实现呢？

2 回答保存的csv格式文件每条信息之间有个空白行

1 回答循环抓取后页的问题

1 回答运行main.py后出现这些问题该如何解决

搜索更多本课相关问答

每页最后的条目出现重复？

我要回答关注问题

热搜

最近搜索清空

每页最后的条目出现重复？

2 回答

本课相似问答

每页最后的条目出现重复？