                        课程
                    
                        /后端开发
                        
                            /Python
                        
                        /Python开发简单爬虫

为什么解析后的url要放进url管理器里？

self.urls.add_new_urls(new_urls) 为什么解析后的url要放进url管理器里？

循环访问URL，爬取相关数据不是在解析器中的吗？URL管理器这步中只做了添加动作，添加进去的意义在哪？

06:47

希希同学

2017-12-22

源自：Python开发简单爬虫 7-2

关注问题我要回答

1340

操作

收起

1 回答

Lovins 回答被采纳 +2 积分
2017-12-23

添加到 url管理器中才能循环访问 url，爬取相关数据。如果不添加进去，只会爬取 root_url的数据了。

0 回复有任何疑惑可以回复我~

收起回答

希希同学提问者

非常感谢！

2017-12-25 回复有任何疑惑可以回复我~

希希同学提问者

循环访问URL，爬取相关数据不是在解析器中的吗？URL管理器这步中只做了添加动作，添加进去的意义在哪？

2017-12-25 回复有任何疑惑可以回复我~

0/150

提交

取消

Python开发简单爬虫

参与学习 227670 人
解答问题 1219 个

本教程带您解开python爬虫这门神奇技术的面纱

进入课程

为什么解析后的url要放进url管理器里？

我要回答关注问题

热搜

最近搜索清空

为什么解析后的url要放进url管理器里？

1 回答

为什么解析后的url要放进url管理器里？