Python开发简单爬虫_技术问答

首页免费课 Python开发简单爬虫问答

Python开发简单爬虫

全部评论问答未解决精华

毛线快跑

很好，言简意赅。

0 8-1 课程总结

2016-01-13

dsqtb

终于搞了出来，总结一下，希望多些不同类型的爬虫教程，更希望和现在移动互联网api 相结合，从后端开发到前端调用，flask，mongoDB,等结合一下

1 7-6 HTML输出器

2016-01-13

okqd

一直纠结极客学院刚发现原来你们这里更好

2016-01-13

梁先生呀

已经看完。。。给赞一个！！！！

2 8-1 课程总结

2016-01-11

小篆

嗯很赞！

2 3-1 Python简单爬虫架构

2016-01-10

bestkayle

老师写的这个是不是类似于scrapy的简版框架呀

1 7-2 调度程序

2016-01-10

girafree

Python 3撸过。Vimo我爱你

2 7-5 HTML解析器html_parser

2016-01-10

qq_不作茧_0

终于弄出来了好开森

2 7-7 开始运行爬虫和爬取结果展示

2016-01-09

N无聊

讲得很好，很容易理解！

5 2-1 爬虫是什么

2016-01-08

sdd

视频内容很好，让我能够轻松入门python爬虫谢谢您您辛苦了

2 7-1 Python爬虫实例-分析目标

2016-01-08

YaphetDM

看了一遍算是简单了解下了思路。。期待后续课程。

1 8-1 课程总结

2016-01-08

Jeffacode

应该是这样的：
def add_new_url(self, url):
if url is None:
raise Exception # 为None抛出异常
else:
self.new_urls.add(url)

def add_new_urls(self, urls):
if urls is None:
raise Exception
for url in urls:
try:
self.add_new_url(url)
except Exception:
continue # 遇到为None的直接忽视

3 7-3 URL管理器

2016-01-06

Jeffacode

还有，既然在调度程序中用了try except解决异常问题，这里的return不该改成raise Exception吗？

0 7-3 URL管理器

2016-01-06

Jeffacode

老师，你这里用是用了set()，但两个add_new并没有体现出用set的优势啊。。。

12 7-3 URL管理器

2016-01-06

top_zhou

很好，已看完，准备开始写,主要是来获取思路，讲得很好

0 8-1 课程总结

2016-01-06

首页上一页 101 102 103 104 105 106 107 下一页尾页

该课程已下架

课程须知: 本课程是Python语言开发的高级课程 1、Python编程语法； 2、HTML语言基础知识； 3、正则表达式基础知识；

老师告诉你能学到什么？: 1、爬虫技术的含义和存在价值 2、爬虫技术架构 3、组成爬虫的关键模块：URL管理器、HTML下载器和HTML解析器 4、实战抓取百度百科1000个词条页面数据的抓取策略设定、实战代码编写、爬虫实例运行 5、一套极简的可扩展爬虫代码，修改本代码，你就能抓取任何互联网网页！

微信扫码，参与3人拼团

热搜

最近搜索清空

Python开发简单爬虫