Python开发简单爬虫_技术问答

首页免费课 Python开发简单爬虫问答

Python开发简单爬虫

全部评论问答未解决精华

打印不出结果

+ 我来回答回答最高可+2积分

3 回答 815 浏览 5-3 Python爬虫urlib2实例代码演示

2016-01-07

control+1 怎么做到的，我这是mac ，我commod 和control 都试过了，不行啊

已采纳回答 / aleenlee

command +1可以

4 回答 1281 浏览 7-2 调度程序

2016-01-07

Jeffacode

应该是这样的：
def add_new_url(self, url):
if url is None:
raise Exception # 为None抛出异常
else:
self.new_urls.add(url)

def add_new_urls(self, urls):
if urls is None:
raise Exception
for url in urls:
try:
self.add_new_url(url)
except Exception:
continue # 遇到为None的直接忽视

3 7-3 URL管理器

2016-01-06

Jeffacode

还有，既然在调度程序中用了try except解决异常问题，这里的return不该改成raise Exception吗？

0 7-3 URL管理器

2016-01-06

Jeffacode

老师，你这里用是用了set()，但两个add_new并没有体现出用set的优势啊。。。

12 7-3 URL管理器

2016-01-06

top_zhou

很好，已看完，准备开始写,主要是来获取思路，讲得很好

0 8-1 课程总结

2016-01-06

输出结果和老师的不一样啊

最新回答 / 乔帮主

我得到的结果跟老师的也不一样，跟你的也不一样，估计是页面链接是动态生成的吧，是变化的！

1 回答 870 浏览 5-3 Python爬虫urlib2实例代码演示

2016-01-05

no mould named baike_spider

最新回答 / 幕布斯2155728

我也是，3.5不行

3 回答 908 浏览 7-7 开始运行爬虫和爬取结果展示

2016-01-05

xckkkk

楼下的直接写第三段的都是错的，没有import http.cookiejar绝对都是http not defined

1 5-3 Python爬虫urlib2实例代码演示

2016-01-05

chloeM

BeautifulSoup比xpath精确度差一点，而且一旦节点相同属性却不相同，很有可能会爬的乱七八糟

1 6-3 BeautifulSoup的语法

2016-01-05

老鹰杰森

我有点走火入魔了，还是回去学基础吧

0 7-2 调度程序

2016-01-04

glenhappy

这样的课程非常棒，期待以后多出点，不要仅仅学学web开发，不然以后就失业了！

0 8-1 课程总结

2016-01-04

glenhappy

老师是一个代码狂人，所以激动- _ -

2 7-2 调度程序

2016-01-04

glenhappy

老是讲的很好，希望以后可推出更多爬虫系列视频

1 6-4 BeautifulSoup实例测试

2016-01-04

glenhappy

添加特殊情景的处理器那个好拗口啊，啊啊啊，，，，

0 5-2 Python爬虫urlib2下载器网页的三种方法

2016-01-04

激斗龙图腾

老师讲得很好很清楚！

0 4-1 Python爬虫URL管理

2016-01-04

首页上一页 188 189 190 191 192 193 194 下一页尾页

该课程已下架

课程须知: 本课程是Python语言开发的高级课程 1、Python编程语法； 2、HTML语言基础知识； 3、正则表达式基础知识；

老师告诉你能学到什么？: 1、爬虫技术的含义和存在价值 2、爬虫技术架构 3、组成爬虫的关键模块：URL管理器、HTML下载器和HTML解析器 4、实战抓取百度百科1000个词条页面数据的抓取策略设定、实战代码编写、爬虫实例运行 5、一套极简的可扩展爬虫代码，修改本代码，你就能抓取任何互联网网页！

微信扫码，参与3人拼团

热搜

最近搜索清空