Python开发简单爬虫_技术问答

首页免费课 Python开发简单爬虫问答

Python开发简单爬虫

全部评论问答未解决精华

宕昌生活信息网

node['href']能获取到吗？

报错：TypeError: list indices must be integers, not str

0 6-3 BeautifulSoup的语法

2016-09-23

比武鱼

运行成功。我打算修改成360百科，改了spider_main的root网页，改了spider_parser下面那些参数，然后运行失败。。。不知哪里出错了

0 7-7 开始运行爬虫和爬取结果展示

2016-09-22

比武鱼

一步一步照抄代码，能运行成功，可是修改成360百科之后，爬了一条就失败了，不知哪里出错

1 7-7 开始运行爬虫和爬取结果展示

2016-09-22

童年不童样

谢谢老师的辛苦付出。

1 8-1 课程总结

2016-09-22

慕运维1789261

老师用的是什么IDE呀

0 7-2 调度程序

2016-09-22

书皮

太清晰了！！感谢老师。老师能否针对爬虫更高级、更深入的技术，设计后续的课程呢？收费的也可以啊。。。

1 8-1 课程总结

2016-09-21

慕码人3081050

正好用到这块，很不错

1 7-1 Python爬虫实例-分析目标

2016-09-21

ajiaoJoan

入门很棒，老师辛苦了

1 7-1 Python爬虫实例-分析目标

2016-09-21

60度向上倾斜

逻辑性太棒了。。。

23 7-1 Python爬虫实例-分析目标

2016-09-20

慕函数8739248

建议@安静_14 大侠给偶们这些小白补充拓展一下http和DOM相关必要的基础知识，灰常感谢

0 6-3 BeautifulSoup的语法

2016-09-17

昵称2_18位中英文

感谢 Yi罐可乐

通过对照+自己摸索我也总算成功了，每个人的代码可能都有小不同，这个要灵活变通，比如 Yi罐可乐把 parse 打成 paser 了，但是整个程序都用paser 所以也能运行成功。我之前的downloader忘记加er，_get_new_data打成了_get_data_url（偷懒复制自己打脸了。。(￣ε(#￣)），还有些小错误，不过后面都改好了。

推荐用视频中的IDE，我用pyCharm，一点都不人性化。。

0 7-7 开始运行爬虫和爬取结果展示

2016-09-16

王兴0

这绝对是干货

1 7-3 URL管理器

2016-09-16

刀剑与玫瑰

我竟然学完了！！！！！

2016-09-15

刀剑与玫瑰

好感动QAQ

2016-09-15

cxy86

soup = BeautifulSoup(
html_doc, #HTML文档字符串
'html.parser' #HTML解析器
from_encoding='utf8' #HTML文档的编码
)
这段代码会在from_encoding处报错invalid syntax

2 6-3 BeautifulSoup的语法

2016-09-14

首页上一页 74 75 76 77 78 79 80 下一页尾页

该课程已下架

课程须知: 本课程是Python语言开发的高级课程 1、Python编程语法； 2、HTML语言基础知识； 3、正则表达式基础知识；

老师告诉你能学到什么？: 1、爬虫技术的含义和存在价值 2、爬虫技术架构 3、组成爬虫的关键模块：URL管理器、HTML下载器和HTML解析器 4、实战抓取百度百科1000个词条页面数据的抓取策略设定、实战代码编写、爬虫实例运行 5、一套极简的可扩展爬虫代码，修改本代码，你就能抓取任何互联网网页！

微信扫码，参与3人拼团

热搜

最近搜索清空

Python开发简单爬虫