Python开发简单爬虫_技术问答

首页免费课 Python开发简单爬虫问答

Python开发简单爬虫

全部评论问答未解决精华

在抓取一个页面时HTMLParser.HTMLParseError: malformed start tag

最新回答 / Snail_87103145

$ pip install beautifulsoup4$ pip install html5libPython:from bs4 import BeautifulSoupimport urllib2url = 'http://www.example.com'page = urllib2.urlopen(url)soup = BeautifulSoup(page.read(), 'html5lib')links = soup.findAll('a')for link in links: print ...

1 回答 2229 浏览 6-4 BeautifulSoup实例测试

2016-10-11

为什么程序正常运行没有输出结果

最新回答 / oasis77

贴出代码的运行结果才能判断是什么原因以下结果表示正确运行——Process finished with exit code 0

1 回答 1645 浏览 7-7 开始运行爬虫和爬取结果展示

2016-10-10

输出文件output.html里没有记录

+ 我来回答回答最高可+2积分

2 回答 1455 浏览 7-7 开始运行爬虫和爬取结果展示

2016-10-10

运行显示 print'craw %d : %s' % (count, new_url) ^ SyntaxError: invalid syntax

最赞回答 / oasis77

如果用的python 3.x , 就要这样输出：print("craw %d : %s"%(count, new_url))

1 回答 2230 浏览 7-2 调度程序

2016-10-10

爬取失败和在parser模块中的soup前面有个小黄三角。

+ 我来回答回答最高可+2积分

1 回答 564 浏览

2016-10-09

求类似代码分享

最新回答 / 中宁0

http://blog.csdn.net/u013162562/article/details/52593813

1 回答 428 浏览 7-7 开始运行爬虫和爬取结果展示

2016-10-09

ascii码错误

最新回答 / 慕仔5574918

try: new_url = self.url.get_new_url().encode('utf-8')刚改好，如果你是python2.7版本，需要在此处加上 encode('utf-8')，本人亲验

1 回答 558 浏览 7-7 开始运行爬虫和爬取结果展示

2016-10-08

为什么感觉我的第三个结果把前面的覆盖了

最赞回答 / Torres0521

<...图片...>代码和结果是这样的

3 回答 553 浏览 5-3 Python爬虫urlib2实例代码演示

2016-10-07

html_parser里面的parse的return值顺序问题

+ 我来回答回答最高可+2积分

0 回答 966 浏览

2016-10-06

求视频源码

最新回答 / 才小圣

可以自己跟着敲一遍的，如果需要的话我这里有

1 回答 567 浏览 7-7 开始运行爬虫和爬取结果展示

2016-10-06

html.parser后缺了一个逗号

最新回答 / OMG快到碗里来

纳尼？

2 回答 507 浏览 6-3 BeautifulSoup的语法

2016-10-06

为什么最多只能爬取79条？

最新回答 / 创建香菇

楼上说的对，注释里面已经讲清楚了，所以是百科词条的原因，可以把count限制在50，或者换一个root_url，或者当出现nonetype的时候就结束运行。

2 回答 602 浏览 1-1 Python开发简单爬虫课程介绍

2016-10-05

只能爬取两条，没报错，请问是什么问题？

最新回答 / leve__9

try?要怎么改呢我的是这样的<...图片...>

2 回答 594 浏览 7-7 开始运行爬虫和爬取结果展示

2016-10-05

首页上一页 52 53 54 55 56 57 58 下一页尾页

该课程已下架

课程须知: 本课程是Python语言开发的高级课程 1、Python编程语法； 2、HTML语言基础知识； 3、正则表达式基础知识；

老师告诉你能学到什么？: 1、爬虫技术的含义和存在价值 2、爬虫技术架构 3、组成爬虫的关键模块：URL管理器、HTML下载器和HTML解析器 4、实战抓取百度百科1000个词条页面数据的抓取策略设定、实战代码编写、爬虫实例运行 5、一套极简的可扩展爬虫代码，修改本代码，你就能抓取任何互联网网页！

微信扫码，参与3人拼团