Python开发简单爬虫_技术问答

首页免费课 Python开发简单爬虫问答

Python开发简单爬虫

全部评论问答未解决精华

NoneType object has no attribute to find

最新回答 / qq_特小林_0

审查元素没做好

2 回答 1738 浏览 7-7 开始运行爬虫和爬取结果展示

2018-05-01

KeyError: 'pop from an empty set'

最新回答 / 慕丝0946860

没有这个方法self.new_urls.add(url)

1 回答 2816 浏览 7-3 URL管理器

2018-04-29

关于输出内容

最新回答 / superplayer

能的吧

1 回答 996 浏览 7-7 开始运行爬虫和爬取结果展示

2018-04-28

为什么print response1跟response2为空

最新回答 / 慕数据6271798

print(len(response1.read())) 这个改成print(response1.read()) 就不为空了。需注意：如果先打印了print(len(response1.read()))，再打印print(response1.read()) 则打印就为空了。

4 回答 1358 浏览 5-2 Python爬虫urlib2下载器网页的三种方法

2018-04-27

百度百科词条内链接格式分中文链接和英文链接，这种格式该怎样设置html_parser的解析器呢

最赞回答 / 慕斯卡0853084

原来不用分情况，我想复杂了，直接将links = soup.find_all('a', href=re.compile(r"/item/.*")就可以，尴尬

2 回答 957 浏览 7-5 HTML解析器html_parser

2018-04-27

为什么乱码了？

最新回答 / 你好丶我姓宋

fout = open('output.html', 'w', encoding='utf-8')

然后把write时候的encode删掉

1 回答 5831 浏览

2018-04-26

ctrl+1自动创建类

+ 我来回答回答最高可+2积分

0 回答 630 浏览

2018-04-24

求教：为什么只爬了两个页面程序就运行结束了呢？

最新回答 / 三马同槽

把view和后面的全都改成item就行了，因为百度把url改了

1 回答 741 浏览

2018-04-23

求助，urllib2

最赞回答 / 慕容4121562

你的python版本是2.X 还是3.X python3.X 取消了urllib2 全部整合在urllib 里

1 回答 903 浏览 5-2 Python爬虫urlib2下载器网页的三种方法

2018-04-23

这个错误是什么原因？

最新回答 / lakerko

发现是class后面少了一个下划线“_”,为什么要加这个线，在哪找相关的文档？

1 回答 875 浏览

2018-04-21

老师你好，对着你的代码，我编译出现这个，我的是3.6版本

最新回答 / Mzurt

好了，终于运行成功啦！我又看了好几遍视频，原来是UrlManager下的def add_new_url(self,url):这个少写了一个参数

1 回答 1129 浏览 7-3 URL管理器

2018-04-19

1. 这个软件是什么？？？ 2. 我需要下载那些软件，还有安装那些插件？？？？

+ 我来回答回答最高可+2积分

3 回答 1082 浏览 5-3 Python爬虫urlib2实例代码演示

2018-04-16

baike_spider这个模块不需要写什么吗

最新回答 / qq_相对丨眩变_0

baike_spider不是存放.py文件的包吗？？

1 回答 1026 浏览 7-2 调度程序

2018-04-16

pycharm怎么看1000个页面具体信息

最新回答 / qq_Hathaway_0

<...图片...>右击output.html文件，点击copy path，复制链接，然后在浏览器输入

2 回答 1195 浏览 7-7 开始运行爬虫和爬取结果展示

2018-04-15

怎么网页代码不出来

最赞回答 / 慕盖茨4085107

<...code...>

1 回答 857 浏览 5-3 Python爬虫urlib2实例代码演示

2018-04-15

首页上一页 21 22 23 24 25 26 27 下一页尾页

该课程已下架

课程须知: 本课程是Python语言开发的高级课程 1、Python编程语法； 2、HTML语言基础知识； 3、正则表达式基础知识；

老师告诉你能学到什么？: 1、爬虫技术的含义和存在价值 2、爬虫技术架构 3、组成爬虫的关键模块：URL管理器、HTML下载器和HTML解析器 4、实战抓取百度百科1000个词条页面数据的抓取策略设定、实战代码编写、爬虫实例运行 5、一套极简的可扩展爬虫代码，修改本代码，你就能抓取任何互联网网页！

微信扫码，参与3人拼团

热搜

最近搜索清空

Python开发简单爬虫