Python开发简单爬虫_技术问答

首页免费课 Python开发简单爬虫问答

Python开发简单爬虫

全部评论问答未解决精华

为什么response1.read()内容打印不出来？？

最新回答 / 柯伊伯带的一颗小星星

这个要看你print的是什么。

1 回答 1419 浏览 5-3 Python爬虫urlib2实例代码演示

2016-01-27

报错：unbound method

最赞回答 / Effortjohn

出错原因应该是你没把 HtmlOutputer 给实例化。可以检查调度程序spider_main.py中的class SpiderMain里的def __init__(self):有没有这个语句：self.outputer = html_outputer.HtmlOutputer()

3 回答 1149 浏览 7-7 开始运行爬虫和爬取结果展示

2016-01-27

失败了，报错如下

最新回答 / AILun_po

init前后的下划线都是2个

3 回答 834 浏览 7-7 开始运行爬虫和爬取结果展示

2016-01-27

输出的网页内容是乱码？

最赞回答 / Ariesfish

代码中设定了输出编码是utf-8，但是没有在html head中加入该网页的编码格式，浏览器就用默认的编码方式去解析了。在<...code...>下面追加输出<...code...>就可以解决了。

6 回答 1131 浏览 7-6 HTML输出器

2016-01-27

self.urls = url_manager.UrlManager()显示 undefined variable：self

+ 我来回答回答最高可+2积分

3 回答 2033 浏览 7-2 调度程序

2016-01-27

我通过print跟踪发现new_urls读不到内容，len不出结果，导致循环走不下去，parse过程可以获得正常的url

最新回答 / celestshakey

跟踪代码发现是urls的输出没问题，就是data的输出有问题导致整个数据组的输出有问题。把data里面found改为find就成功了

1 回答 765 浏览 7-7 开始运行爬虫和爬取结果展示

2016-01-27

为什么我按Ctrl+E快捷键没有老师一样的import选项呢

最新回答 / 慕函数0019356

嗯啊，是

2 回答 776 浏览 7-2 调度程序

2016-01-26

这种报错怎么处理

最新回答 / 慕粉1473315927

怎么改呀QAQ我也出现了这个问题

3 回答 1769 浏览 7-7 开始运行爬虫和爬取结果展示

2016-01-25

运行代码时出现 'module' object has no attribute 'HtmlParser'报错

已采纳回答 / 啊B

html_parser文件中 HtmlParser方法不存在，或者是名字写错了，自己检查一下

3 回答 4150 浏览 7-7 开始运行爬虫和爬取结果展示

2016-01-24

老师怎么提高爬取的速度

最新回答 / 慕移动9181930

有时间一定出请关注慕课网你的ul.labelTextli的folat:left冒号用的中文，还误打误撞的用对了。我还说怎么我写的跟你一模一样怎么我最后出来的结果就死活不行呢...

2 回答 864 浏览 7-7 开始运行爬虫和爬取结果展示

2016-01-24

课程中，eclipse如何快捷创建新class？

最赞回答 / qq_Autor_man_0

shiftl+alt+n,然后按c新建class

2 回答 5690 浏览 7-2 调度程序

2016-01-23

结果只有一条数据

最赞回答 / Julie1011

我找到原因了自己太不仔细了有的单词拼错了，同样问题的童鞋好好检查下自己的代码

1 回答 855 浏览 7-7 开始运行爬虫和爬取结果展示

2016-01-21

html乱码

最赞回答 / lqc

搜索了半天找到解决办法了 open('output.html', 'w', encoding='utf-8')然后write的时候不进行encoding

3 回答 871 浏览 7-5 HTML解析器html_parser

2016-01-20

安装beautifulsoup4的问题

已采纳回答 / SparkSinton

提示错误是什么呢？截图可以Po 上来

4 回答 2205 浏览 6-3 BeautifulSoup的语法

2016-01-19

补充几张图片示例：1.光标放到UrlManager再Alt+Enter键出来选择下拉列表，选择第一个，创建了class UrlManager()。<...图片...>2.url管理器的几个方法都已经高亮显示了<...图片...>3.把光标add_new_url（）按Alt+Enter键可以创建该方法。<...图片...>4. 重复3步骤，创建has_new_url()，add_new_urls（）方法<...图片...>

11 回答 4569 浏览 7-2 调度程序

2016-01-19

首页上一页 81 82 83 84 85 86 87 下一页尾页

该课程已下架

课程须知: 本课程是Python语言开发的高级课程 1、Python编程语法； 2、HTML语言基础知识； 3、正则表达式基础知识；

老师告诉你能学到什么？: 1、爬虫技术的含义和存在价值 2、爬虫技术架构 3、组成爬虫的关键模块：URL管理器、HTML下载器和HTML解析器 4、实战抓取百度百科1000个词条页面数据的抓取策略设定、实战代码编写、爬虫实例运行 5、一套极简的可扩展爬虫代码，修改本代码，你就能抓取任何互联网网页！

微信扫码，参与3人拼团

热搜

最近搜索清空

Python开发简单爬虫