Python开发简单爬虫_技术问答

首页免费课 Python开发简单爬虫问答

Python开发简单爬虫

全部评论问答未解决精华

提示object has no attribute 'new_urls'，看了好多遍，和老师写的一样啊，也没空格大小写问题

最新回答 / 不羁追梦人

看看UrlManager类构造器里有没有定义new_urls

1 回答 6376 浏览 7-3 URL管理器

2017-12-23

用eclipse写python用事先导入requests库吗

最新回答 / 慕仰8237914

导入 urllib2,cookielib就行

1 回答 1416 浏览 5-3 Python爬虫urlib2实例代码演示

2017-12-23

求助!!!

最新回答 / 牛皮吹

网页解析的时候要看网页html head里面网页的编码，编码不匹配就解析不了

1 回答 892 浏览 7-5 HTML解析器html_parser

2017-12-22

为什么解析后的url要放进url管理器里？

已采纳回答 / Lovins

添加到 url管理器中才能循环访问 url，爬取相关数据。如果不添加进去，只会爬取 root_url的数据了。

1 回答 1341 浏览 7-2 调度程序

2017-12-22

Traceback (most recent call last)，报这样的错误是因为什么呀？

最新回答 / 穷将人

new_url = self.new_urls.pop()，这个是set【】集合，可以pop才是正确的。"new_url = self.add.new_urls.pop()"是函数，你仔细看代码

1 回答 41170 浏览 7-7 开始运行爬虫和爬取结果展示

2017-12-21

soup.find()

最新回答 / 哈太考虑

找到了……href拼错了

1 回答 1248 浏览 6-4 BeautifulSoup实例测试

2017-12-19

len() of unsized object这个报错是什么原因么

+ 我来回答回答最高可+2积分

0 回答 10483 浏览

2017-12-18

mac 下pycharm的快捷键导入、创建都没用...

最新回答 / weibo_笙箫笑竹_0

我也遇到这个问题，请问怎么解决，我用的是pycharm

6 回答 3024 浏览 7-2 调度程序

2017-12-14

这是什么问题求解答

+ 我来回答回答最高可+2积分

2 回答 962 浏览 7-7 开始运行爬虫和爬取结果展示

2017-12-13

pip install urlib2报错

最新回答 / 丶子非鱼

python 版本是2.7.14

1 回答 1394 浏览 5-3 Python爬虫urlib2实例代码演示

2017-12-12

Traceback (most recent call last): in from baike_spider import html_downloader, html_parser, html_outputer, url_manager

最新回答 / helloworldfyy

你好，你的问题解决了吗，我的问题和你的一样呀...

2 回答 4752 浏览 7-7 开始运行爬虫和爬取结果展示

2017-12-10

为什么没有显示方法？

最新回答 / 慕UI3524263

用的sublime,表示无能为力什么显示方法,?直接在新模块创建空对象或函数?我猜第二个或许可以,如果这样的话那可能是因为root_url是函数参数而不是函数名记忆中老师好像用的是Eclipse,之所以会强答是因为我也纠结过为啥sublime啥也做不了,后来想通了编代码只给个记事本也得编,不能太在乎环境你如果真的很想用这些便捷可以用老师的软件,或者百度仔细看一下pydev的教程或官方文档

1 回答 1103 浏览 7-2 调度程序

2017-12-09

python爬虫运行报错 NameError: name 'BeautiflSoup' is not defined

最赞回答 / 三岁略萌

单词拼错了

1 回答 13571 浏览

2017-12-09

关于url的问题

最赞回答 / pcshao

原来是在html解析器里解析了页面中类似的/view/的带a标签的链接。

1 回答 868 浏览 7-2 调度程序

2017-12-07

AttributeError: module 'urllib.request' has no attribute 'urlopen'

最新回答 / qq_RC_1

是不是应该引入 urllib2

1 回答 1331 浏览 5-3 Python爬虫urlib2实例代码演示

2017-12-07

首页上一页 29 30 31 32 33 34 35 下一页尾页

该课程已下架

课程须知: 本课程是Python语言开发的高级课程 1、Python编程语法； 2、HTML语言基础知识； 3、正则表达式基础知识；

老师告诉你能学到什么？: 1、爬虫技术的含义和存在价值 2、爬虫技术架构 3、组成爬虫的关键模块：URL管理器、HTML下载器和HTML解析器 4、实战抓取百度百科1000个词条页面数据的抓取策略设定、实战代码编写、爬虫实例运行 5、一套极简的可扩展爬虫代码，修改本代码，你就能抓取任何互联网网页！

微信扫码，参与3人拼团

热搜

最近搜索清空

Python开发简单爬虫