Python开发简单爬虫_技术问答

首页免费课 Python开发简单爬虫问答

Python开发简单爬虫

全部评论问答未解决精华

结果打印有问题

最新回答 / 伸出圆手

<...code...>

2 回答 446 浏览 5-3 Python爬虫urlib2实例代码演示

2017-03-12

爬取数据问题

+ 我来回答回答最高可+2积分

2 回答 404 浏览 2-2 爬虫技术的价值

2017-03-11

这是啥软件，eclipse吗？

已采纳回答 / Silver_Magician

对，最基本的是eclipse,但是如果你希望能在eclipse上编写并且能运行Python程序的话还要再下载一个PyDev插件，这样子的话你就能成功在eclipse上编写Python程序了，望采纳，谢谢！

2 回答 648 浏览 5-3 Python爬虫urlib2实例代码演示

2017-03-10

这里对urllib2的提示是什么意思？

已采纳回答 / 风起了_

#coding:utf-8import urllib2url = "http://www.baidu.com"print "第一种方法"#直接请求response1 = urllib2.urlopen(url)#获取状态码print response1.getcode()#读取内容print len(response1.read())

2 回答 1105 浏览 5-3 Python爬虫urlib2实例代码演示

2017-03-10

pycharm里如何添加module

已采纳回答 / hu9134

直接创建一个Python File就行了

3 回答 3443 浏览 5-3 Python爬虫urlib2实例代码演示

2017-03-09

运行后报错如下

+ 我来回答回答最高可+2积分

3 回答 331 浏览 7-2 调度程序

2017-03-08

Python3学习爬虫出现NoneType问题

最新回答 / 四只小猪

请问问题解决了吗？我也遇到了这个，没有查到是为什么

3 回答 3213 浏览 7-5 HTML解析器html_parser

2017-03-08

什么都爬不到也不报错

最新回答 / 慕粉091431384

找到原因了！在html_parser中加上new_urls.add(new_full_url)这一句话<...图片...>

3 回答 428 浏览 7-7 开始运行爬虫和爬取结果展示

2017-03-03

爬取的数据为什么只有两条？

已采纳回答 / abc通配符123_

正则表达式修改成links=soup.find_all('a',href=re.compile(r"/item/"))

1 回答 586 浏览

2017-03-03

下载Htmlcont 为空

最新回答 / 慕移动9181930

应该是有。等我问一下慕课的工作人员。这句话的重点是“我在美国”麽。。。。

2 回答 469 浏览 8-1 课程总结

2017-03-03

网页长度长度不一样

最新回答 / 侏儒冰法

因为第二种方法伪装了header的agent，header也是作为网页内容返回的，所以长度不一样。

1 回答 490 浏览 5-3 Python爬虫urlib2实例代码演示

2017-03-02

输出乱码问题

最赞回答 / LoNice

fout = open('output.html', 'w', encoding='utf-8')fout.write("<td>%s</td>" % data['title'])fout.write("<td>%s</td>" % data['summary'])在页面开始解析的时候，使用utf-8解析，后面输出的时候就不需要的

3 回答 505 浏览 7-5 HTML解析器html_parser

2017-03-02

安装beautifulsoup出错

最新回答 / toneewang

http://www.360doc.com/content/16/1114/13/3852985_606449918.shtml 供参考python默认是ascii，由于中文的问题，我们需要把python的默认编码修改一下

5 回答 783 浏览 6-1 Python爬虫网页解析器简介

2017-02-28

无法执行，且控制台提示出错

最新回答 / 雨淋淋大王

正如老师所说 python的网址已经变了，不再是http://baike.baidu.com/view/21087需要更改入口网址还有修改下相关页面的遍历策略

2 回答 516 浏览 7-2 调度程序

2017-02-28

TypeError: add_new_urls() takes exactly 1 argument (2 given)

最新回答 / 慕粉1837489978

你的urlmanage中add_new_urls方法参数没写urls，少写一个

1 回答 526 浏览 7-3 URL管理器

2017-02-27

首页上一页 52 53 54 55 56 57 58 下一页尾页

该课程已下架

课程须知: 本课程是Python语言开发的高级课程 1、Python编程语法； 2、HTML语言基础知识； 3、正则表达式基础知识；

老师告诉你能学到什么？: 1、爬虫技术的含义和存在价值 2、爬虫技术架构 3、组成爬虫的关键模块：URL管理器、HTML下载器和HTML解析器 4、实战抓取百度百科1000个词条页面数据的抓取策略设定、实战代码编写、爬虫实例运行 5、一套极简的可扩展爬虫代码，修改本代码，你就能抓取任何互联网网页！

微信扫码，参与3人拼团

热搜

最近搜索清空

Python开发简单爬虫