Python开发简单爬虫_技术问答

首页免费课 Python开发简单爬虫问答

Python开发简单爬虫

全部评论问答未解决精华

使用pycharm时输出结果在浏览器上访问时现实乱码

最赞回答 / qq_我年轻_0

我也遇到了这个问题，很好解决。你们可以看一下任何一个网站的源码例如本网站<...code...>他会有这一句句话 <meta charset="utf-8">这就是 html 编码的约束。所以在 html_outputer.py 的这句话<...code...>前面添加<...code...>output_html() 方法应为：<...code...>

7 回答 4874 浏览 7-7 开始运行爬虫和爬取结果展示

2017-04-12

有python3.5的爬虫代码吗

已采纳回答 / qq_Oak_0

http://blog.csdn.net/stopcpp/article/details/69946607

5 回答 1230 浏览 7-7 开始运行爬虫和爬取结果展示

2017-04-09

为什么outputer里面collect_data方法的self.datas.append（data）不能写入数据，print为空

已采纳回答 / ciphermagic

是因为你的data是None，所以返回了吧。检查下html_parser的_get_new_data方法，看看查找的节点数据是否有误

1 回答 1419 浏览 7-6 HTML输出器

2017-04-05

这段代码哪里错了，为什么运行不了提示出错？

已采纳回答 / 逍遥游_xj

TypeError: __init__() got an unexpected keyword argument 'from_encoding'构造函数参数错误我猜你用的BeautifulSoup是BeautifulSoup3版本，3版本这个位置参数是：fromEncoding，你换这个参数名试一试

5 回答 2104 浏览 6-4 BeautifulSoup实例测试

2017-04-04

应该先看python进阶，还是继续跟着视频敲代码

已采纳回答 / 慕粉1414027800

敲代码好些

3 回答 1278 浏览 7-2 调度程序

2017-04-03

非常感谢老师 , 第一次接触python 已经会下载图片啦 , 分享出来大家共同学习

已采纳回答 / 陈新宇

看了网页内容更加坚定了我学爬虫的信念

2 回答 1286 浏览 7-7 开始运行爬虫和爬取结果展示

2017-03-26

第二条链接中开始含有中文例如这样 http://baike.baidu.com/item/史记·2016?fr=navbar 就跑不动了

已采纳回答 / qq_黑色契约_0

网址哪有中文不要转义网址好伐；summary要转中文

4 回答 840 浏览 7-7 开始运行爬虫和爬取结果展示

2017-03-25

只爬了两条，同样没有报错

最赞回答 / abc通配符123_

正则修改成：links=soup.find_all('a',href=re.compile(r"/item/"))

6 回答 829 浏览 7-7 开始运行爬虫和爬取结果展示

2017-03-21

re没有被定义，

已采纳回答 / 慕粉110145975

在开头导入re：import re

2 回答 859 浏览 6-4 BeautifulSoup实例测试

2017-03-21

请问前辈哪里出错了呢

已采纳回答 / 花菠萝

这是正确的输出结果，没有报错

1 回答 474 浏览 6-2 BeautifulSoup模块介绍和安装

2017-03-21

urljoin 找不到啊

已采纳回答 / Hanson_Meng

python3对urllib和urllib2进行了重构，拆分成了urllib.request, urllib.response, urllib.parse, urllib.error等几个子模块，这样的架构从逻辑和结构上说更加合理。urljoin现在对应的函数是urllib.parse.urljoin

1 回答 569 浏览 7-7 开始运行爬虫和爬取结果展示

2017-03-18

python3.5中import url_manager,html_downloader,html_parser,html_outputer ImportError: No module named 'html_parser'

最赞回答 / 时间的力量

我爬了一下好像最多只能爬下549条数据。对于正则表达式，可以参看图片<...图片...><...图片...><...图片...><...图片...>

6 回答 2264 浏览 7-5 HTML解析器html_parser

2017-03-17

这是啥软件，eclipse吗？

已采纳回答 / Silver_Magician

对，最基本的是eclipse,但是如果你希望能在eclipse上编写并且能运行Python程序的话还要再下载一个PyDev插件，这样子的话你就能成功在eclipse上编写Python程序了，望采纳，谢谢！

2 回答 589 浏览 5-3 Python爬虫urlib2实例代码演示

2017-03-10

这里对urllib2的提示是什么意思？

已采纳回答 / 风起了_

#coding:utf-8import urllib2url = "http://www.baidu.com"print "第一种方法"#直接请求response1 = urllib2.urlopen(url)#获取状态码print response1.getcode()#读取内容print len(response1.read())

2 回答 1034 浏览 5-3 Python爬虫urlib2实例代码演示

2017-03-10

pycharm里如何添加module

已采纳回答 / hu9134

直接创建一个Python File就行了

3 回答 3359 浏览 5-3 Python爬虫urlib2实例代码演示

2017-03-09

首页上一页 4 5 6 7 8 9 10 下一页尾页

该课程已下架

课程须知: 本课程是Python语言开发的高级课程 1、Python编程语法； 2、HTML语言基础知识； 3、正则表达式基础知识；

老师告诉你能学到什么？: 1、爬虫技术的含义和存在价值 2、爬虫技术架构 3、组成爬虫的关键模块：URL管理器、HTML下载器和HTML解析器 4、实战抓取百度百科1000个词条页面数据的抓取策略设定、实战代码编写、爬虫实例运行 5、一套极简的可扩展爬虫代码，修改本代码，你就能抓取任何互联网网页！

微信扫码，参与3人拼团

热搜

最近搜索清空

Python开发简单爬虫