Python开发简单爬虫_技术问答

首页免费课 Python开发简单爬虫问答

Python开发简单爬虫

全部评论问答未解决精华

错误出现了

已采纳回答 / 六边形怪瓜

运行时失败的话你可以把这一段用<...code...>框起来，查看出错信息，另外你的出错信息没复制完

2 回答 738 浏览 7-7 开始运行爬虫和爬取结果展示

2016-12-21

用的是pycharm，python3.5，爬取失败，求助

已采纳回答 / 火上的冰

self.outputer = html_outputer.HtmlOutputer 这句话缺少()

2 回答 2468 浏览 7-4 HTML下载器html_downloader

2016-12-21

什么是爬虫？

已采纳回答 / 火上的冰

互联网是有很多的网页组成的，每个网页我们通过url来访问。使用程序对url进行下载、解析并在其中找到我们需要的数据，比如价格，图片，相关的url等，并把这些数据保存起来形成数据集。下载，解析，再下载，再解析的过程就是爬虫的过程。我们把这种通过url找寻数据的方法叫做爬虫。

1 回答 917 浏览 3-1 Python简单爬虫架构

2016-12-19

为什么我的len的结果只有227

已采纳回答 / prince_happy

可能是百度的，代码更新了吧

2 回答 821 浏览 5-3 Python爬虫urlib2实例代码演示

2016-12-10

报错---SyntaxError: invalid syntax，实在无奈，找了几天还没找出原因

已采纳回答 / 这个名字七个字

我的html_downloader代码头部加的是下面这个，没报错import urllib.request

4 回答 12755 浏览 7-2 调度程序

2016-12-02

用python2.7打完了之后运行失败

已采纳回答 / OMG快到碗里来

大兄弟你的源码能让我看看吗我的出不来结果先谢谢你了

2 回答 1032 浏览

2016-12-01

python 3.5 解析器代码问题

最新回答 / 猪猪的笨笨

感觉你是最近才学的吧。如果是，建议你学习一下基础，然后一个一个模块的学习使用。最后再一次使用多个模块。而且，这个视频的python和模块有点老，你要小心有很多坑，我就是被坑了很多次！！！

12 回答 2434 浏览 7-5 HTML解析器html_parser

2016-12-01

只输出craw1 后面就craw failed

+ 我来回答回答最高可+2积分

6 回答 1410 浏览 7-7 开始运行爬虫和爬取结果展示

2016-11-28

import urllib2 为什么报错啊

已采纳回答 / YYIN

如果你用的是python3的话，要把import urllib2写成import urllib.request

3 回答 1350 浏览 5-3 Python爬虫urlib2实例代码演示

2016-11-24

引入BeautifulSoup冒红线，但是我已经成功安装过BeautifulSoup4了

最赞回答 / pinro

应该是from bs4 import BeautifulSoup吧

8 回答 2766 浏览 6-4 BeautifulSoup实例测试

2016-11-24

小白求解python3.5报错

已采纳回答 / qq_Chandler_34038455

而且你最后link.get_text()是点，不是逗号，望采纳

4 回答 954 浏览 6-4 BeautifulSoup实例测试

2016-11-21

UserWarning: You provided Unicode markup but also provided a value for from_encoding. Your from_encoding will be ignored.

已采纳回答 / LUXIN66

python3 缺省的编码是unicode, 再在from_encoding设置为utf8, 会被忽视掉，代码是从python2转来的，去掉就可以了

2 回答 5232 浏览 6-4 BeautifulSoup实例测试

2016-11-19

urllib2中的request.add_data()的作用

已采纳回答 / 慕粉3962690

www.baidu.com 只是首页你要用他干什么呢比如你要用它搜索 python 他的链接请求就会变成 www.baidu.com?wd=python (这只是给你简单解释下真实的链接比较复杂做了很多处理) 自己搜下看下地址栏就知道了，简单来说就根据不同的请求参数可以让我抓取不同的页面和内容。ps:去了解HTTP协议的get请求和post请求。

3 回答 4369 浏览 5-2 Python爬虫urlib2下载器网页的三种方法

2016-11-11

BeautifulSoup的参数问题

已采纳回答 / 千里马123

前面是要解析的内容，后面的'html.parser'是指定解析器的意思。因为beautiful有不止一种解析器可以去解析内容。

1 回答 2289 浏览 7-5 HTML解析器html_parser

2016-11-05

link['href']，变量后加['href']是什么意思

已采纳回答 / 重明子

link是一个字典，link["herf"]就是找到“herf”的键值

3 回答 3378 浏览 7-5 HTML解析器html_parser

2016-11-02

首页上一页 6 7 8 9 10 11 12 下一页尾页

该课程已下架

课程须知: 本课程是Python语言开发的高级课程 1、Python编程语法； 2、HTML语言基础知识； 3、正则表达式基础知识；

老师告诉你能学到什么？: 1、爬虫技术的含义和存在价值 2、爬虫技术架构 3、组成爬虫的关键模块：URL管理器、HTML下载器和HTML解析器 4、实战抓取百度百科1000个词条页面数据的抓取策略设定、实战代码编写、爬虫实例运行 5、一套极简的可扩展爬虫代码，修改本代码，你就能抓取任何互联网网页！

微信扫码，参与3人拼团

热搜

最近搜索清空

Python开发简单爬虫