Python开发简单爬虫_技术问答

首页免费课 Python开发简单爬虫问答

Python开发简单爬虫

全部评论问答未解决精华

奋斗107

URL管理器：防止重复抓取

1 4-1 Python爬虫URL管理

2017-05-11

Tmsnjy

谢谢老师，老师讲的很棒，思路清晰明确。0基础也能轻松写出来！
老师用的2 ，有用的3++可以参考我的源码： https://github.com/MarkNiu/BaiKe_Spider 有详细注释+输出页面美化！！！

4 7-1 Python爬虫实例-分析目标

2017-05-10

Tmsnjy

2017-05-10

CorningSun

python2.7.13 urllib2 def add_data(self, data) 方法只能接收一个参数

0 5-2 Python爬虫urlib2下载器网页的三种方法

2017-05-10

慕粉1625223798

运行程序后不会出现一个页面

0 7-7 开始运行爬虫和爬取结果展示

2017-05-09

Tmsnjy

教程很棒！！！谢谢老师

0 4-2 Python爬虫URL管理器的实现方式

2017-05-09

FishSeeker

用pathon2.7写的，欢迎下载
http://download.csdn.net/detail/fishseeker/9836582

3 1-1 Python开发简单爬虫课程介绍

2017-05-08

FishSeeker

很强，一小时入门

1 8-1 课程总结

2017-05-08

阿德1986

urllib2

0 5-2 Python爬虫urlib2下载器网页的三种方法

2017-05-08

慕粉1944452010

如果output.html输出乱码,可以在输出器中添加 fout.write('<meta charset="utf-8">')

2 7-7 开始运行爬虫和爬取结果展示

2017-05-07

codeListener

通俗易懂，爬虫概念大致了解

0 8-1 课程总结

2017-05-07

慕粉1944452010

输出正常。但是output.html内容少，并且还乱码，哪的问题？

0 7-7 开始运行爬虫和爬取结果展示

2017-05-07

英宁

老师厉害。一气呵成的代码，一个错误也米有~~~

4 7-7 开始运行爬虫和爬取结果展示

2017-05-07

qinggeouy

URL带中文、特殊字符的处理
百度了一番：
import urllib.request
from urllib.parse import quote
import string
url = "http://baike.baidu.com/item/史记·2016?fr=navbar";
url_ = quote(url, safe = string.printable);
response = urllib.request.urlopen(url_);

3 7-7 开始运行爬虫和爬取结果展示

2017-05-07

woyaoxue_c

打印乱码第一行加一句：# This Python file uses the following encoding: <encoding name>
参见 https://www.python.org/dev/peps/pep-0263/

0 5-3 Python爬虫urlib2实例代码演示

2017-05-07

首页上一页 46 47 48 49 50 51 52 下一页尾页

该课程已下架

课程须知: 本课程是Python语言开发的高级课程 1、Python编程语法； 2、HTML语言基础知识； 3、正则表达式基础知识；

老师告诉你能学到什么？: 1、爬虫技术的含义和存在价值 2、爬虫技术架构 3、组成爬虫的关键模块：URL管理器、HTML下载器和HTML解析器 4、实战抓取百度百科1000个词条页面数据的抓取策略设定、实战代码编写、爬虫实例运行 5、一套极简的可扩展爬虫代码，修改本代码，你就能抓取任何互联网网页！

微信扫码，参与3人拼团

热搜

最近搜索清空

Python开发简单爬虫