Python开发简单爬虫_技术问答

首页免费课 Python开发简单爬虫问答

Python开发简单爬虫

全部评论问答未解决精华

慕瓜3042076

python 3.5
用的是PyCharm 2017
https://github.com/Kaen-Lee/MyFiles
这里综合了自己和别人的代码，修改了好多，完美运行
需要的可以看看
大家加油！

8 7-7 开始运行爬虫和爬取结果展示

2018-01-27

一颗恒心闯天下

pip install beautifulsoup4

1 6-2 BeautifulSoup模块介绍和安装

2018-01-26

请问各位大神有没有3.6版本的最后那个项目源码

已采纳回答 / 纯爱枫若情

我用的就是Python 3.6.1，你可以去我的github看源码，我自己做了一些修改，上面还提供了爬取后的生成的页面的效果图

1 回答 1271 浏览 7-7 开始运行爬虫和爬取结果展示

2018-01-25

j唯一

老师这代码写完一点要测一点吧，对于我们菜鸟来说一气呵成很容易出错啊

2 7-7 开始运行爬虫和爬取结果展示

2018-01-24

我是葛伦儿

如果出现错误：SyntaxError: Non-ASCII character '\xe7'
就在第一行加上下面这行即可：
#-*- coding: UTF-8 -*-

1 5-2 Python爬虫urlib2下载器网页的三种方法

2018-01-24

请问有没有有源代码？

+ 我来回答回答最高可+2积分

0 回答 829 浏览

2018-01-23

404NotFound945

2018年了 http 协议快完了全是https协议啦。。

0 7-7 开始运行爬虫和爬取结果展示

2018-01-23

小白学编程666

直接 crow failed
然后就没了 -_-||

4 7-7 开始运行爬虫和爬取结果展示

2018-01-22

Bonjour_Carol

python 3.6.0 版本下代码参考，完成作业的时候遇到问题也有参考前面同学的代码进行了修改，希望后面来学习的小伙伴都可以顺利完成，得到提升。
https://github.com/zhangyan123/PythonCrawler

0 8-1 课程总结

2018-01-22

chenjunjie

good 耐思

0 5-3 Python爬虫urlib2实例代码演示

2018-01-22

运行结果报错解决

最新回答 / 林河

baike_spider.url_manager.UrlManager，这个文件里没有get_new_url方法，你是不是命名出错了

1 回答 891 浏览 7-5 HTML解析器html_parser

2018-01-22

爬虫这课程的代码呢？

已采纳回答 / chenjunjie

<...code...>

2 回答 1486 浏览 5-1 Python爬虫网页下载器简介

2018-01-22

qq_记录_13290315

使用requests遇到TooManyRedirects:Exceeded 30 redirects的错误，加入User-Agent就行了：
s = requests.session()
s.headers['User-Agent'] = 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/62.0.3202.89 Safari/537.36'
r = s.get(url)
r.encoding = 'utf-8'

2018-01-20

_名字很奇怪3801458

哈哈又变强了！

0 8-1 课程总结

2018-01-20

Python中四个双引号是什么意思？？ """"

最赞回答 / Enduo

如： s1 = "hello,world" 如果要写成多行，那么就要使用/ (“连行符”)吧，如 s2 = "hello,/ world" s2与s1是一样的。如果你用3个双引号的话，就可以直接写了，如下： s3 = """hello, world, hahaha."""

3 回答 3942 浏览 6-4 BeautifulSoup实例测试

2018-01-19

慕粉2224474327

不会python，主要学习下爬虫的思想

1 5-2 Python爬虫urlib2下载器网页的三种方法

2018-01-19

首页上一页 44 45 46 47 48 49 50 下一页尾页

该课程已下架

课程须知: 本课程是Python语言开发的高级课程 1、Python编程语法； 2、HTML语言基础知识； 3、正则表达式基础知识；

老师告诉你能学到什么？: 1、爬虫技术的含义和存在价值 2、爬虫技术架构 3、组成爬虫的关键模块：URL管理器、HTML下载器和HTML解析器 4、实战抓取百度百科1000个词条页面数据的抓取策略设定、实战代码编写、爬虫实例运行 5、一套极简的可扩展爬虫代码，修改本代码，你就能抓取任何互联网网页！

微信扫码，参与3人拼团

热搜

最近搜索清空