Python开发简单爬虫_技术问答

首页免费课 Python开发简单爬虫问答

Python开发简单爬虫

全部评论问答未解决精华

woider

Python 3.x 爬虫实例源码：https://github.com/woider/BaikeSpider

1 7-1 Python爬虫实例-分析目标

2016-10-02

终于好了，但是最后浏览器输入有问题啊

讲师回答 / 蚂蚁帅帅

<...图片...>如果是chrome浏览器的话，这样子设置一下编码。如果是其他浏览器的话，在菜单找一下。设置一下编码就好了。

2 回答 454 浏览

2016-10-02

woider

知道为什么你们只输出了一条记录吗？仔细看看百度百科链接的后缀【/view/21087.htm】，看清楚不是 .html ，犯错误的举个手吧

5 7-7 开始运行爬虫和爬取结果展示

2016-10-02

woider

BeautifulSoup语法的详细介绍：https://cuiqingcai.com/1319.html

4 6-4 BeautifulSoup实例测试

2016-10-02

woider

Python 3.x 获取网页代码
import urllib.request
url = 'http://www.baidu.com'
request = urllib.request.urlopen(url)
html = request.read().decode('utf8')
print(html)

4 5-2 Python爬虫urlib2下载器网页的三种方法

2016-10-02

NoBB_

如果写的代码有误就会抛出异常，显示craw fail咯，检查一下代码的正确性先。找错误要耐心，比如我找了半个多小时才发现一个括号忘了，没法 get一个 new_url

0 8-1 课程总结

2016-10-02

_旧曲重听

。。。怎么办。。听得还是很混乱啊。。。。。为啥第二个就failed了。。。。。

0 8-1 课程总结

2016-10-01

求老师讲课的环境

已采纳回答 / NoBB_

用eclipse的话，可以打开eclipse，然后在help->eclipse Marketplace->搜索 pyDev->install或者不用eclipse，直接下个pyCharm, 感觉也挺好用

2 回答 501 浏览 7-3 URL管理器

2016-10-01

Nev0

感谢老师，真心学到好多

0 7-7 开始运行爬虫和爬取结果展示

2016-10-01

python 改装那个版本

已采纳回答 / 蚂蚁帅帅

python的版本2和版本3差别好大。一些公司里面大多用的都是版本2，不过慢慢的都开始迁移到版本3了。这个课程我用的还是版本2~

4 回答 674 浏览 6-2 BeautifulSoup模块介绍和安装

2016-09-30

慕粉4006933

fucking awesome!! 看到第一个爬虫结果真是百感欣慰虽然中间还有点没弄懂。谢谢老师！！！！

1 7-6 HTML输出器

2016-09-30

代码是按照视频中来的，但是运行还是报错。。。。。。。

讲师回答 / 蚂蚁帅帅

看起来确实是，你的__init___中，后面多了个下划线

2 回答 1249 浏览 7-7 开始运行爬虫和爬取结果展示

2016-09-30

soup.find_all()为什么这里总过不去呢？

最新回答 / 慕移动9181930

老师，extension=php_gd2.dll这个模块是干嘛的啊是不是只讲在线安装了，没讲包安装。

2 回答 857 浏览 7-5 HTML解析器html_parser

2016-09-30

AttributeError: 'SpiderMain' object has no attribute 'craw'

+ 我来回答回答最高可+2积分

0 回答 900 浏览

2016-09-29

第三种方法打印网页的时候是乱码怎么办

最新回答 / 天真的德鲁伊

# -*- coding: cp936 -*-

3 回答 3673 浏览 5-3 Python爬虫urlib2实例代码演示

2016-09-29

慕粉1180023

File "E:/download/untitled/baike/spider_main.py", line 33, in <module>
obj_spider.craw(root_url)
File "E:/download/untitled/baike/spider_main.py", line 20, in craw
new_urls,new_data=self.parser.parse(new_url,html_cont)
TypeError: 'NoneType' object is not iterable

0 7-2 调度程序

2016-09-29

首页上一页 137 138 139 140 141 142 143 下一页尾页

该课程已下架

课程须知: 本课程是Python语言开发的高级课程 1、Python编程语法； 2、HTML语言基础知识； 3、正则表达式基础知识；

老师告诉你能学到什么？: 1、爬虫技术的含义和存在价值 2、爬虫技术架构 3、组成爬虫的关键模块：URL管理器、HTML下载器和HTML解析器 4、实战抓取百度百科1000个词条页面数据的抓取策略设定、实战代码编写、爬虫实例运行 5、一套极简的可扩展爬虫代码，修改本代码，你就能抓取任何互联网网页！

微信扫码，参与3人拼团

热搜

最近搜索清空