Python开发简单爬虫_技术问答

首页免费课 Python开发简单爬虫问答

Python开发简单爬虫

全部评论问答未解决精华

只能爬取两条，没报错，请问是什么问题？

最新回答 / leve__9

try?要怎么改呢我的是这样的<...图片...>

2 回答 595 浏览 7-7 开始运行爬虫和爬取结果展示

2016-10-05

一直只能爬一个，接下来就不爬了

最新回答 / 十年磨一健

我也是，你解决了吗

2 回答 1120 浏览 7-3 URL管理器

2016-10-04

运行时直接报错

已采纳回答 / Duiknow

代码没有报错是因为你有自定义报错的try except 应该是哪里你出现了拼写错误或者判断条件写错了运行跟踪调试下就可以了代码刚刚测试过没有问题

1 回答 537 浏览 7-7 开始运行爬虫和爬取结果展示

2016-10-04

终于好了，但是最后浏览器输入有问题啊

讲师回答 / 蚂蚁帅帅

<...图片...>如果是chrome浏览器的话，这样子设置一下编码。如果是其他浏览器的话，在菜单找一下。设置一下编码就好了。

2 回答 454 浏览

2016-10-02

求老师讲课的环境

已采纳回答 / NoBB_

用eclipse的话，可以打开eclipse，然后在help->eclipse Marketplace->搜索 pyDev->install或者不用eclipse，直接下个pyCharm, 感觉也挺好用

2 回答 500 浏览 7-3 URL管理器

2016-10-01

python 改装那个版本

已采纳回答 / 蚂蚁帅帅

python的版本2和版本3差别好大。一些公司里面大多用的都是版本2，不过慢慢的都开始迁移到版本3了。这个课程我用的还是版本2~

4 回答 673 浏览 6-2 BeautifulSoup模块介绍和安装

2016-09-30

代码是按照视频中来的，但是运行还是报错。。。。。。。

讲师回答 / 蚂蚁帅帅

看起来确实是，你的__init___中，后面多了个下划线

2 回答 1249 浏览 7-7 开始运行爬虫和爬取结果展示

2016-09-30

soup.find_all()为什么这里总过不去呢？

最新回答 / 慕移动9181930

老师，extension=php_gd2.dll这个模块是干嘛的啊是不是只讲在线安装了，没讲包安装。

2 回答 857 浏览 7-5 HTML解析器html_parser

2016-09-30

AttributeError: 'SpiderMain' object has no attribute 'craw'

+ 我来回答回答最高可+2积分

0 回答 900 浏览

2016-09-29

第三种方法打印网页的时候是乱码怎么办

最新回答 / 天真的德鲁伊

# -*- coding: cp936 -*-

3 回答 3671 浏览 5-3 Python爬虫urlib2实例代码演示

2016-09-29

如果抓取整个网络的网页，岂不是要分析每一个网站的格式？

已采纳回答 / 蚂蚁帅帅

像百度、谷歌这样的搜索引擎，只需要爬去整个网页就可以了。如课程前面提到的，本节课的爬虫是垂直类爬虫，只会爬去特定的网站。所以，没错，是需要每个网站都要分析对应的格式的。

2 回答 678 浏览 7-1 Python爬虫实例-分析目标

2016-09-29

htmlparser报错，请问哪里不对

最赞回答 / IT男的成长记录

soup = BeautifulSoup(html_doc, 'html.parser', from_encoding='utf-8') 改成小写试试

1 回答 1816 浏览 6-4 BeautifulSoup实例测试

2016-09-27

调度主程序的时候,只输出一行,然后就 "crawl failed" 是怎么回事,代码如下.

已采纳回答 / 黑历史不删除后果很严重

建议你一步一步，逐个函数调试，光看源代码比较难找出错误所在，可以在每个方法打印是否成功运行，找到出错的方法后再找出错的变量。这样一定可以调试出来的，加油！

7 回答 2239 浏览 7-2 调度程序

2016-09-27

没怎么用过Python,调度主程序的时候,报错如下,求解.

最赞回答 / Enterer

self.old_url 写成了 self.old.urls -_-

1 回答 754 浏览 7-2 调度程序

2016-09-27

不能运行程序报错

讲师回答 / 蚂蚁帅帅

看看是不是拼写错了

2 回答 608 浏览 7-4 HTML下载器html_downloader

2016-09-27

首页上一页 61 62 63 64 65 66 67 下一页尾页

该课程已下架

课程须知: 本课程是Python语言开发的高级课程 1、Python编程语法； 2、HTML语言基础知识； 3、正则表达式基础知识；

老师告诉你能学到什么？: 1、爬虫技术的含义和存在价值 2、爬虫技术架构 3、组成爬虫的关键模块：URL管理器、HTML下载器和HTML解析器 4、实战抓取百度百科1000个词条页面数据的抓取策略设定、实战代码编写、爬虫实例运行 5、一套极简的可扩展爬虫代码，修改本代码，你就能抓取任何互联网网页！

微信扫码，参与3人拼团

热搜

最近搜索清空

Python开发简单爬虫