为了账号安全，请及时绑定邮箱和手机立即绑定
首页 免费课 Python最火爬虫框架Scrapy入门与实践 问答

Python最火爬虫框架Scrapy入门与实践

大壮老师 Python工程师
查看讲师更多课程 大壮老师讲师的其他课程
难度初级
时长 1小时31分
学习人数
综合评分9.53
55人评价 查看评价
9.7 内容实用
9.4 简洁易懂
9.5 逻辑清晰
全部 评论 问答 未解决 精华

对from douban.item import DoubanItem这句不懂

最赞回答 / 永恒的小白
douban.item 意思是从项目根目录douban的item模块引入DoubanItem这个类,你自己看着改吧
3 回答 1847 浏览 2-5 明确目标
2019-01-12

main.py 运行路径错误

最新回答 / 奮乧
已解决
1 回答 1047 浏览 2-7 spider文件的编写（2）
2019-01-11

没有cl.exe目录

最新回答 / 温裕
试试以管理员权限打开cmd，运行pip install scrapy
1 回答 1396 浏览 2-1 scrapy的安装、和安装中遇到的问题
2019-01-09

这是出了什么问题呢？

讲师回答 / 大壮老师
需要贴出详细报错日志
2 回答 1008 浏览 2-8 保存数据
2019-01-08

环境装在虚拟机，为什么新建工程会在本地呢？

最新回答 / 奮乧
Pycharm专业版配置远程服务器并自动同步代码搜索 
1 回答 783 浏览 2-7 spider文件的编写（2）
2019-01-04

请问老师运行结果怎么直接显示中文啊

+ 我来回答 回答最高可+2积分
3 回答 940 浏览 2-7 spider文件的编写（2）
2018-12-27

由于目标计算机积极拒绝，无法连接。

最赞回答 / 慕侠6337067
mongodb服务未开启
1 回答 1980 浏览 2-8 保存数据
2018-12-20

我怎么解析出来就是最后一条数据

讲师回答 / 大壮老师
字典写在for外面了吧
3 回答 1039 浏览 2-7 spider文件的编写（2）
2018-12-20

如果是Windows或Mac平台 直接在PyCharm的命令行中输入scrapy startproject douban就可以创建了(前提是PyCharm的命令行是当前项目的目录)

最新回答 / MmILYToo
应该在哪个目录里啊，是不是在Python的安装路径里面
1 回答 1605 浏览 2-4 新建scrapy项目
2018-12-17

有朋友遇到这个错么？下边是日志信息，看起来像是下载超时，但是都给DOWNLOAD_DELAY设置为3了

最赞回答 / WiseDeve
尴尬，是我解析部分代码的问题，不是下载器的问题。
2 回答 2362 浏览 2-7 spider文件的编写（2）
2018-12-13

content循环，并没有爬取到第一行的导演主演信息

+ 我来回答 回答最高可+2积分
2 回答 1429 浏览 2-7 spider文件的编写（2）
2018-12-07

之前保存为csv文件时好好的，一旦设置好MongoDB参数之后，把settings里的item_pipelines打开之后就报错了

+ 我来回答 回答最高可+2积分
1 回答 1073 浏览 2-8 保存数据
2018-12-07

爬出的中文显示是unicode码，怎么转化成中文显示

最新回答 / 落辉 
def parse(self, response):
    #具体怎么转，要看你的编码的
    response=response.replace(encoding="gbk")
1 回答 2242 浏览 2-7 spider文件的编写（2）
2018-12-03

请问各位大哥遇到过这个问题嘛，scrapy crawl douban_spider报错

讲师回答 / 大壮老师
你当前DNS无法解析豆瓣网页
1 回答 975 浏览 2-4 新建scrapy项目
2018-12-03

pycharm运行正常，但是命令行报错没有win32api

+ 我来回答 回答最高可+2积分
2 回答 2302 浏览 2-8 保存数据
2018-12-03
首页上一页78910111213下一页尾页
开始学习
课程须知
1、具有一定的Python基础 2、具有一定的linux系统管理基础，编译安装软件，yum包管理工具等 3、具有一定的Mongdb数据库管理基础，增删改查
老师告诉你能学到什么？
1、scrapy框架简介、数据在框架内如何进行流动 2、scrapy框架安装、mongodb数据库安装 3、scrapy抓取项目如何创建 4、scrapy抓取项目如何进行数据解析 5、scrapy抓取项目如何绕过反爬机制抓取数据 6、scrapy抓取项目如何存储数据到不同的格式

微信扫码，参与3人拼团

意见反馈 帮助中心 APP下载
官方微信
友情提示：

您好，此课程属于迁移课程，您已购买该课程，无需重复购买，感谢您对慕课网的支持！

查看已购买的课程

本次提问将花费2个积分

你的积分不足，无法发表

为什么扣积分？
确认 取消

本次提问将花费2个积分

继续发表请点击 "确定"

为什么扣积分？
确认 取消

举报

0/150
提交
取消