Python开发简单爬虫_技术问答

首页免费课 Python开发简单爬虫问答

Python开发简单爬虫

全部评论问答未解决精华

跪求解答，快逼疯了，就能craw一行

最新回答 / 慕容8568583

re.compile(r'^/item/')

3 回答 1459 浏览 7-7 开始运行爬虫和爬取结果展示

2018-06-10

谁在python3，现有baidu的https下面做过这个呢？都不同了

最新回答 / 凌雪舞罄

是百度百科 https://baike.baidu.com/item/Python/407313?fr=aladdin不是百度。不过词条页面URL确实是变了，改一下规则就可以了

1 回答 1412 浏览 7-1 Python爬虫实例-分析目标

2018-06-09

大家的baike_spider.py和_init_.py处怎么写的？

最新回答 / 慕UI9777495

__init__文件里面不用写任何东西，有这个文件表示这是一个python的包，从其他地方可以直接import这个包里的文件

2 回答 836 浏览 7-2 调度程序

2018-06-07

Process finished with exit code 0

最新回答 / MrZaCin

exit code 0 不是没问题吗

1 回答 1398 浏览 7-7 开始运行爬虫和爬取结果展示

2018-06-05

if _name_="_main_"什么意思

已采纳回答 / 看书大王

入口函数。 __name__是内置变量，这样写好处是，当这个.py被运行的时候,会执行main函数下的代码，当被别的地方引用时不会执行。

1 回答 1394 浏览 7-2 调度程序

2018-06-04

这是怎么了？

已采纳回答 / 慕神742738

<...图片...>定义add_new_url方法时，入参除了self，还要有一个url参数

2 回答 937 浏览 7-2 调度程序

2018-06-02

不能import

最新回答 / 微sun

选第一个~

1 回答 893 浏览 7-2 调度程序

2018-06-01

关于requests反回不一致的问题。

最新回答 / 慕妹4042242

额，对于你这个问题，最好截个图来说明下，你这样说很不懂你的意思。

1 回答 1099 浏览 6-3 BeautifulSoup的语法

2018-06-01

报错could not be imported, invalid character，求解非常感谢！

最新回答 / 慕斯卡7677556

后来解决啦，我是python36，代码如下https://github.com/leslierere/mooc_study

1 回答 2758 浏览 7-7 开始运行爬虫和爬取结果展示

2018-05-29

爬取结果用浏览器看的时候出现乱码，我用的safari，求大神帮忙。

最新回答 / 你好丶我姓宋

在写入的时候就定义编码格式

fout = open('output.html', 'w', encoding='utf-8')

然后后面write的时候就不用encode了

1 回答 822 浏览

2018-05-29

救命～我只能爬取一条URL并且失败 OTZ

已采纳回答 / 技术爱好者

你到各个方法里面，用print的方法调试，看看哪句话后面开始出错的。就可以定位到了

2 回答 1364 浏览 7-7 开始运行爬虫和爬取结果展示

2018-05-28

百度词条连接改变了相应代码应该改成什么呀

最新回答 / 你好丶我姓宋

links = soup.find_all('a', href=re.compile(r"/item/"))

1 回答 829 浏览

2018-05-26

问题已解决

最赞回答 / 遥远的相似性

哟西！

2 回答 705 浏览 7-2 调度程序

2018-05-25

html_parser里有一句报错解决不了

+ 我来回答回答最高可+2积分

2 回答 1067 浏览

2018-05-23

只爬出来一条就failed 怎么办？

最新回答 / 慕九州4113299

urllib.parse.urljion 这一个改成

from urllib.parse import urljoin

你再试试，

4 回答 1039 浏览 7-7 开始运行爬虫和爬取结果展示

2018-05-22

首页上一页 20 21 22 23 24 25 26 下一页尾页

该课程已下架

课程须知: 本课程是Python语言开发的高级课程 1、Python编程语法； 2、HTML语言基础知识； 3、正则表达式基础知识；

老师告诉你能学到什么？: 1、爬虫技术的含义和存在价值 2、爬虫技术架构 3、组成爬虫的关键模块：URL管理器、HTML下载器和HTML解析器 4、实战抓取百度百科1000个词条页面数据的抓取策略设定、实战代码编写、爬虫实例运行 5、一套极简的可扩展爬虫代码，修改本代码，你就能抓取任何互联网网页！

微信扫码，参与3人拼团

热搜

最近搜索清空

Python开发简单爬虫