Python开发简单爬虫_技术问答

首页免费课 Python开发简单爬虫问答

Python开发简单爬虫

全部评论问答未解决精华

引入BeautifulSoup冒红线，但是我已经成功安装过BeautifulSoup4了

最赞回答 / pinro

应该是from bs4 import BeautifulSoup吧

8 回答 2767 浏览 6-4 BeautifulSoup实例测试

2016-11-24

生成不了网页

最新回答 / 慕无忌0039798

我也是生成不了html格式，生成了txt文件，为什么呀

2 回答 633 浏览 7-7 开始运行爬虫和爬取结果展示

2016-11-22

小白求解python3.5报错

已采纳回答 / qq_Chandler_34038455

而且你最后link.get_text()是点，不是逗号，望采纳

4 回答 955 浏览 6-4 BeautifulSoup实例测试

2016-11-21

我也遇到过相似的问题，不知你的craw中一行语句是什么操作。我遇到的问题是执行的语句res_data['summary']=summary_node.get_text()出现'NoneType' object has no attribute 'get_text' 我个人认为原因是:运行结果值为空，即None。None是不是所定义的类，因此没有get_text 属性。我修改方法如下：if summary_node==None: res_dat=Noneelse:res_data['summary']...

2 回答 946 浏览 7-7 开始运行爬虫和爬取结果展示

2016-11-21

UserWarning: You provided Unicode markup but also provided a value for from_encoding. Your from_encoding will be ignored.

已采纳回答 / LUXIN66

python3 缺省的编码是unicode, 再在from_encoding设置为utf8, 会被忽视掉，代码是从python2转来的，去掉就可以了

2 回答 5233 浏览 6-4 BeautifulSoup实例测试

2016-11-19

为什么我第三种方法输出的cookie是这些东西？

最新回答 / qq_唱一半的歌_0

你是用的什么软件

4 回答 10758 浏览 5-3 Python爬虫urlib2实例代码演示

2016-11-19

运行报错了

+ 我来回答回答最高可+2积分

2 回答 643 浏览 7-7 开始运行爬虫和爬取结果展示

2016-11-18

小白提问————

最赞回答 / Shinvi

可以，pycharm用alt+enter

2 回答 658 浏览 7-2 调度程序

2016-11-17

爬取的URL中有汉字要怎么办？

最新回答 / 风已远

试一下行不行。。在用BeautifulSoup()解析的时候加上 from_encoding='utf8'这个参数进行编码。

1 回答 1034 浏览 7-2 调度程序

2016-11-16

复制outputer.html的文件路径后搜索不到爬去的信息

最新回答 / 慕粉4373732

你outputer写的有问题吧，贴出来看看

1 回答 542 浏览 7-7 开始运行爬虫和爬取结果展示

2016-11-15

为什么全部是“craw failed”

最新回答 / 03计算机_小宫

检查一下你写的调用的类中的方法名字是不是都能对应上，如果代码没问题就是网页地址的问题了，我按照课程写的代码运行的是没问题的

1 回答 848 浏览 7-7 开始运行爬虫和爬取结果展示

2016-11-15

使用urllib2 无法下载<div data-reactroot>类型

最新回答 / 侠客岛的含笑

不知道

1 回答 1931 浏览 5-2 Python爬虫urlib2下载器网页的三种方法

2016-11-14

No module named baike_spider

最赞回答 / 幕布斯7985579

没有baike_spider这个模块

2 回答 547 浏览 7-1 Python爬虫实例-分析目标

2016-11-14

出现这个问题怎么解决

最新回答 / Spider_Maker4260916

需要看你的完整代码

4 回答 411 浏览 7-7 开始运行爬虫和爬取结果展示

2016-11-13

首页上一页 57 58 59 60 61 62 63 下一页尾页

该课程已下架

课程须知: 本课程是Python语言开发的高级课程 1、Python编程语法； 2、HTML语言基础知识； 3、正则表达式基础知识；

老师告诉你能学到什么？: 1、爬虫技术的含义和存在价值 2、爬虫技术架构 3、组成爬虫的关键模块：URL管理器、HTML下载器和HTML解析器 4、实战抓取百度百科1000个词条页面数据的抓取策略设定、实战代码编写、爬虫实例运行 5、一套极简的可扩展爬虫代码，修改本代码，你就能抓取任何互联网网页！

微信扫码，参与3人拼团