Python开发简单爬虫_技术问答

首页免费课 Python开发简单爬虫问答

Python开发简单爬虫

全部评论问答未解决精华

为什么会报错，BeautifulSoup下边有红线

最赞回答 / qq_小海绵派大星_0

如果你的插件安装好了的话，估计你是自己写了一个bs4.py的文件，所以冲突了，你应该把你自己写的文件改个别的名字。

6 回答 1428 浏览 6-4 BeautifulSoup实例测试

2017-09-06

请问这句是什么意思？

已采纳回答 / Sun灬Moon

links = soup.find_all('a',href=re.compile(r"^/item/")) 匹配html格式中href后指定的url以/item/开头的段落new_url=link['href'] 将获取到的单条href段落信息中href后指定的url数据赋值给new_url

1 回答 1145 浏览 7-7 开始运行爬虫和爬取结果展示

2017-08-28

结果一直都是 Process finished with exit code 0 ，修改了也没用，求救啊大神

最新回答 / 慕粉2223158941

    public static void main(String[] args) {
        System.out.println("Hello World!");
    }
}

6 回答 49098 浏览 7-7 开始运行爬虫和爬取结果展示

2017-08-26

print '获取p段落文字'，为何只有前面那一段的，正则匹配不是有2段吗

已采纳回答 / 我爲動縵鵟

因为find只会显示查找到的第一个内容

1 回答 1112 浏览 6-4 BeautifulSoup实例测试

2017-08-26

请问各位大神，python数据挖掘与Python爬虫的区别是什么呀爬虫就是数据挖掘的工具吗？万分感谢您

已采纳回答 / ABBBBA

爬虫是数据挖掘用到的工具之一吧

2 回答 3470 浏览 7-1 Python爬虫实例-分析目标

2017-08-25

url_manager的import有快捷键吗？用的pycharm

已采纳回答 / 程序媛_

我用的也是pycharm,直接敲alt+enter就可以import，如果没有出现，检查一下你的代码有没有敲错（例如单词有没有拼错或者你的url_manager文件命名和你敲的是否一致）

3 回答 955 浏览 7-2 调度程序

2017-08-18

这个class SpiderMain(object): pass是怎么突然冒出来的？

已采纳回答 / qq_重头再来_5

在标黄的地方alt+回车，或者可以在设置里面修改自己想要的快捷键

2 回答 1168 浏览 7-2 调度程序

2017-08-18

output.html为空白页，急求解答

已采纳回答 / 慕九州2254752

应该是da[“title”]

1 回答 1232 浏览 7-6 HTML输出器

2017-08-16

第二种方法这样写为什么不对？

已采纳回答 / 小白汤付颖8169924号

你代码里的第一行应该是request=urllib.request.Request(url),第一个request是3.0环境下的urllib.request，第二个Request是创建的类

2 回答 883 浏览 5-3 Python爬虫urlib2实例代码演示

2017-08-14

<2.7 无法用getcode？

最新回答 / 爱上你没道理

额，说错了，是python 3中取消了urllib2，在3中需要导入urllib.request

7 回答 1419 浏览 5-3 Python爬虫urlib2实例代码演示

2017-08-11

如何匹配内容

已采纳回答 / qq_側脸_0

不限定区域或者属性来匹配的话，你会抓到这个页面所有含“sister”的字符串。

1 回答 1063 浏览 6-4 BeautifulSoup实例测试

2017-08-07

如果我想匹配别的内容该怎么写？

已采纳回答 / bathylee

<...code...><...code...>

1 回答 1060 浏览 6-4 BeautifulSoup实例测试

2017-08-07

爬百度后出现的结果乱码

已采纳回答 / 好戲之人

python2编码确实有点问题，你可以import sys reload(sys) sys.setdefaultencoding("utf-8")

2 回答 1415 浏览 5-3 Python爬虫urlib2实例代码演示

2017-07-27

用pycharm的无语了

已采纳回答 / 辰望溪

'SpiderMain' object has no attribute 'urls'第16行出错，谁知道怎么解决

4 回答 835 浏览 7-2 调度程序

2017-07-20

看不到print的运行结果了，运行结果一闪而过

已采纳回答 / 慕数据9496870

你试试添加一个输入，这样的话就会在输出结束后就会要输入这样应该不会妙弹

6 回答 2374 浏览 5-3 Python爬虫urlib2实例代码演示

2017-07-20

首页上一页 2 3 4 5 6 7 8 下一页尾页

该课程已下架

课程须知: 本课程是Python语言开发的高级课程 1、Python编程语法； 2、HTML语言基础知识； 3、正则表达式基础知识；

老师告诉你能学到什么？: 1、爬虫技术的含义和存在价值 2、爬虫技术架构 3、组成爬虫的关键模块：URL管理器、HTML下载器和HTML解析器 4、实战抓取百度百科1000个词条页面数据的抓取策略设定、实战代码编写、爬虫实例运行 5、一套极简的可扩展爬虫代码，修改本代码，你就能抓取任何互联网网页！

微信扫码，参与3人拼团

热搜

最近搜索清空

Python开发简单爬虫