Python开发简单爬虫_技术问答

首页免费课 Python开发简单爬虫问答

Python开发简单爬虫

全部评论问答未解决精华

python词条url已经变了

最新回答 / 慕盖茨8302552

正则表达式改成 /item/.*

1 回答 1084 浏览 7-5 HTML解析器html_parser

2018-03-23

看了下面的评论解决了：fout.write("<td>%s</td>" % data['title'].encode('utf-8'))fout.write("<td>%s</td>" % data['summary'].encode('utf-8'))这两句不需要encode('utf-8')，加了这个title和summary就变成十六进制显示的字符了。需要在这一句fout = open('output.html', 'w', encoding='utf...

2 回答 1059 浏览 7-7 开始运行爬虫和爬取结果展示

2018-03-19

beautisoup插件安装

已采纳回答 / zjxjwxk

你安装了吗？ cmd窗口中cd 到 Python\Scripts目录下，执行pip install beautifulsoup4 安装然后 from bs4 import BeautifulSoup 就行啦我用的也是Sublime

1 回答 1495 浏览 6-2 BeautifulSoup模块介绍和安装

2018-03-19

新手学习问题

最新回答 / 十月长欢

遇到不懂的就搜吧

3 回答 1223 浏览 4-1 Python爬虫URL管理

2018-03-19

语法的问题

已采纳回答 / zhegao

约定. 就像你现在写的中文我能看懂一样. 这个模块的开发者让自己的程序这样去解读, 不过是中间转换一层罢了.

1 回答 677 浏览 6-4 BeautifulSoup实例测试

2018-03-18

我在pycharm上写的，说没有attribute to urlopen，什么意思呀？

最新回答 / 欧阳思月

import urllib.request导入urllib中的request模块, 才能调里面的方法url = ('https://www.baidu.com')surl = urllib.request.urlopen(url) print(surl.read())

3 回答 2058 浏览 5-3 Python爬虫urlib2实例代码演示

2018-03-17

HTMLParseError错误

最新回答 / 幕布斯9454072

试一下这个看 :使用pip升级在管理员权限下使用命令行输入命令“pip install --upgrade beautifulsoup4”

2 回答 1473 浏览 6-4 BeautifulSoup实例测试

2018-03-16

print response1.getCode() AttributeError: addinfourl instance has no attribute 'getCode'

已采纳回答 / 橙子味的于归

代码示例里是getcode()，你的事getCode()

1 回答 1547 浏览 5-3 Python爬虫urlib2实例代码演示

2018-03-15

AttributeError: 'NoneType' object has no attribute 'find'

最赞回答 / qq_驿站_0

找到了，是入口地址改变了

3 回答 1392 浏览 7-7 开始运行爬虫和爬取结果展示

2018-03-13

代码里面的循环卡住不走了

最新回答 / 慕莱坞2274375

urllib2.urlopen()方法对于有的链接会超时，可以加个异常判断，跳过这一条。具体可看https://github.com/lzcdev/BaiDuBaiKeSpider

1 回答 1034 浏览 7-7 开始运行爬虫和爬取结果展示

2018-03-13

pip安装模块位置求解

已采纳回答 / 大码哥

pychrm每次新建工程会默认建一个Python环境，改下就行。pychrm右上角运行左边有个菜单选项，点进去选择edit开头那个，把Python interpreter那栏选择为你的Python程序，点击OK，之后你安装的模块就正常导入使用了

2 回答 3227 浏览 6-2 BeautifulSoup模块介绍和安装

2018-03-12

爬虫抓取失败

+ 我来回答回答最高可+2积分

0 回答 1135 浏览

2018-03-11

怎么运行报错？？？

最新回答 / YunPeng

使用requests吧，urllib感觉不是方便，requests文档地址：http://docs.python-requests.org/zh_CN/latest/user/quickstart.html

3 回答 875 浏览 8-1 课程总结

2018-03-07

为什么会出现No module named baike_spider，我用的是pycharm

最新回答 / 塞上流年

发一下你开头的代码

5 回答 1739 浏览 7-7 开始运行爬虫和爬取结果展示

2018-03-06

首页上一页 25 26 27 28 29 30 31 下一页尾页

该课程已下架

课程须知: 本课程是Python语言开发的高级课程 1、Python编程语法； 2、HTML语言基础知识； 3、正则表达式基础知识；

老师告诉你能学到什么？: 1、爬虫技术的含义和存在价值 2、爬虫技术架构 3、组成爬虫的关键模块：URL管理器、HTML下载器和HTML解析器 4、实战抓取百度百科1000个词条页面数据的抓取策略设定、实战代码编写、爬虫实例运行 5、一套极简的可扩展爬虫代码，修改本代码，你就能抓取任何互联网网页！

微信扫码，参与3人拼团