Python开发简单爬虫_技术问答

首页免费课 Python开发简单爬虫问答

Python开发简单爬虫

全部评论问答未解决精华

这是什么情况

最赞回答 / 慕婉清5269197

在html_parser模块中links = soup.find_all('a', href=re.compile(r'/view/\d+\.htm')) 百度百科修改了页面只需修改爬取规则把view改成item 再把/\d+\.htm 去掉就能匹配新的url了

2 回答 968 浏览 7-7 开始运行爬虫和爬取结果展示

2018-01-14

为什么会报这个问题：AttributeError: 'Request' object has no attribute 'addheader'

最新回答 / 花宇

你的代码写的有点问题，是req.add_header()而不是req.addheader()

1 回答 2320 浏览 5-3 Python爬虫urlib2实例代码演示

2018-01-10

soup = Beautiful(xxx,'html.parser',xxx)

已采纳回答 / 无人与我书半生

是指定Beautiful的解析器为“html.parser”还有BeautifulSoup(markup,"lxml")BeautifulSoup(markup, "lxml-xml") BeautifulSoup(markup,"xml")等等很多种

2 回答 3494 浏览 7-5 HTML解析器html_parser

2018-01-10

关于pycharm中注释字号大小的问题

最新回答 / weibo_笙箫笑竹_0

pycharm中可以调节字体大小 File-->Settings-->Editor-->Font,然后改变右边的Size的大小值就行了<...图片...>

2 回答 4041 浏览 7-7 开始运行爬虫和爬取结果展示

2018-01-08

能给源码吗

最新回答 / 是看本书

https://github.com/Yecc/baike_spider，记得点star。

1 回答 871 浏览

2018-01-08

我用pycharm练习，请问这是怎么回事？

最新回答 / 慕勒5286067

opener创建的时候没有加载参数，opener=urllib2.build_opener(urllib2.HTTPCookieProcess(cj))

2 回答 1358 浏览 5-3 Python爬虫urlib2实例代码演示

2018-01-05

这是什么问题啊？求教！

最赞回答 / 子非yu_

html.parser,你打错字了吧

1 回答 1035 浏览 6-4 BeautifulSoup实例测试

2018-01-05

python3.5遇到的一些问题及解决方案

最新回答 / 慕设计0065995

为题主点赞！

2 回答 1152 浏览 7-7 开始运行爬虫和爬取结果展示

2018-01-05

TypeError: 'NoneType' object is not iterable 怎么解决啊?

已采纳回答 / 慕姐7359191

页面 html_downloader.py15行 print response.read() 更改为 return response.read()

1 回答 3098 浏览 7-7 开始运行爬虫和爬取结果展示

2018-01-04

res_data['title']=title_node.get_txt() 这个表达式前半部分是什么意思?有点懵了.

最新回答 / 慕婉清1555506

标签，就是把后面的值赋值给前面的数组变量，这个变量是个数组，给title的数组

1 回答 1145 浏览 7-5 HTML解析器html_parser

2018-01-04

这么爬会爬到病毒吗？

最新回答 / adeted

of course not!

1 回答 1941 浏览 5-1 Python爬虫网页下载器简介

2018-01-02

关于安装好pydev,打开外部.py文件显示 unable to find an ant file to run的问题?

最新回答 / WETEY

写Python 最好的是pycharm

1 回答 1832 浏览 5-3 Python爬虫urlib2实例代码演示

2018-01-01

get_text方法

最新回答 / Tendernessmile

这是BeautifulSoup里的方法

1 回答 1860 浏览 7-5 HTML解析器html_parser

2017-12-29

HELP ME

最新回答 / 慕勒9924030

你是不运行错了，你要运行Spider_main.py

1 回答 913 浏览 7-5 HTML解析器html_parser

2017-12-26

求助，这是哪里错了呀

最新回答 / 安妮的奇幻仙境

hhh，没学到，但是不建议路径里有中文

1 回答 748 浏览 6-4 BeautifulSoup实例测试

2017-12-24

首页上一页 28 29 30 31 32 33 34 下一页尾页

该课程已下架

课程须知: 本课程是Python语言开发的高级课程 1、Python编程语法； 2、HTML语言基础知识； 3、正则表达式基础知识；

老师告诉你能学到什么？: 1、爬虫技术的含义和存在价值 2、爬虫技术架构 3、组成爬虫的关键模块：URL管理器、HTML下载器和HTML解析器 4、实战抓取百度百科1000个词条页面数据的抓取策略设定、实战代码编写、爬虫实例运行 5、一套极简的可扩展爬虫代码，修改本代码，你就能抓取任何互联网网页！

微信扫码，参与3人拼团

热搜

最近搜索清空

Python开发简单爬虫