Python开发简单爬虫_技术问答

首页免费课 Python开发简单爬虫问答

Python开发简单爬虫

全部评论问答未解决精华

慕粉1436297772

里面了辣妈辣

1 7-3 URL管理器

2016-12-09

海绵宝啊宝

谢谢老师，课程讲解的非常好，语言精练简洁，条理清晰，理论和实战兼备。

2016-12-08

慕粉18810557173

Python3
print('p段落文字')
p_node=soup.find('p',class_='title')
print(p_node.name,p_node.get_text())

5 6-4 BeautifulSoup实例测试

2016-12-07

慕粉18810557173

Python3的写法

print('正则表达')
link_node=soup.find('a',href=re.compile(r'ill'))
print(link_node.name,link_node['href'],link_node.get_text())

3 6-4 BeautifulSoup实例测试

2016-12-07

弃F忆

python -m pip install --upgrade pip 升级pip
python -m pip install beautifulsoup4

5 6-2 BeautifulSoup模块介绍和安装

2016-12-06

grimpil3481891

用python3，最后输出到html页面后标题和摘要两部分如果有中文显示出来都是 b'anfdsfsfds'这样的字节串，解决办法是在outputer.html中修改两个地方：

1. 打开文件时直接指定编码
fout = open('output.html', 'w', encoding='utf-8')

2.写如内容时取消编码
fout.write('<td>%s</td>' % data['title'])
fout.write('<td>%s</td>' % data['summary'])

5 7-7 开始运行爬虫和爬取结果展示

2016-12-06

米老鼠的奋斗

# -*- coding:utf-8 -*-
import urllib2 不加着两行啥都运行不了的

1 5-3 Python爬虫urlib2实例代码演示

2016-12-05

猪猪的笨笨

封杀发放啊发放

2 7-5 HTML解析器html_parser

2016-12-04

中都hacker

而瑞快死次0.0

2 5-1 Python爬虫网页下载器简介

2016-12-03

降降

就是没报错，一行输出，一行失败就没了

2016-12-02

降降

想问老师的字体！！！

0 7-2 调度程序

2016-12-02

慕粉3287174

大家的路，还长着呢！

1 8-1 课程总结

2016-12-01

慕粉3287174

@慕粉4289539 我一开始也和你一样的错误，我的原因是在url_manager.py中get_new_url()方法忘了return new_url，我知道我很蠢~

0 7-7 开始运行爬虫和爬取结果展示

2016-12-01

宝慕林0621648

Nice

2016-12-01

慕粉3287174

讲得很好，真心的。

1 6-3 BeautifulSoup的语法

2016-12-01

首页上一页 65 66 67 68 69 70 71 下一页尾页

该课程已下架

课程须知: 本课程是Python语言开发的高级课程 1、Python编程语法； 2、HTML语言基础知识； 3、正则表达式基础知识；

老师告诉你能学到什么？: 1、爬虫技术的含义和存在价值 2、爬虫技术架构 3、组成爬虫的关键模块：URL管理器、HTML下载器和HTML解析器 4、实战抓取百度百科1000个词条页面数据的抓取策略设定、实战代码编写、爬虫实例运行 5、一套极简的可扩展爬虫代码，修改本代码，你就能抓取任何互联网网页！

微信扫码，参与3人拼团

热搜

最近搜索清空

Python开发简单爬虫