Python开发简单爬虫_技术问答

首页免费课 Python开发简单爬虫问答

Python开发简单爬虫

全部评论问答未解决精华

grimpil3481891

用python3，最后输出到html页面后标题和摘要两部分如果有中文显示出来都是 b'anfdsfsfds'这样的字节串，解决办法是在outputer.html中修改两个地方：

1. 打开文件时直接指定编码
fout = open('output.html', 'w', encoding='utf-8')

2.写如内容时取消编码
fout.write('<td>%s</td>' % data['title'])
fout.write('<td>%s</td>' % data['summary'])

5 7-7 开始运行爬虫和爬取结果展示

2016-12-06

米老鼠的奋斗

# -*- coding:utf-8 -*-
import urllib2 不加着两行啥都运行不了的

1 5-3 Python爬虫urlib2实例代码演示

2016-12-05

关于老师的代码多处问题，我来填坑

最新回答 / 米老鼠的奋斗

老师用的是2.7 你这是3.x版本 print后面都要带括号

1 回答 840 浏览 7-5 HTML解析器html_parser

2016-12-04

关于老师的代码多处问题，我来填坑

+ 我来回答回答最高可+2积分

2 回答 699 浏览 7-5 HTML解析器html_parser

2016-12-04

猪猪的笨笨

封杀发放啊发放

2 7-5 HTML解析器html_parser

2016-12-04

中都hacker

而瑞快死次0.0

2 5-1 Python爬虫网页下载器简介

2016-12-03

关于page_url的问题，非常重要

最赞回答 / JoshuaShang

自己终于看懂了，涉及相对路径转化为绝对路径

3 回答 1866 浏览 7-5 HTML解析器html_parser

2016-12-03

运行之后没有结果啊

最新回答 / OMG快到碗里来

我也是

1 回答 774 浏览

2016-12-03

报错---SyntaxError: invalid syntax，实在无奈，找了几天还没找出原因

已采纳回答 / 这个名字七个字

我的html_downloader代码头部加的是下面这个，没报错import urllib.request

4 回答 12757 浏览 7-2 调度程序

2016-12-02

请问报这种错是为什么呀

最新回答 / 承诺先生

字面意思是列表设置的对象没有属性，可能是版本的问题，请问你用的什么版本 2+还是3+ ？

1 回答 694 浏览 7-7 开始运行爬虫和爬取结果展示

2016-12-02

求讲解，跪求

最新回答 / 木头_One

fout.write("<td>%s</td>" % data['url'])

1 回答 912 浏览 7-7 开始运行爬虫和爬取结果展示

2016-12-02

降降

就是没报错，一行输出，一行失败就没了

2016-12-02

降降

想问老师的字体！！！

0 7-2 调度程序

2016-12-02

用python2.7打完了之后运行失败

已采纳回答 / OMG快到碗里来

大兄弟你的源码能让我看看吗我的出不来结果先谢谢你了

2 回答 1033 浏览

2016-12-01

慕粉3287174

大家的路，还长着呢！

1 8-1 课程总结

2016-12-01

慕粉3287174

@慕粉4289539 我一开始也和你一样的错误，我的原因是在url_manager.py中get_new_url()方法忘了return new_url，我知道我很蠢~

0 7-7 开始运行爬虫和爬取结果展示

2016-12-01

首页上一页 124 125 126 127 128 129 130 下一页尾页

该课程已下架

课程须知: 本课程是Python语言开发的高级课程 1、Python编程语法； 2、HTML语言基础知识； 3、正则表达式基础知识；

老师告诉你能学到什么？: 1、爬虫技术的含义和存在价值 2、爬虫技术架构 3、组成爬虫的关键模块：URL管理器、HTML下载器和HTML解析器 4、实战抓取百度百科1000个词条页面数据的抓取策略设定、实战代码编写、爬虫实例运行 5、一套极简的可扩展爬虫代码，修改本代码，你就能抓取任何互联网网页！

微信扫码，参与3人拼团

热搜

最近搜索清空

Python开发简单爬虫