Python开发简单爬虫_技术问答

首页免费课 Python开发简单爬虫问答

Python开发简单爬虫

全部评论问答未解决精华

慕粉1105564232

建议不要用htmlparser解析器，因为其对中文文档的兼容性太差了，老学长踩坑过来提醒。

3 6-3 BeautifulSoup的语法

2018-05-18

嵌入式视觉

title_node = soup.find('dd',class_='lemmaWgt-lemmaTitle-title').find('h1')
title_data = title_node.get_text()

0 7-4 HTML下载器html_downloader

2018-05-18

慕田峪7915563

哈哈，不错，把虎扑爬了

1 7-7 开始运行爬虫和爬取结果展示

2018-05-17

凌翊CJV

print('获取P')
pnode = soup.find_all('p', class_ = 'title')
for link in pnode:
print(link.name, link.get_text)

0 6-4 BeautifulSoup实例测试

2018-05-11

凌翊CJV

print(link.name, link['href'], link.get_text() )

0 6-4 BeautifulSoup实例测试

2018-05-11

凌翊CJV

print('获取Lacie的链接')
link_node = soup.find_all('a', href = 'http://example.come/Lacie')
for link in link_node:
print(link.name, link['href'], link.get_text() )
print('正则匹配')
link_node = soup.find_all( 'a', href = re.compile(r"ill") )
for link in link_node:

0 6-4 BeautifulSoup实例测试

2018-05-11

凌翊CJV

# coding = gbk
from bs4 import BeautifulSoup
import re
'''
'''
soup = BeautifulSoup(html_doc, 'html.parser')
print('获取所有的链接：')
links = soup.find_all('a')
for link in links:
print( link.name, link['href'], link.get_text() )

0 6-4 BeautifulSoup实例测试

2018-05-11

一入Code深似海

py3和py2区别也真是不小！我还是去学3吧！

1 5-3 Python爬虫urlib2实例代码演示

2018-05-11

_SMEB_9

有没有大神讲一下为什么要单个添加和批量添加…… 感谢

2 7-3 URL管理器

2018-05-11

修饰

老师讲解的思路逻辑很清晰

1 7-1 Python爬虫实例-分析目标

2018-05-09

成长中的菜鸟

py3的朋友去掉from_enconding

3 6-4 BeautifulSoup实例测试

2018-05-05

懒人在思考0

看老师的电脑时间深夜录课程，老师辛苦，我也开始学习，一只小白，努力努力！！！

5 8-1 课程总结

2018-05-04

qq_破风_2

import base64 python3

1 6-2 BeautifulSoup模块介绍和安装

2018-05-03

qq_岳飞_0

哈哈！看你们互喷！我都是以1.5的速度看的~

2 6-3 BeautifulSoup的语法

2018-05-02

BtT

You're probably treating a list of items like a single item. Did you call find_all() when you meant to call find()?

0 6-4 BeautifulSoup实例测试

2018-04-29

首页上一页 7 8 9 10 11 12 13 下一页尾页

该课程已下架

课程须知: 本课程是Python语言开发的高级课程 1、Python编程语法； 2、HTML语言基础知识； 3、正则表达式基础知识；

老师告诉你能学到什么？: 1、爬虫技术的含义和存在价值 2、爬虫技术架构 3、组成爬虫的关键模块：URL管理器、HTML下载器和HTML解析器 4、实战抓取百度百科1000个词条页面数据的抓取策略设定、实战代码编写、爬虫实例运行 5、一套极简的可扩展爬虫代码，修改本代码，你就能抓取任何互联网网页！

微信扫码，参与3人拼团

热搜

最近搜索清空

Python开发简单爬虫