为了账号安全,请及时绑定邮箱和手机立即绑定

Python开发简单爬虫

蚂蚁帅帅 全栈工程师
难度初级
时长 1小时14分
学习人数
综合评分9.67
646人评价 查看评价
9.9 内容实用
9.6 简洁易懂
9.5 逻辑清晰

最新回答 / 慕莱坞2274375
具体可看https://github.com/lzcdev/BaiDuBaiKeSpider,希望对你有帮助

最新回答 / JupiterXue
1.安装bs4到python路径2.导入模块:from bs4 import BeautifulSoup

最新回答 / beyondzhang
我也是用的eclipse碰到同样的问题,请问您这边解决了吗?

最赞回答 / qq_小海绵派大星_0
如果你的插件安装好了的话,估计你是自己写了一个bs4.py的文件,所以冲突了,你应该把你自己写的文件改个别的名字。

最新回答 / Mr_nothing
在spider_main 函数中from urllib import request然后 把原来的 print 改成 print('count %d : %s'%(count , request.unquote(new_url)))

最新回答 / 三马同槽
这个视频是15年的,百度百科现在的链接把view改成了item,你把正则表达式匹配的那部分view和后面的部分全部去掉改成item就可以了

最新回答 / 阿腾啊阿腾
将try。。。except。。。删除,然后查看是哪里出了问题,一步一步来分析解决,不然程序就只有报错,没有输出错误信息

最新回答 / 独孤翎竑
from selenium import webdriverfrom selenium.webdriver.support.wait import WebDriverWaitfrom selenium.webdriver.support import expected_conditions as ECfrom selenium.common.exceptions import NoSuchElementExceptionfrom selenium.webdriver.common.by import By...

最新回答 / freedom_X20A
  def get_new_url(self):#从url管理器中获取一个新的带爬取得url        new_url=self.new_urls.pop()#pop方法会从列表中获取url并会移除        self.old_urls.add(new_url)#将此url添加进old_url        return new_url你多了个add

最新回答 / 慕少3169533
我用的IE 浏览器是可以得。用鼠标拖拽可以调整速度

最新回答 / 慕仰5215872
Python 2.7.9 之后引入了一个新特性当你urllib.urlopen一个 https 的时候会验证一次 SSL 证书 当目标使用的是自签名的证书时就会爆出一个 urllib2.URLError: <urlopen error [SSL: CERTIFICATE_VERIFY_FAILED] certificate verify failed (_ssl.c:581)> 的错误消息
课程须知
本课程是Python语言开发的高级课程 1、Python编程语法; 2、HTML语言基础知识; 3、正则表达式基础知识;
老师告诉你能学到什么?
1、爬虫技术的含义和存在价值 2、爬虫技术架构 3、组成爬虫的关键模块:URL管理器、HTML下载器和HTML解析器 4、实战抓取百度百科1000个词条页面数据的抓取策略设定、实战代码编写、爬虫实例运行 5、一套极简的可扩展爬虫代码,修改本代码,你就能抓取任何互联网网页!

微信扫码,参与3人拼团

意见反馈 帮助中心 APP下载
官方微信
友情提示:

您好,此课程属于迁移课程,您已购买该课程,无需重复购买,感谢您对慕课网的支持!

本次提问将花费2个积分

你的积分不足,无法发表

为什么扣积分?

本次提问将花费2个积分

继续发表请点击 "确定"

为什么扣积分?

举报

0/150
提交
取消