课程
/后端开发
/Python
/Python开发简单爬虫
请问爬虫爬到第二条时 爬到了http://baike.baidu.com/view/10812319.htm 显示百度百科:锁定词条 怎么解决呀 下了好多个人的源码都是这样
2017-05-25
源自:Python开发简单爬虫 7-7
正在回答
我之前也遇到过这种情况,纠结了很久,最后才发现一个非常重要的问题,百度的词条信息发生了变化,你可以仔细看看,现在不再是以 .htm结尾了,之前在html_parser模块中的正则表达式已经失效了,原来是href=re.compile(r"/view/\d+\.htm"),现在应该改为href=re.compile(r'/item/\w+')。这也再次证明了在采集数据前,一定要对目标进行仔细认真的分析!
吴总就这样了
举报
本教程带您解开python爬虫这门神奇技术的面纱