为了账号安全,请及时绑定邮箱和手机立即绑定

请教下关于爬虫的选择

请教下关于爬虫的选择

繁花不似锦 2019-01-30 18:04:26
现在有个需求需要抓取一个网站的文章,包括js,css.html所有文件,然后保存下来变成自己的文章,文章是通过ajax异步加载的。所以想请问下,这种需求,采用哪种方式实现比较好一点,scrapy splash和puppeteer好像原理差不多。除了上面两种还有没其他的框架适合我现在的这个需求的,语言就在node和ptyhon中选,求指教。
查看完整描述

1 回答

?
天涯尽头无女友

TA贡献1831条经验 获得超9个赞

文章既然是通过ajax获取的,你为什么不直接用这个接口呢?

查看完整回答
反对 回复 2019-01-30
  • 1 回答
  • 0 关注
  • 518 浏览
慕课专栏
更多

添加回答

举报

0/150
提交
取消
意见反馈 帮助中心 APP下载
官方微信