之前用过scrapy写爬虫来抓取基金公司净值数据以实现最快的收益展示，就发现非常方便。最近公司有了专门做数据服务的部门，但是爬虫的管理还是太过混乱，而且使用的都是类似request+beautifulsoup的方式，所以希望能有一个系统的爬虫管理平台，实现任务的监控、信息的收集、还有基本数据检查纠错。之前准备自己系统看一边scrapy文档，但是太耗时间，很庆幸发现了这个视频教程，scrapy的使用基本都会用，但这个课程最大的亮点就是讲到了scrapy的源码，帮助了解整个爬虫系统设计思路，很是受益。感谢bobby老师。对了，这是最近买的bobby老师的第三门课程，双倍速看得很带劲。