start
scrapy 是目前最流行的爬虫框架,所谓框架,就是大部分基本功能都实现好了,我们只需要关注我们的爬虫业务逻辑,它是多线程爬取,速度比之前的我们写的都快,scrapy 用于大型爬虫开发,数据量是千万级别的那种,它是开源的,可以阅读源码,自己扩展中间件,来完成需求,我们一般人只是提取一些几万的数据量,可用也可不用它,看个人吧,自己手写爬虫可以更加打牢基础,使用框架就是按模板操作很快就可以完成了,一般都是数据量较大,且速度有要求才使用
在这里就不多介绍了,小编推荐一本资料,内容合适,例子简单,基本都可以使用,从入门一步一步介绍,比较系统一点