mmscrapy爬虫程序是使用scrapy框架搭建的爬虫项目，解scrapy的使用方式和学习scrapy的使用技巧、编写自己的爬虫程序、分布式爬虫功能支持，scrapy支持很多特性，不必要自己创轮子

python scrapy scrapyd spiderkeeper