Python爬虫技术/框架比对

• 2020年04月15日

技术 区别 描述 Scrapy框架 主流爬虫框架不适合新手扩展性高 Scrapy框架是一套比较成熟的Python爬虫框架，是使用Python开发的快速、高层次的信息爬取框架，可以高效的爬取web页面并提取出结构化数据 Portia框架 无需编程基础无需开发页面配置 Portia框架是一款允许没有任何编程基础的用户可视化地爬取网页的爬虫框架 Crawley框架 无 Crawley也是Python开发出的爬虫框架，该框架致力于改变人们从互联网中提取数据的...