曾经有人问我,为何要写100篇关于爬虫的博客?我想说,因为吹牛吹过头了呗,100篇是真的难写。
希望在未来爬虫100例系列博客能在Python爬虫教学领域有那么一点点的位置。
今天开始,我将从一些成熟框架入手,继续提高你的爬虫知识面。
这个框架在最开始就计划写一下了,没想到拖到这里,Portia属于可视化爬虫,基本描述参照下述内容
Portia is a tool that allows you to visually scrape websites without any programming knowledge required. With Portia you can annotate a web page to identify the data you wish to extract, and Portia will understand based on these annotations how to scrape data from similar pages.
大意是:Portia是一个工具,它允许你在不需要任何编程知识的情况下可视化地抓取网站。看来是不用写代码就可以操作了,不过后面的实操告诉我,没那么简单~
github地址:https://github.com/scrapinghub/portia
文档地址:https://portia.readthedocs.io/en/2.0-docs/