Scrapy 是一个用 Python 编写的免费开源网络爬取框架。最初为网页抓取而设计，也可用于通过 API 提取数据或作为通用网络爬虫。它由 Zyte（前身为 Scrapinghub）开发并维护，是一家网络抓取公司。

提供 102 个替代方案

Portia 是一款开源的可视化抓取工具，无需任何编程知识即可抓取网站！只需标注您感兴趣的页面，Portia 就会自动生成爬虫，从相似页面中提取数据。

提供 84 个替代方案

UI（用户界面）自动化的目的是重现您与网站或桌面之间的认知交互，使计算机能够根据您的时间安排或条件替您完成这些操作。

提供 21 个替代方案

Flyscrape 是一个独立且可脚本化的网页爬虫，结合了 Go 语言的速度与 JavaScript 的灵活性。—— 专注于数据提取，而非请求处理。

提供 63 个替代方案

Lookyloo 是一个网页界面，允许用户捕获网站页面，然后显示相互调用的域名树。

提供 60 个替代方案

ACHE 是一个用于特定领域搜索的网络爬虫。

提供 9 个替代方案

Apache Nutch 是一个高度可扩展且可伸缩的开源网络爬虫软件项目。

提供 10 个替代方案

Nodejs 网页爬虫。可从您自己的代码、命令行或 Docker 容器中使用。支持多种存储选项：SQLite、MySQL、PostgreSQL。支持多种浏览器或 DOM 类客户端：Puppeteer、Playwright、Cheerio、JSDOM。