Scrapy
软件描述
Scrapy 是一个用 Python 编写的免费开源网络爬取框架。最初为网页抓取而设计,也可用于通过 API 提取数据或作为通用网络爬虫。它由 Zyte(前身为 Scrapinghub)开发并维护,是一家网络抓取公司。
官方网站
访问软件的官方网站了解更多信息
scrapy.org
什么是 Scrapy?
Scrapy 是一个用 Python 编写的免费开源网络爬取框架。最初为网页抓取而设计,也可用于通过 API 提取数据或作为通用网络爬虫。它由 Zyte(前身为 Scrapinghub)开发并维护,该公司是一家网络抓取开发与服务公司。
🔄 替代方案
102 个选择
Web Robots
Web Robots 是一个专为应对现代网页而构建的网络爬取平台。它可与任何可在 Chrome 浏览器中打开的网站配合使用,能够处理 JavaScript、AJAX、Cookies、会话和重定向、表单、登录及点击操作。

Automatio
Automation 是一款无需编写代码的网络自动化工具,使任何人无需编写代码即可创建网络机器人或进行网络自动化。

Scrupp
适用于LinkedIn和Sales Navigator的Chrome扩展,可提取个人资料、公司及职位信息,查找并验证电子邮件,单次会话支持抓取最多2500个资料,支持高级筛选,并增强潜在客户信息,助力高效B2B推广与营销。

Scrapeful
为企业需求定制的网络爬虫服务 我们为客户量身打造网络爬虫解决方案,因为每位客户的数据需求和要解决的问题各不相同。

Webhose.io
我们爬取网络,让您无需动手。我们的爬虫每天下载并整理数百万条帖子,我们存储并索引数据,您只需定义所需的数据部分即可。

ScrapingDuck
ScrapingDuck 是一个简单的网页抓取 API,可处理无头浏览器和旋转代理,让您无需担心被封禁,即可抓取任何 JavaScript 重度网站。

Looksy | Smart Web Scraper
Looksy 是一款高级网络爬虫,通过智能搜索工具、递归 URL 发现、多线程、人类行为模拟以及智能文件名猜测,高效地查找并下载图片及其他文件。




