Scrapy
软件描述
Scrapy 是一个用 Python 编写的免费开源网络爬取框架。最初为网页抓取而设计,也可用于通过 API 提取数据或作为通用网络爬虫。它由 Zyte(前身为 Scrapinghub)开发并维护,是一家网络抓取公司。
官方网站
访问软件的官方网站了解更多信息
官方认证
scrapy.org
安全链接HTTPS
什么是 Scrapy?
Scrapy 是一个用 Python 编写的免费开源网络爬取框架。最初为网页抓取而设计,也可用于通过 API 提取数据或作为通用网络爬虫。它由 Zyte(前身为 Scrapinghub)开发并维护,该公司是一家网络抓取开发与服务公司。
🔄 替代方案
102 个选择
Browserhub
Browserhub 无需编码即可帮助您从任何网站抓取和提取数据。使用我们的调度器运行网络爬虫,并通过无代码集成优化您的业务流程。

JobsPikr
JobsPikr 是一个职位数据采集平台,采用基于人工智能的机器学习技术,直接从公司网站上提取数据。

TexAu
增长自动化平台,助力企业快速扩张。提取并筛选数据,每周生成数百个潜在客户。TexAu 是 PhantomBuster 的首选替代方案。

get-set, Fetch!
Nodejs 网页爬虫。可从您自己的代码、命令行或 Docker 容器中使用。支持多种存储选项:SQLite、MySQL、PostgreSQL。支持多种浏览器或 DOM 类客户端:Puppeteer、Playwright、Cheerio、JSDOM。







