Scrapy
软件描述
Scrapy 是一个用 Python 编写的免费开源网络爬取框架。最初为网页抓取而设计,也可用于通过 API 提取数据或作为通用网络爬虫。它由 Zyte(前身为 Scrapinghub)开发并维护,是一家网络抓取公司。
官方网站
访问软件的官方网站了解更多信息
官方认证
scrapy.org
安全链接HTTPS
什么是 Scrapy?
Scrapy 是一个用 Python 编写的免费开源网络爬取框架。最初为网页抓取而设计,也可用于通过 API 提取数据或作为通用网络爬虫。它由 Zyte(前身为 Scrapinghub)开发并维护,该公司是一家网络抓取开发与服务公司。
🔄 替代方案
102 个选择
ScrapeUp
使用 ScrapeUp API,可将任何网站转换为数据,该API会处理浏览器、代理轮换和验证码问题,使开发者只需一次API调用即可轻松抓取任意网页。

Listly.io
★5
Listly 是一款网页扩展程序,无需编程即可简化网络数据抓取。它可帮助您将大量数据收集并导出至 Excel 或 Google Sheets。

Data Miner
Data Miner 是一款 Google Chrome 插件,可帮助您从网页中抓取数据并导出为 CSV 文件或 Excel 表格。
Infovium网页数据提取工具为各类企业提供安全、准确的数据,帮助他们根据需求从网站抓取信息,从而推动业务增长。我们以实惠的价格,以最快的速度提供高质量数据库,助力企业高效开展业务对话。

80legs
80legs 提供强大的网络爬取功能,可从网页、图片及其他在线内容中提取数据。立即开始爬取网站,更快、更简单,且无限制范围。

APIPedia
通过API从Google地图、Google搜索结果页、Facebook、Quora、Glassdoor、Trustpilot、G2及其他50多个数据源获取数据。

ACHE Crawler
ACHE 是一个用于特定领域搜索的网络爬虫。





