Scrapy
软件描述
Scrapy 是一个用 Python 编写的免费开源网络爬取框架。最初为网页抓取而设计,也可用于通过 API 提取数据或作为通用网络爬虫。它由 Zyte(前身为 Scrapinghub)开发并维护,是一家网络抓取公司。
官方网站
访问软件的官方网站了解更多信息
官方认证
scrapy.org
安全链接HTTPS
什么是 Scrapy?
Scrapy 是一个用 Python 编写的免费开源网络爬取框架。最初为网页抓取而设计,也可用于通过 API 提取数据或作为通用网络爬虫。它由 Zyte(前身为 Scrapinghub)开发并维护,该公司是一家网络抓取开发与服务公司。
🔄 替代方案
102 个选择
Lookyloo
Lookyloo 是一个网页界面,允许用户捕获网站页面,然后显示相互调用的域名树。

artoo.js
artoo.js 是一段旨在在浏览器控制台中运行的 JavaScript 代码,可为您提供一些网页抓取工具。

ScraperAPI
ScraperAPI 通过管理IP轮换、无头浏览器和验证码,实现简单高效的网络爬取,简化了从电商、搜索引擎结果页、社交媒体、房地产、旅游网站和评论等平台提取数据的过程。开发者只需提供网址即可轻松获取HTML页面。

dexi.io
Dexi 是专业人员最全面的网络数据处理工具。提取、增强并连接任意数据源至其他数据源。也被认为是功能最强大的网络爬虫工具。全部功能均在您的浏览器中提供——免费试用。

Simplescraper
一款快速、直观且完全免费的浏览器网络爬虫。几秒钟内即可下载网站和表格数据。

WebScraping.Download
这是一款用于从网站提取数据的可视化网络爬虫软件,专为笔记本电脑、平板电脑和PC设计,无需依赖云服务。

ShoppingScraper
一款简单智能的电商采集工具,无需编程技能即可轻松抓取网店和电商平台的实时价格及搜索结果。




