Prefect

Prefect 是一个用于数据密集型工作流的编排工具。它是将任何 Python 函数转换为可监控和编排的工作单元的最简单方式。通过 Prefect，您可以构建能够响应外部环境变化并从意外情况中恢复的弹性、动态工作流。仅需几个装饰器，Prefect 即可为您的代码增添自动重试、分布式执行、调度、缓存等功能。所有操作均会被追踪，并可通过 Prefect 服务器或 Prefect Cloud 控制台进行监控。