应用程序生命周期
Flink 中的应用程序代表一段用于执行的用户自定义逻辑。它提供了统一的抽象来跟踪用户 main() 方法的执行状态并管理其关联的作业。更多详情请参阅 FLIP-549
和 FLIP-560。
集群-应用程序-作业架构
Flink 现在使用三层结构:集群-应用程序-作业。该结构统一了不同的部署模式,并提供了用户逻辑执行的可观测性和可管理性。
集群可以在两种模式下运行:
- 应用程序模式:每个应用程序一个集群
- 会话模式:一个集群用于多个应用程序
一个应用程序可以包含 0 到 N 个作业,每个作业与一个应用程序关联。
应用程序实现
应用程序提交
应用程序提交到集群并通过不同的机制开始执行,具体取决于部署模式和提交方式。
在应用程序模式中,集群是为单个应用程序专门启动的。在集群启动期间,会自动从用户的 JAR 文件生成一个 PackagedProgramApplication。集群就绪后应用程序立即开始执行,其生命周期与用户 main() 方法的执行绑定。
在会话模式中,多个应用程序可以共享同一个集群。应用程序可以通过各种接口提交:
-
REST API (
/jars/:jarid/run-application):此端点从上传的用户 JAR 创建一个PackagedProgramApplication并开始执行。与应用程序模式类似,应用程序的生命周期与用户的main()方法绑定。 -
REST API (
/jars/:jarid/run) 和 CLI 提交:这些接口直接执行用户的main()方法。当方法调用execute()提交作业时,该作业被封装为SingleJobApplication。在这种情况下,应用程序的生命周期与作业的执行状态绑定,使其成为单作业提交的轻量级封装。
本文来自 Apache Flink 文档贡献者,按 Apache 2.0 整理版式与相对链接,保留正文与代码。图示请参阅原文。作者与贡献记录。
