您可以使用Session集群模式部署或调试作业,提高作业JM(Job Manager)资源利用率和提高作业启动速度。
背景信息
Flink全托管支持Per-Job集群和Session集群两种集群模式。两种集群模式有以下区别:
- Per-Job集群(默认):作业之间资源隔离,每个作业都需要一个独立的JM,因此小任务JM的资源利用率较低。因此,适用于占用资源比较大或持续稳定运行的作业。
- Session集群:多个作业可以复用相同的JM,可以提高JM资源利用率。因此适用于占用资源比较小或任务启停比较频繁的作业。
说明
- 每个项目空间可以配置多个Session集群,但只能选择一个Session集群开启SQL Preview 。
- Session集群暂不支持开启自动调优功能。
- 每个Session集群运行后,都会额外消耗0.5 CU资源。
在文档使用中是否遇到以下问题
更多建议
匿名提交