2025-04-22版本

本文介绍20250422日发布的实时计算Flink版的重大功能变更和主要缺陷修复。

重要

本次升级将分阶段灰度发布,具体升级计划请关注实时计算控制台的最新公告。如果您不能使用相关新功能,说明您的账号暂未完成灰度。如果您需要尽快升级,请提交工单告知我们,我们将结合实际情况进行安排。

概述

本次发布为实时计算Flink版产品平台功能升级,以下是本次更新的主要亮点:

  • 支持将用户自持的OSS Bucket迁移至全托管存储:您现有的实时计算Flink工作空间可通过本功能将原本绑定的OSS存储更换为最新的全托管存储,从而提升Flink作业的稳定性和效率。

  • 支持项目空间克隆:支持您将源项目空间下的实体(如作业草稿、Catalog等)以及配置信息复制至同地域下的目标项目空间,提升资源复用率并降低开发成本。同时满足实体离线备份场景,确保数据安全性和可恢复性。

  • 支持修改物化表Query:业务逻辑发生变化时,支持您修改已有物化表的Query信息,修改后可基于修改逻辑获取最新的数据。您也可以对物化表的历史分区设置手动回刷和级联回刷,完成对历史数据的更新。

  • 支持将现有的CDXS作业迁移为YAML作业:在新建YAML时,您可以选择已有的CTAS或者CDASSQL作业,我们会将其自动转换为YAML作业,无需手动操作。

  • SQL作业支持Hive Kerberos:可以使用SQL作业读写支持KerberosHive集群,满足安全合规要求。

主要功能介绍

特性

详情

相关文档

支持将OSS Bucket迁移至全托管存储

通过迁移功能,您可以将作业所需的静态数据以及运行过程中生成的内部数据文件迁移至全托管存储。

相比原有的绑定OSS存储方式,全托管存储通过统一管理作业运行所需数据显著提升了作业的稳定性、效率以及运维便捷性。

OSS Bucket数据迁移至全托管存储

支持项目空间克隆

项目空间克隆功能可以帮您快速将源项目空间中的实体(如作业草稿、Catalog等)及配置信息复制到目标项目空间,从而有效减少重复开发工作,提升资源利用效率,同时可实现故障后的数据冷备份。

项目空间克隆

支持将现有的CDXS作业迁移为YAML作业

在新建YAML作业时,您可以通过现有的CTASCDAS作业快速生成数据摄入YAML作业,无需手动进行转换。

数据摄入YAML作业开发(公测中)

自动调优支持场景化规则设置

智能调优中自适应策略支持根据业务需求设置扩缩容触发条件,您可以选择启用或禁用特定条件,满足任一启用条件即可触发扩缩容操作。

配置自动调优

支持修改物化表Query

  • 业务逻辑发生变化时,支持修改已有物化表的Query信息,修改后可基于修改逻辑获取最新的数据。

  • 可以对物化表的历史分区设置手动回刷和级联回刷,完成对历史数据的更新。

创建及使用物化表

SQL作业支持Hive Kerberos

您可以使用SQL作业读写支持KerberosHive集群。