Flink工作空间支持全托管存储和绑定OSS Bucket两种存储类型(在开通时选择)。本文为您介绍不同存储类型下资源管理的使用方法。
使用限制
目前仅北京、上海、杭州和深圳地域开放全托管存储。
查看存储类型
登录实时计算管理控制台。
单击目标工作空间操作列下的
,查看存储类型。存储类型
图示
OSS Bucket
目录说明
当您在开通Flink工作空间时存储类型选择为OSS Bucket,Flink将会在该Bucket中创建以下目录存放相关文件。
目录 | 内容 |
artifacts | 上传的JAR包和附加依赖、Python文件和依赖都会被存储到该目录。 |
sql-artifacts | 注册自定义函数和连接器所依赖的文件会被存储到该目录。 |
flink-jobs | Flink作业的HA(High Available)信息和系统检查点信息会被存储到该目录。 |
flink-savepoints | 在实时计算开发控制台上单击创建快照,最终生成的快照文件会被存储到该目录。 |
flink-sessionclusters | Session集群的HA信息和系统检查点信息会被存储到该目录。 |
plan | 使用专家模式时,配置的资源信息会被存储到该目录。 |
logs | 如果您将作业的日志配置输出到OSS,则日志会被存储到该目录。 |
资源管理
登录实时计算管理控制台。
单击目标工作空间操作列下的控制台。
在左侧导航栏,单击资源管理,您可以进行如下操作。
上传资源:单击上传资源后选择本地文件上传资源,或者直接将待上传文件拖拽到资源列表区域。
上传后,文件路径格式为
oss://<您绑定的OSS Bucket名称>/artifacts/namespaces/<项目空间名称>/<文件名>
,您可以单击文件名称复制路径。下载资源:单击操作列的下载,可以将OSS Bucket的文件下载到本地进行查看。
删除资源:单击操作列的删除,可以将OSS Bucket的文件直接删除。
对于OSS Bucket存储方式,您在此只能上传、下载和删除artifacts目录的文件。
全托管存储
登录实时计算管理控制台。
单击目标工作空间操作列下的控制台。
在左侧导航栏,单击资源管理。
单击相应的页签进行相关操作。
页签
说明
资源文件
上传作业资源,例如开发的作业文件、作业需要的相关数据文件或注册自定义函数和连接器所依赖的文件等。
上传后,文件路径格式为
oss://flink-fullymanaged-<工作空间ID>/artifacts/namespaces/<项目空间名>/<文件名>
。作业状态
展示作业运行生成的系统检查点及作业快照文件、HA文件的大小和修改时间等信息。您可以单击作业名称跳转到状态集管理中进行配置和查看。
作业日志
展示作业运行生成的TaskManagers和JobManagers日志文件的大小和修改时间等信息。您可以单击作业名称跳转到作业日志页签查看日志详情。
编译文件
展示作业运行生成的执行计划和Job Graph文件的大小和修改时间等信息。您可以单击作业名称跳转到部署详情页签查看具体的执行计划和Job Graph。
其他
其他类型的文件。