Flink全托管支持在作业探查界面、对象存储OSS或者日志服务SLS上查看历史作业实例的日志。本文为您介绍如何在作业探查界面、OSS或SLS上查看历史作业实例日志。
背景信息
如果出现以下情况,则您需要查看历史作业实例的日志:
- 您需要查看、搜索和分析历史作业实例的运行日志(系统默认保留最近5 MB大小的运行日志)。
- Flink UI无法打开,需要查看Job Manager日志定位问题。
前提条件
- 在作业探查界面查看历史作业实例日志,需要您在作业开发页面的高级配置中已打开日志归档功能。默认已开启日志归档功能。
- 在OSS或者SLS上查看历史实例的日志,需要您在Flink全托管上已配置了历史作业实例的日志输出到OSS或者SLS,详情请参见配置历史作业实例日志输出。
使用限制
- 在VVR 3.x版本,仅VVR 3.0.7及以上版本支持查看历史作业实例的TM日志。
- 在VVR 4.x版本,仅VVR 4.0.11及以上版本支持查看历史作业实例的TM日志。
注意事项
- 如果Task Manager和Job Manager任意一个启动,日志都会写到SLS或OSS。但Task Manager和Job Manager都没有正常启动时,日志不会被写到SLS或OSS。
- 如果因为Job Manager和Task Manager都没有正常启动,导致您在OSS上没有找到对应的日志文件,请联系我们。
- 日志配置中默认会保留2个文件,每个文件大小为5 MB,不建议您修改该值。如果该日志保存大小不满足您的需求,则请将日志输出至OSS中。说明 图片上的文件个数不包括正在写的文件,即如果这里配置为1,则最多会保存2个文件,一个保存在内存中,一个保存在您的本地磁盘中。