全部产品
弹性计算 会员服务 网络 安全 移动云 数加·大数据分析及展现 数加·大数据应用 管理与监控 云通信 阿里云办公 培训与认证 ET大脑 更多
存储与CDN 数据库 域名与网站(万网) 应用服务 数加·人工智能 数加·大数据基础服务 互联网中间件 视频服务 开发者工具 解决方案 物联网 智能硬件
业务实时监控服务 ARMS

清洗日志

更新时间:2018-07-20 18:35:26

清洗日志是指通过切分、静态 Join 等操作,将日志数据转化为标准 Key-Value(KV)格式的过程。

流程导航

点击以下流程图可跳转至相关步骤的文档。

配置数据源
清洗日志
创建报警
创建数据集
创建事件集
添加模式检测

前提条件

已完成自定义监控任务的配置数据源步骤。

背景信息

日志清洗有两种模式:智能切分和自定义切分。智能切分模式会对抓取的日志数据进行自动切分,将其转化为标准的 KV 格式。您还可以调整方案,包括删除和修改等操作。如果智能切分方案无法满足需求,您可以使用可视化的自定义切分功能。

  1. 在控制台左侧菜单栏中选择自定义监控 > 监控任务管理

    监控任务管理页面打开。

  2. 在页面上找到目标监控任务,单击右侧的编辑,并进入日志清洗页面。

  3. 单击智能切分标签页,并单击获取方案

    ARMS 会对日志抓取结果区域中的样例日志进行智能切分,切分方案显示在下方表格中。

    将鼠标悬停在需要修改的字段所在的行,会显示编辑和删除图标。

    • 要编辑字段,单击编辑图标,然后在编辑切分方案对话框中修改字段名称或切分类型。
    • 要删除字段,单击删除图标,然后在删除切分字段对话框中单击删除

    注意: 修改方案后,如需恢复为推荐方案,请单击重置方案

  4. 如果智能切分方案无法满足需求,请单击自定义切分标签页。

    自定义切分标签页打开。

    • A:样例日志区域
    • B:可视化清洗流程编辑区域
    • C:清洗结果预览区域
  5. 在可视化清洗流程编辑区域,按需执行以下操作。

    • 要插入积木块,请单击编辑区左侧菜单,然后单击要插入的积木块。

    • 要拼接积木块,请按住目标积木块,将其拖移至其他积木块的接口处并释放,积木块将会自动吸附在一起。

    • 要移除积木块,请按住目标积木块,将其拖移至右下角的垃圾桶图表上并释放。提示: 积木块的本质是 XML 代码,如需复用拼装好的积木块,请单击导入/导出,然后在导入/导出切分方案对话框中,拷贝当前代码留待日后使用(即导出),或者将其他可复用的代码粘贴至此处(即导入)。
  6. 单击日志切分预览

    日志切分结果显示在清洗结果预览区域。

  7. 单击保存下一步

    数据集与报警配置页面打开。

相关文档

本文导读目录