全部产品
弹性计算 会员服务 网络 安全 移动云 数加·大数据分析及展现 数加·大数据应用 管理与监控 云通信 阿里云办公 培训与认证 智能硬件
存储与CDN 数据库 域名与网站(万网) 应用服务 数加·人工智能 数加·大数据基础服务 互联网中间件 视频服务 开发者工具 解决方案 物联网 更多
业务实时监控服务 ARMS

清洗日志

更新时间:2018-06-01 10:14:04

日志清洗是指对日志进行切分、静态 Join 等操作,最终转化标准的 Key-Value(KV)格式。目前日志清洗支持两种模式:智能切分、自定义切分。

流程导航

点击以下流程图可跳转至相关步骤的文档。

配置数据源
清洗日志
创建报警
创建数据集
添加模式检测配置

智能切分

该模式会对基于日志抓取的结果进行智能切分,将其转化为标准的 KV 格式,并提供几种可选方案。您可以对所选方案进行调整,包括删除和修改等操作。

  1. 选择智能切分标签页,进入智能切分模式。

  2. 单击获取方案

  3. 将鼠标指针放在需要修改的字段对应的一行,会显示编辑删除图标。可以根据需要对字段进行微调,例如修改字段名称和切分类型。

提示:修改方案后,如需恢复为推荐方案,请单击重置方案

自定义切分

如果智能切分方案无法满足需求,您可以使用可视化的自定义切分功能。

日志清洗页面包含三个部分:

  • A:原始日志区域
  • B:可视化清洗流程编辑区域
  • C:清洗结果预览区域
  1. 在日志清洗页面,单击自定义切分标签页,进入自定义切分模式。
  2. 在可视化清洗流程编辑区域,按需执行以下操作。

    • 要插入积木块,请单击编辑区左侧菜单,然后单击要插入的积木块。

    • 要拼接积木块,请按住目标积木块,将其拖移至其他积木块的接口处并释放,积木块将会自动吸附在一起。

    • 要移除积木块,请按住目标积木块,将其拖移至右下角的垃圾桶图表上并释放。

    提示: 积木块的本质是 XML 代码,如需复用拼装好的积木块,请单击导入/导出,然后在导入/导出切分方案对话框中,拷贝当前代码留待日后使用,或者将其他可复用的代码粘贴至此处。

  3. 单击日志切分预览。 日志切分结果显示在清洗结果预览区域。

  4. 单击保存下一步。 数据集与报警配置页面打开。

日志清洗完毕后,可配置数据集与报警。

本文导读目录