采集日志中文乱码的处理方法

更新时间:
复制 MD 格式

当日志包含中文时,使用日志服务采集日志可能会出现中文乱码。本文介绍采集日志中文乱码的解决方法。

问题现象

在使用日志服务采集日志时,日志中包含中文,但是采集后出现乱码。

采集说明

修改配置仅对新采集的日志生效,已存储的日志数据不会自动修正。如需修正历史日志编码问题,参考本文并且按照导入历史日志文件重新处理。

步骤一:检查原始日志编码格式

  1. 在Notepad++中打开原始日志,在右下角可以查看当前文件的编码字符集。

    2023-10-05 14:30:15 [INFO] [OrderService] 开始创建新订单, 用户ID: 100023, 商品ID: SKU-7782
    2023-10-05 14:30:17 [DEBUG] [OrderService] 订单校验通过 - 库存充足 (剩余库存: 85), 地址验证:浙江省杭州市
    2023-10-05 14:30:19 [WARN] [OrderService] 检测到重复提交请求, 用户会话ID: SES-20231005143012, 已忽略本次
    2023-10-05 14:30:22 [INFO] [OrderService] 支付网关回调成功, 订单号: PO-20231005143015, 金额: ¥358.00
    2023-10-05 14:30:25 [INFO] [OrderService] 订单状态更新完成, 当前状态:待发货, 物流商:顺丰速运
    2023-10-05 14:30:31 [METRICS] [OrderService] 接口性能 - /api/order/create: 平均响应时间 128ms
    2023-10-05 14:30:34 [DEBUG] [OrderService] Redis缓存命中订单详情, 订单号: PO-20231005143015
    2023-10-05 14:30:37 [AUDIT] [OrderService] 敏感操作记录 - 管理员[admin]修改了订单金额, 原金额: ¥358.00
    2023-10-05 14:30:40 [INFO] [OrderService] 生成电子发票成功, 发票号: INV-20231005143015
  2. 如果编码字符集不是UTF-8,右击鼠标,转换当前文件的编码格式为UTF-8。转码后,检查日志文件是否因为转码导致内容乱码。

    说明

    转码前建议备份日志文件,避免因为转码导致日志内容乱码。

步骤二:修改日志服务采集配置的编码

  1. 登录日志服务控制台。在Project列表区域,单击目标Project。

    image

  2. 在日志存储 > 日志库页签中,单击目标日志库前面的>,依次选择数据接入 > Logtail配置。

  3. 在Logtail配置列表中,单击目标Logtail采集配置。

  4. 在Logtail配置页面,单击修改。

  5. 单击其他输入配置,选择文件编码为UTF8,单击保存。

步骤三:查看索引配置

  1. 在日志存储 > 日志库页签中,单击目标Logstore。

  2. 在LogStore的查询和分析页面,单击查询分析属性 > 属性。

  3. 在查询分析页面,打开全文索引和字段索引的包含中文。

步骤四:查询日志

在查询/分析页面的搜索栏,输入查询或分析语句,并单击查询/分析。

说明

按照相关步骤操作后,若查询分析中文日志仍出现乱码,请提工单。

查询结果中,中文日志内容正常显示,不再出现乱码。