Linux实例中的/var/log/messages文件里有大量的包含...

问题描述 Linux实例中的/var/log/messages 文件里有大量的包含 iptables 字段的日志。问题原因 这个是Iptables产生的日志信息,Iptables自身的日志默认不开启。解决方案 阿里云提醒您:如果您对实例或数据有修改、变更等风险操作,务必注意...

Logtail采集日志失败的排查思路

主机环境 操作系统 Logtail 日志文件 Linux Logtail(64位程序)/usr/local/ilogtail/ilogtail.LOG和/usr/local/ilogtail/logtail_plugin.LOG 文件(HTTP、MySQL Binlog、MySQL查询结果等输入源的日志记录)。Windows(64位操作系统)...

CDN访问日志的分析方法

上传日志文件至本地Linux系统服务器。登录本地Linux系统服务器,执行如下命令,查询状态为200的所有记录并输出至指定的文件中。grep-w"200"[$Log_Txt]|awk '{if($9="206")print$0}'>200log.txt 说明:[$Log_Txt]为下载的日志文件。执行如下...

新功能发布记录

2024年2月 功能名称 功能描述 支持地域 相关文档 导入Amazon S3文件 阿里云日志服务SLS支持导入Amazon S3中的日志文件。您可以通过数据导入的方式将Amazon S3的日志文件导入到阿里云的日志服务,实现日志的查询分析、加工等操作。全部地域 ...

EMR HBase日志说明

日志文件保留策略 由于*.gc和*.out日志文件日志量较少,这里的日志文件保留策略主要是针对*.log日志文件。默认保留策略:保留20个,每个文件最大256 MB。说明 您可以根据实际需求修改/etc/taihao-apps/hbase-conf/log4j.properties 配置...

应用监控指标

服务总览 指标名称 说明 单位 数据源 ERROR 应用错误 次 应用日志(自定义日志文件)配置于 Error 应用错误。PV 页面访问量 次 应用日志(自定义日志文件)配置于 PV 页面访问量。Service 应用服务被调用 次 应用日志(自定义日志文件)...

日志管理

如果已经将某个日志文件添加到日志服务,也可以在 日志目录 页面日志文件列表的 操作 列,单击 搜索。在 日志搜索 页面 日志文件 下拉列表中选择日志目录或日志文件。查看应用日志。查看应用日志包括 日志聚类、LiveTail 和 查询和分析。...

使用Cloud Shell下载日志数据

通过Cloud Shell可以快速下载较大数量的日志文件,并快速上传至OSS。本文介绍使用Cloud Shell下载日志数据。前提条件 如果您使用RAM用户下载日志,则需要先给RAM用户授予以下权限:只读访问日志服务的权限(AliyunLogReadOnlyAccess)。...

LiveTail

在传统的运维方式中,如果需要对日志文件进行实时监控,需要在服务器上对日志文件执行 tail-f 命令,如果实时监控的日志信息不够直观,还需加上 grep 命令或者 grep-v 命令进行关键词过滤。日志服务在控制台提供了日志实时监控的交互功能...

上下文查询

传统的上下文查询中,需要管理员等相关人员添加机器登录权限,然后运维人员依次登录应用所部署的每一台机器,以订单ID为关键词搜索应用程序日志文件,帮助判断下单失败原因。在日志服务中,可以按照以下步骤排查。在服务器上安装日志采集...

IIS模式解析

配置说明 参数名称 说明 日志格式 选择您的IIS服务器日志采用的日志格式,具体说明如下:IIS:Microsoft IIS日志文件格式。NCSA:NCSA公用日志文件格式。W3C:W3C扩展日志文件格式。IIS配置字段 配置IIS配置字段,具体说明如下:日志格式为...

回收站

例如使用Nginx配置了自动轮转日志且最多保留20个日志文件,当日志文件 test.log.19 轮转为日志文件 test.log.20 时,原日志文件 test.log.20 将进入回收站。说明 如果仅覆写文件内容,不删除该文件,不会触发文件进入回收站。例如调用 open...

查看文件日志

您可以通过给日志文件名称添加通配符的方式滚动日志文件名称通配符支持星号(*)和问号?查看文件日志时,在 SLS控制台 无数据展示,如何处理?通常SLS默认查询最近15分钟内的查询结果。如果SLS无数据显示,建议使用Webshell查看您的应用...

通过DaemonSet-CRD方式采集容器日志

如果下发Logtail配置后,日志文件无更新,则Logtail不会采集该文件中的日志。更多信息,请参见 读取日志。功能特点 Logtail支持将容器产生的文本日志、标准输出和容器相关的元数据信息一起上传到日志服务。Logtail具备以下功能特点。采集...

查询不到日志的排查思路

待采集的日志文件没有实时写入数据。您可以打开/usr/local/ilogtail/ilogtail.LOG 查看报错信息。常见错误如下:parse delimiter log fail:通过分隔符模式采集日志出错。parse regex log fail:通过完整正则模式采集日志出错。分词符设置...

消费-搭建监控系统

统一的配置管理:需要收集哪些日志文件,只要在服务端配置一次,配置会自动下发到所有机器。结构化的数据:所有数据格式化成日志服务的数据模型,方便下游消费。弹性的服务能力:处理大规模数据写入和读取的能力。图 1.监控系统架构 如何...

通过DaemonSet-控制台方式采集容器文本日志

如果下发Logtail配置后,日志文件无更新,则Logtail不会采集该文件中的日志。更多信息,请参见 读取文件。功能特点 Logtail支持将容器产生的文本日志和容器相关的元数据信息一起上传到日志服务。Logtail具备以下功能特点。采集文本日志时,...

Linux系统日志/var/log配置绕接

问题现象 发现节点的/var目录占用空间较多,导致K8s不可用或者节点卡顿 修复方案 我们在Trident>1.12.0版本,会自动配置/var/log目录的日志绕接管理,此方案适用于小于1.12的Trident 先清理/var/log/目录下的系统日志文件,注意,这些文件...

采集Python日志

(pathname)s 日志文件路径。(filename)s 日志文件名。(module)s 日志所在的模块名。(funcName)s 日志输出函数的名称。(lineno)d 日志输出函数的语句所在的代码行。(created)f 日志创建时间,UNIX时间戳格式。(relativeCreated)d 日志创建...

Logtail配置

preserve boolean 否 true 如果一个日志文件在指定时间内没有任何更新,则认为该文件已超时。可选值如下:true(默认):永不超时。false:如果日志文件在30分钟内没有更新,则认为已超时,并不再监控该文件。preserveDepth integer 否 1 ...

云数据库RDS

mysql_perf_innodb_log_write_requests 平均每秒日志写请求数 mysql_perf_innodb_log_writes 平均每秒向日志文件的物理写次数 mysql_perf_innodb_os_log_fsyncs 平均每秒向日志文件完成的fsync()写数量 mysql_perf_ins_size RDS实例磁盘...

导入Amazon S3文件

阿里云日志服务SLS支持导入Amazon S3中的日志文件。您可以通过数据导入的方式将Amazon S3的日志文件导入到阿里云的日志服务,实现日志的查询分析、加工等操作。目前日志服务只支持导入5GB以内的S3文件,压缩文件大小按照压缩后的大小计算。...

快速入门

如果下发Logtail配置后,日志文件无更新,则Logtail不会采集该文件中的日志。更多信息,请参见 读取日志。背景信息 本示例中待采集的日志路径为/var/log/nginx/access.log,日志样例为 127.0.0.1-[10/Jun/2022:12:36:49+0800]"GET/index....

配置日志采集

本文介绍如何在EDAS控制台中配置日志采集功能,将部署在容器服务Kubernetes集群中的应用的相关业务文件日志、容器标准输出日志采集到日志服务进行查询分析。前提条件 已创建ACK集群。具体操作,请参见 创建Kubernetes托管版集群、创建...

日志管理

持久化日志:创建或部署任务时,SAE 可以自动打通日志服务SLS,将容器标准输出日志(stdout)和业务文件日志(容器内日志路径)输出到SLS,帮助您无限制行数地查看日志、自聚合分析日志。设置日志收集 创建或者编辑任务模板时,如果您启用...

PolarDB云原生数据库

mysql_perf_innodb_log_write_requests 每秒日志写请求数 mysql_perf_innodb_os_log_fsyncs 每秒向日志文件完成的fsync()写数量 mysql_perf_innodb_rows_deleted 每秒删除的行数 mysql_perf_innodb_rows_inserted 每秒插入的行数 mysql_...

导入OSS数据

您可以将OSS Bucket中的日志文件,通过数据导入方式导入到日志服务,实现日志的查询分析、加工等操作。目前日志服务只支持导入5 GB以内的OSS文件,压缩文件大小按照压缩后的大小计算。前提条件 已上传日志文件到OSS Bucket中。具体操作,请...

文件存储 HDFS 版(Apsara File Storage for HDFS)...

ActionTrail中记录的 文件存储 HDFS 版(Apsara File Storage for HDFS)操作日志 文件存储 HDFS 版(Apsara File Storage for HDFS)的操作审计日志主要包含的是API事件,其中OpenAPI事件在ActionTrail中记录的eventType取值为 ApiCall。...

日志采集Agent对比

不支持 支持cpu/内存阈值保护 日志文件采集场景-性能对比 以Nginx的access log为样例,如下一条日志365字节,结构化成14个字段:在下面的测试中,将模拟不同的压力将该日志重复写入文件,每条日志的time字段取当前系统时间,其它13个字段...

保留字段

Logtail采集的日志文件路径,Logtail为日志自动填加该字段。可用于日志查询、分析、自定义消费。对该字段进行SQL分析时,需要给该字段加上双引号。tag_:_hostname_字符串格式。索引设置:开启索引后,日志服务默认为_tag_:_hostname_创建...

术语表

Logtail配置 Logtail配置是Logtail进行日志采集的策略集合,包括日志文件的位置、采集方式等。更多信息,请参见 Logtail配置。机器组 机器组是包含多台服务器的虚拟分组。日志服务通过机器组的方式管理所有需要通过Logtail采集日志的服务器...

采集Windows事件日志

如果下发Logtail配置后,日志文件无更新,则Logtail不会采集该文件中的日志。更多信息,请参见 读取文件。原理 对于事件日志,Windows提供了 Windows Event Log 和 Event Logging 两套API,前者是后者的升级,仅在Windows Vista及以上的...

采集标准Docker容器日志

如果下发Logtail配置后,日志文件无更新,则Logtail不会采集该文件中的日志。更多信息,请参见 读取文件。步骤一:部署Logtail容器 拉取Logtail镜像。docker pull registry.cn-hangzhou.aliyuncs.com /log-service/logtail 您需要根据实际...

使用前须知

阿里云企业级分布式应用服务EDAS联合日志服务推出日志功能,支持将部署在容器服务Kubernetes集群中的应用的相关业务文件日志、容器标准输出日志投递到日志服务进行查询与分析。本文介绍EDAS日志功能相关的资产、费用等信息。资产详情 ...

云产品日志概述

云安全中心 安全日志 漏洞日志 基线日志 安全告警日志 云平台配置检查日志 网络日志 DNS解析日志 本地DNS日志 网络会话日志 Web访问日志 主机日志 进程启动日志 网络连接日志 登录流水日志 暴力破解日志 进程快照日志 账号快照日志 端口...

使用IIS配置模式采集日志

日志文件编码 设置日志文件编码格式,取值为utf8、gbk。时区属性 采集日志时,日志时间的时区属性。机器时区:默认为Logtail所在主机或容器的时区。自定义时区:手动选择时区。超时属性 如果一个日志文件在指定时间内没有任何更新,则认为...

使用极简模式采集日志

日志文件编码 设置日志文件编码格式,取值为utf8、gbk。时区属性 采集日志时,日志时间的时区属性。机器时区:默认为Logtail所在主机或容器的时区。自定义时区:手动选择时区。超时属性 如果一个日志文件在指定时间内没有任何更新,则认为...

使用Nginx配置模式采集日志

日志文件编码 设置日志文件编码格式,取值为utf8、gbk。时区属性 采集日志时,日志时间的时区属性。机器时区:默认为Logtail所在主机或容器的时区。自定义时区:手动选择时区。超时属性 如果一个日志文件在指定时间内没有任何更新,则认为...

使用Apache配置模式采集日志

日志文件编码 设置日志文件编码格式,取值为utf8、gbk。时区属性 采集日志时,日志时间的时区属性。机器时区:默认为Logtail所在主机或容器的时区。自定义时区:手动选择时区。超时属性 如果一个日志文件在指定时间内没有任何更新,则认为...

使用JSON模式采集日志

日志文件编码 设置日志文件编码格式,取值为utf8、gbk。时区属性 采集日志时,日志时间的时区属性。机器时区:默认为Logtail所在主机或容器的时区。自定义时区:手动选择时区。超时属性 如果一个日志文件在指定时间内没有任何更新,则认为...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
日志服务 文件存储 CPFS 云消息队列 Kafka 版 云数据库 RDS 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用