报警信息写入消息服务MNS
本文为您介绍如何将报警信息写入到指定的消息服务MNS。操作步骤 授予云监控将报警信息写入消息服务MNS的权限。单击 云资源访问授权。单击 同意授权。调用PutResourceMetricRule接口，创建报警规则。关于如何设置请求参数，请参见 ...
Flume消费
日志服务支持通过aliyun-log-flume插件与Flume进行对接，实现日志数据的写入和消费。背景信息 aliyun-log-flume是一个实现日志服务与Flume对接的插件，与Flume对接后，日志服务可以通过Flume与其它数据系统如HDFS、Kafka等对接。aliyun-log...
Flink消费
背景信息 Flink Log Connector包括两部分，消费者（Flink Log Consumer）和生产者（Flink Log Producer），两者用途区别如下：消费者用于从日志服务中读取数据，支持exactly once语义，支持Shard负载均衡。生产者用于将数据写入日志服务。...
日志投递MaxCompute后，如何检查数据完整性
其中，日志真实时间既不是投递数据的时间，也不是日志写入服务端时间。举例：日志时间为2017-05-19 10:43:00，分区字段格式字符串配置为 yyyy_MM_dd_HH_mm，每1小时投递一次。那么无论该日志是什么时刻写入服务端，这条日志会存入...
使用Aliyun Log Java Producer写入日志数据
本文介绍日志服务Aliyun Log Java Producer类库的使用方法。前提条件 已创建RAM用户并完成授权。具体操作，请参见 创建RAM用户并完成授权。已配置环境变量 ALIBABA_CLOUD_ACCESS_KEY_ID 和 ALIBABA_CLOUD_ACCESS_KEY_SECRET。具体操作，请...
分区（Shard）
例如您有两个readwrite状态的Shard，最大可提供10 MB/s的数据写入服务。当您实时写入数据流量达到14 MB/s时，建议分裂其中一个Shard，使readwrite状态的Shard数量达到3个。当您实时写入数据流量仅为3 MB/s时，建议您合并两个Shard。重要 当...
简单上传示例
i+){/数据写入服务端时，每写入8 KB的数据将进行一次网络传输。如果120秒内无网络传输，服务端将自动关闭连接，该Writer将不可用，需要重新创建Writer执行数据写入。recordWriter.write(record);} recordWriter.close();uploadSession....
配置Kafka输出
背景信息 写入数据不支持去重，即如果任务重置位点或者Failover后再启动，会导致有重复数据写入。操作步骤 登录 DataWorks控制台，单击左侧导航栏的 数据建模与开发>数据开发，在下拉框中选择对应工作空间后单击 进入数据开发。鼠标悬停至 ...
使用Java SDK创建定时SQL任务
dataFormat log2log 写入模式。log2log：日志库导入日志库，即表示源Logstore中的数据通过定时SQL处理后将存储到目标Logstore中。log2metric：日志库导入时序库，即表示源Logstore中的数据通过定时SQL处理后将存储到目标MetricStore中。...
如何排查EMR Kafka服务异常
查看最新写入的日志信息，看是否有异常信息输出 tail-f$LOG_DIR_ROOT/kafka/server.log 解决问题，恢复异常服务。定位异常原因后，您可以参考相应的文档解决问题。详情请参见 Kafka常见问题。常见服务异常的处理方法 常见服务异常的处理...
使用前须知
简介 流日志捕获的流量信息以日志形式写入日志服务中。每条流日志记录会捕获特定捕获窗口中的特定五元组网络流。在捕获窗口内，流日志服务会先聚合数据，然后再发布流日志记录。资产详情 自定义的日志服务Project、Logstore 重要 请勿删除...
数据编码方式
Protocol Buffer格式用于结构化数据交换格式，当用户需要写入日志时，需要把原始日志数据序列化成如下格式的Protocol Buffer数据流，然后才能通过API写入服务端。message Log { required uint32 Time=1;UNIX Time Format message Content {...
阿里云ES计费
高级特性 计费项 计费公式 Indexing Service索引构建服务 写入加速流量 按量付费：费用=写入加速流量×流量单价×计费时长。重要 写入加速流量采用阶梯定价。例如，杭州地域写入加速流量的单价：写入加速流量小于等于1 TB/h：0.061 元/GB/h...
Java SDK快速入门
本文介绍如何快速使用日志服务Java SDK完成常见操作，包括创建项目（Project）、创建日志库（Logstore）、写入日志和查询日志等。前提条件 已创建RAM用户并完成授权。具体操作，请参见 创建RAM用户并完成授权。已配置环境变量 ALIBABA_...
日志服务数据同步至Hologres
背景信息 日志服务SLS是云原生观测与分析平台，为Log、Metric、Trace等数据提供大规模、低成本、实时的平台化服务。日志服务一站式提供数据采集、加工、查询与分析、可视化、告警、消费与投递等功能，全面提升您在研发、运维、运营、安全等...
使用GetLogs接口查询日志
示例如下：#encoding:utf-8 import time import os from aliyun.log import*def main():#日志服务的服务入口。更多信息，请参见服务入口。此处以杭州为例，其它地域请根据实际情况填写。endpoint='cn-hangzhou.log.aliyuncs.com' #本示例从...
日志组（LogGroup）
写入日志到日志服务或从日志服务读取日志时，多条日志被打包为一个日志组，以日志组为单元进行写入与读取。该方式可减少读写次数，提高业务效率。每个日志组最大长度为5 MB。日志服务的基本数据模型请参见 LogHub数据模型。
查看本地日志
调用日志接口写的日志会先写入到本地应用的沙盒文件中，触发日志上报逻辑后，再上传到日志服务器。本地日志格式 10.1.60&10.1.68 版本 写入本地的日志在沙盒的 Library>atrack>logs 文件夹下。该文件夹仅存放还未上报的日志，已经上报的...
动作列表
本文介绍RAM中对日志服务资源进行授权的动作列表及说明。RAM中可对日志服务资源进行授权的Action 在RAM中，可以对一个日志服务资源进行以下Action的授权。主要包括读操作、写操作和列表操作。读操作：您可以对日志服务资源进行读取操作。写...
SDK参考概述
日志服务Java SDK：使用GetLogs接口查询日志 使用Java SDK管理日志库Logstore 通过消费组消费数据 使用Aliyun Log Java Producer写入日志数据 日志服务Python SDK：使用GetLogs接口查询日志 使用Python SDK管理日志库Logstore 使用...
通过消费组消费日志
content.Value items.append(item)log_items=dict()log_items['topic']=log_group.Topic log_items['source']=log_group.Source log_items['logs']=items with SampleConsumer.lock:SampleConsumer.log_results.append(log_items)print...
DysmsLog服务关联角色
log:*:*:project/sms-log-*/logstore/*","Effect":"Allow"},{"Action":["log:GetLogStore","log:UpdateLogStore","log:GetIndex","log:CreateIndex","log:UpdateIndex"],"Resource":"acs:log:*:*:project/sms-log-*/logstore/sms-log",...
.NET SDK概述
相关文档 在调用API接口过程中，若服务端返回结果中包含错误信息，则表示调用API接口失败。您可以参考API错误码对照表查找对应的解决方法。更多信息，请参见 API错误处理对照表。阿里云OpenAPI开发者门户提供调试、SDK、示例和配套文档。...
日志服务监控审计
云监控 您可以通过阿里云云监控服务来监控日志服务的写入流量、总体QPS、服务状态等指标，获取日志服务的使用情况。同时您可以通过创建报警规则，对日志采集、Shard资源使用等异常进行监控。更多信息，请参见 云监控。
C++ SDK概述
版本说明 更多信息，请参见 Aliyun Log C++ Release。示例代码 日志服务C++ SDK提供示例代码，方便您参考或直接使用。示例代码包括以下内容：GitHub源码 说明 sample.cpp 写入日志、查询日志、查询Logstore机器组管理等相关示例。
PHP SDK概述
版本说明 更多信息，请参见 Aliyun Log PHP Release 。示例代码 日志服务PHP SDK提供丰富的示例代码，方便您参考或直接使用。示例代码包括以下内容：GitHub源码 说明 sample.php 写入日志、查询日志、查询日志分布情况、Shard管理、批量...
配置告警写入事件库的权限
将告警信息写入事件库时，需要具备角色权限。本文介绍默认角色及自定义角色的权限配置方法。您在配置告警监控规则时，打开输出目标-事件库的开启开关后，需要对角色进行授权。默认角色授权 当 授权方式 选择为 默认角色 时：单击 前往授权...
Python SDK概述
版本说明 更多信息，请参见 Aliyun Log Python Release。示例代码 日志服务Python SDK提供丰富的示例代码，方便您参考或直接使用。示例代码包括以下内容：GitH ub源码 说明 sample.py 写入日志、查询日志、查询Logstore、获取日志分布情况...
Node.js SDK概述
版本说明 更多信息，请参见 Aliyun Log Node.js Release。示例代码 日志服务Node.js SDK提供丰富的示例代码，方便您参考或直接使用。示例代码包括以下内容：GitHub源码 说明 All.js 写入日志、查询日志、查询Logstore、获取日志分布情况等...
创建Log Service数据源
背景信息 Log Service即阿里云日志服务，如果您使用的是阿里云日志服务，在对接Dataphin进行数据开发时，您需要先完成Log Service数据源的创建。更多Log Service信息，请参见 什么是日志服务。Dataphin支持通过VPC网络和公网连接Log ...
错误编码：HSF-0001
报错信息 HSFServiceAddressNotFoundException 未找到需要调用的服务目标地址。描述信息 需要调用的目标服务为：xxxx；组别为：xxxx。基本问题排查 服务本身的发布、调用是否正确。验证服务是否发布：在对应环境（日常、预发或线上环境）的...
创建Log Service数据源
背景信息 Log Service即阿里云日志服务，如果您使用的是阿里云日志服务，在对接Dataphin进行数据开发时，您需要先完成Log Service数据源的创建。更多Log Service信息，请参见 什么是日志服务。权限说明 Dataphin仅支持 超级管理员、数据源...
接入Zipkin Trace数据
直接发送 使用Zipkin协议直接发送Trace数据到日志服务时，您需要在Zipkin的SDK侧配置新的接入点信息和鉴权信息。配置案例，请参见 zipkin demo。警告 为保证传输安全性，直接发送方式必须使用HTTPS协议。接入点信息（推荐）V2协议：HTTPS的...
.NET Core SDK概述
版本说明 更多信息，请参见 Aliyun Log.NET Core SDK Release 。示例代码 日志服务.NET Core SDK提供丰富的示例代码，方便您参考或直接使用。示例代码包括以下内容：GitHub源码 说明 PostLogStoreLogsExample.cs 写入日志相关示例。...
接入Jaeger Trace数据
您可以通过直接发送方式或OpenTelemetry Collector转发方式，将Jaeger平台上的Trace数据发送到日志服务。前提条件 已创建Trace实例。更多信息，请参见 创建Trace实例。直接发送 使用Jaeger协议直接发送Trace数据到日志服务时，您需要在...
查询审计日志
开通 云原生内存数据库Tair 审计日志后，您可以在审计日志中查询数据写入、修改与删除的记录，也可以进行故障排查或 Tair 实例资源消耗突增等性能分析。前提条件 已开通审计日志，详情请参见 开通审计日志。RAM用户访问审计日志，需要具备...
接入OpenTelemetry Trace数据
您可以通过直接发送方式或OpenTelemetry Collector转发方式，将OpenTelemetry平台上的Trace数据发送到日志服务。前提条件 已创建Trace实例。更多信息，请参见 创建Trace实例。直接发送 使用OpenTelemetry协议直接发送Trace数据到日志服务时...
Node.js SDK快速入门
本文介绍如何快速使用日志服务Node.js SDK完成常见操作，包括创建项目（Project）、创建日志库（Logstore）、写入日志和查询日志等。前提条件 已创建RAM用户并完成授权。具体操作，请参见 创建RAM用户并完成授权。已配置环境变量 ALIBABA_...
开启SQL审计与分析
执行结果 SQL审计功能开启后，相同地域下的 PolarDB-X 数据库的审计日志会写入同一个日志服务的Logstore中。同时，日志服务为您创建以下默认配置。警告 日志服务会不定期更新与升级SQL日志审计功能，专属日志库的索引与默认报表也会自动...
接入OpenCensus Trace数据
您可以通过OpenCensus SDK将OpenCensus平台上的Trace数据发送至OpenTelemetry Collector，再通过OpenTelemetry Collector转发至日志服务。本文介绍通过OpenTelemetry Collector转发Trace数据到日志服务的操作步骤。前提条件 已创建Trace...
- 产品推荐
- 这些文档可能帮助您