服务器数据采集方案概述
相关文档 方案描述 阿里云Elasticsearch数据采集解决方案 本文提供Beats、Logstash、语言客户端和Kibana开发工具四种方法，您可以根据需求和环境，选择合适的方法或工具来采集数据。通过Filebeat采集Apache日志数据 您可以使用Filebeat采集...
最佳实践概览
查询分析RocketMQ客户端日志 通过Elasticsearch和rsbeat实时分析Redis slowlog 服务器数据采集 服务器数据采集方案概述 阿里云Elasticsearch数据采集解决方案 通过自建Metricbeat收集系统指标信息 使用SkyWalking和Elasticsearch实现全链路...
图扑案例
新技术在创造新机遇带动产业升级的同时也带来了新的技术挑战，更加复杂的系统架构和更高的性能、稳定性要求制约了工业物联网系统实施落地，企业需要专业技术公司来帮助解决数据采集、传输、存储、分析及可视化全链数据处理系统建设难点。...
错误码定义
1XXX:通用错误 错误代码（旧）错误代码 错误信息 InternalError 1000 系统内部错误 App.InvalidParameter.SchemaEmpty 1001 应用结构不能为空 InvalidParameter.ReservedWord 1005 名字中包含了保留字 InternalError 1006 访问后端服务超时...
错误码定义
1XXX:通用错误 错误代码（旧）错误代码 错误信息 InternalError 1000 系统内部错误 App.InvalidParameter.SchemaEmpty 1001 应用结构不能为空 InvalidParameter.ReservedWord 1005 名字中包含了保留字 InternalError 1006 访问后端服务超时...
概述
方案设计 传感器数据采集上云解决方案如下图所示。数据链路为：测温器将物理信号转换成数字信息，组装成结构化数据，通过无线网络传输，采用MQTT协议接入阿里云物联网平台。物联网平台的规则引擎模块对原始数据进行过滤、富化、转换，实时...
采集主机文本日志
查看Logtail采集错误的步骤，请参见 如何查看Logtail采集错误信息。采集数据常见的错误类型请参见 日志服务采集数据常见的错误类型。默认情况下，一个日志文件只能匹配一个Logtail配置。如果同一份日志需要被采集多份，请参见 如何实现文件...
使用极简模式采集日志
如果遇到Logtail采集报错，请参见 如何查看Logtail采集错误信息、日志服务采集数据常见的错误类型。预览数据及创建索引，然后单击 下一步。日志服务默认开启全文索引。您也可以根据采集到的日志，手动创建字段索引，或者单击 自动生成索引...
使用Nginx配置模式采集日志
如果遇到Logtail采集报错，请参见 如何查看Logtail采集错误信息、日志服务采集数据常见的错误类型。预览数据及创建索引，然后单击 下一步。日志服务默认开启全文索引。您也可以根据采集到的日志，手动创建字段索引，或者单击 自动生成索引...
使用IIS配置模式采集日志
如果遇到Logtail采集报错，请参见 如何查看Logtail采集错误信息、日志服务采集数据常见的错误类型。预览数据及创建索引，然后单击 下一步。日志服务默认开启全文索引。您也可以根据采集到的日志，手动创建字段索引，或者单击 自动生成索引...
使用完整正则模式采集日志
如果遇到Logtail采集报错，请参见 如何查看Logtail采集错误信息、日志服务采集数据常见的错误类型。预览数据及创建索引，然后单击 下一步。日志服务默认开启全文索引。您也可以根据采集到的日志，手动创建字段索引，或者单击 自动生成索引...
使用分隔符模式采集日志
如果遇到Logtail采集报错，请参见 如何查看Logtail采集错误信息、日志服务采集数据常见的错误类型。预览数据及创建索引，然后单击 下一步。日志服务默认开启全文索引。您也可以根据采集到的日志，手动创建字段索引，或者单击 自动生成索引...
采集-多渠道数据
数据采集一般有两种方式，区别如下。本文档主要讨论通过LogHub流式导入（实时）采集数据。方式 优势 劣势 例子 批量导入 吞吐率大，面向历史存量数据 实时性较差 FTP、OSS上传、邮寄硬盘、SQL 数据导出 流式导入 实时，所见即所得，面向...
日志服务采集数据常见的错误类型
本文介绍日志服务采集数据常见的错误类型及对应的解决方法。如果您遇到其他问题，请提交 工单 处理。错误类型 错误说明 解决方法 LOG_GROUP_WAIT_TOO_LONG_ALARM 数据包从产生到发送的过程中等待的时间较长。检查发送是否正常，或者是否...
Logtail诊断
基础版诊断 日志采集错误 面板中将展示该Logstore所对应的所有Logtail采集错误列表。您可以单击目标错误代码，查看错误详情。更多信息，请参见 日志服务采集数据常见的错误类型。高级版诊断 在 Logtail异常监控 页面，查看 活跃Logtail数、...
数据采集常见问题
本文列举日志服务数据采集常见问题。Logtail基本问题 Logtail采集日志失败的排查思路 如何使用Logtail自动诊断工具 Logtail机器组无心跳排查思路 ECS经典网络切换为VPC后，如何更新Logtail配置 Logtail服务的app_info.json文件中IP地址为空...
如何查看Logtail采集错误信息
日志服务控制台提供诊断功能，支持诊断Logtail采集错误。操作步骤 登录 日志服务控制台。在Project列表区域，单击目标Project。在 日志存储>日志库 页签中，将鼠标悬浮在目标Logstore上，然后单击目标Logstore右侧的 图标。查看诊断信息。...
常见问题
售前常见问题 产品计费常见问题 数据采集常见问题 数据存储常见问题 查询与分析常见问题 数据加工常见问题 消费与投递常见问题 售前常见问题 什么是日志服务？日志服务可以做什么？日志服务能为用户带来哪些价值？日志服务支持采集哪些数据...
Logtail常见问题
分类 文档链接 基本概念说明 Logtail基本问题 日志采集Agent对比 心跳问题 Logtail机器组问题排查思路（主机场景）采集问题 通用场景 查询本地采集状态 如何查看Logtail采集错误信息 Logtail采集日志失败的排查思路 日志服务采集数据常见的...
连接失败常见报错
本文介绍连接云数据库MongoDB失败时的常见报错与解决方法。错误信息 报错原因 解决方法 network error while attempting to run command 'isMaster' on host 'dds-bpxxxxxxxx.mongodb.rds.aliyuncs....
管理问题数据
当问题数据采集过程中出现错误时，帮助您快速排查、定位问题。方式一：通过数据质量模块查看。您可在 数据质量>任务查询 页面，通过查看目标表数据质量监控规则的 执行日志，查看问题数据采集过程。详情请参见：查看监控任务。方式二：通过...
查询分析RocketMQ客户端日志
本文使用Beats、Elasticsearch、Logstash和Kibana，在分布式环境下采集、汇聚、解析阿里云RocketMQ客户端SDK日志，帮助您在消息队列开发场景中快速定位并解决应用开发问题。背景信息 阿里云Elasticsearch（简称ES）已具备Elastic Stack全栈...
DataCollection
字段 类型 描述 id String 数据采集ID name String 数据采集名称 type String 数据采集端的类型-server-web-app注：目前只支持 server status Integer 状态-0 未开通-1 开通中-2 开通成功-3 开通失败 dataCollectionType String 数据采集的...
DataCollection
字段 类型 描述 id String 数据采集ID name String 数据采集名称 type String 数据采集端的类型-server-web-app注：目前只支持 server status Integer 状态-0 未开通-1 开通中-2 开通成功-3 开通失败 dataCollectionType String 数据采集的...
Android SDK接入（Maven集成）
数据采集 您需要在满足合规要求下尽可能早的进行信息采集设置，默认是采集设备信息、系统信息和网络信息。AliHaConfig config=new AliHaConfig();可以根据合规要求禁止采集设备信息、系统信息和网络信息 config.noCollectionDataType=...
Android SDK接入（本地集成）
数据采集 您需要在满足合规要求下尽可能早的进行信息采集设置，默认是采集设备信息、系统信息和网络信息。AliHaConfig config=new AliHaConfig();可以根据合规要求禁止采集设备信息、系统信息和网络信息 config.noCollectionDataType=...
使用Apache配置模式采集日志
如果遇到Logtail采集报错，请参见 如何查看Logtail采集错误信息、日志服务采集数据常见的错误类型。预览数据及创建索引，然后单击 下一步。日志服务默认开启全文索引。您也可以根据采集到的日志，手动创建字段索引，或者单击 自动生成索引...
2021年
v2.8.1.1 Bug修复 修复CMS采集的指标Region Label值错误问题。2021-08-05 请参见 开服地域。v2.8.1.1 2021年07月 功能名称 功能概述 发布时间 支持地域 版本号 支持接入VPC网络下的ECS集群 可观测监控 Prometheus 版 支持接入VPC网络的ECS...
入门概述
Beats是轻量型的数据采集工具，阿里云Elasticsearch支持Filebeat、Metricbeat、Auditbeat和Heartbeat采集器。本文介绍如何通过使用场景选择对应的采集器，并完成数据采集。数据采集器使用 Filebeat 轻量型日志采集器，用于转发和汇总日志与...
A/B测试报表
在翻页或者加载的过程中，如果结果重复出现在第二页算一个新的曝光PV，结果不去重 如果开通数据采集功能并上传了曝光数据，则每次曝光记1否则，记每次返回的Item数 依赖开通数据采集功能，并且上传了用户曝光行为数据/也可不开通或上传，但...
米哈游
解决方案 针对《原神》业务监控平台对于性能、采集、弹性能力的诉求，阿里云提供了日志服务作为解决方案帮助客户解决上线后的数据采集、查询、监控等问题。在性能方面，日志服务支持秒级处理十亿级数据，支持几十PB吞吐量，稳定性SLA达到99...
新建数据采集接口
通过 Quick Tracking 使用数据采集服务的流程如下：配置数据采集渠道（App、小程序、Web）接口，并获取AccessKey，具体操作请参见下文。获取 Quick Tracking 的SDK，并使用上一步中获得的AccessKey进行数据采集程序的开发与部署。SDK和程序...
App端性能体验功能说明
术语表 基础字段 名词 名词解释 错误数 该类错误在一定时间范围内产生的次数，也就是SDK上报的日志数量 错误率 错误率=错误次数/应用启动次数，对于自定义异常类的错误，错误率可能大于100%，对于崩溃类的错误由于数据挤压和延时上报的原因...
业务运营报表
在翻页或者加载的过程中，如果结果重复出现在第二页算一个新的曝光PV，结果不去重 如果开通数据采集功能并上传了曝光数据，则每次曝光记1否则，记每次返回的Item数 依赖开通数据采集功能，并且上传了用户曝光行为数据/也可不开通或上传，但...
设备协议
设备协议模块可创建的协议以及各协议的功能如下：设备采集协议：将设备数据自动推送到云控平台数据采集端口。数据转化协议：将数据采集协议推动上来的设备数据转化为交通云控平台的标准格式。数据（控制）下发协议：使交通云控平台下发的...
什么是智能众包
人工智能众包（AI Crowdsourcing）基于共享人力资源模式，为人工智能算法提供数据采集、清洗、标注等服务，帮助企业快速构建算法数据集。人工智能众包（AI Crowdsourcing）基于共享人力资源模式，为人工智能算法提供数据采集、清洗、标注等...
教程概述
数据采集：通过阿里云DTS的数据同步功能，将RDS中的数据同步到DataHub中，完成数据采集。数据订阅：通过阿里云实时计算Flink，订阅DataHub数据进行实时计算，插入到RDS实例的目标表中。数据展示：通过DataV大屏，对数据进行处理并展示。
数据采集
时序数据采集 进程时序数据 计算资源包括：CPU使用率。存储资源包括：IO吞吐、IOUtil、IOPS、存储空间使用量、存储空间使用率。服务时序数据 在服务级别根据进程的角色不同，对各类时序数据进行了采集。业务相关的时序数据主要包括：QPS、...
iOS SDK概述
日志服务iOS SDK封装了日志服务的日志采集相关API接口。您可以通过日志服务iOS SDK方便地采集iOS日志。...采集Unity3D游戏引擎插件数据 Unity4SLS.unitypackage Unity3D游戏引擎数据采集插件。更多信息，请参见 通过Unity Plugin接入数据。
Android SDK概述
日志服务Android SDK封装了日志服务的日志采集相关API接口。您可以通过日志服务Android SDK方便地采集...采集Unity3D游戏引擎插件数据 Unity4SLS.unitypackage Unity3D游戏引擎数据采集插件。更多信息，请参见 通过Unity Plugin接入数据。
- 产品推荐
- 这些文档可能帮助您