数据采集概述
日志服务支持采集服务器与应用、开源软件、物联网、移动端、标准协议、阿里云产品等多种来源的数据。本文列举了日志服务所支持的数据来源。
数据来源
日志服务支持的数据来源如下:
类别 | 来源 | 接入方式 | 更多 |
应用 | 程序输出 | ||
访问日志 | |||
链路跟踪 | 无 | ||
时序数据 | 无 | ||
语言 | Java | 无 | |
Log4J Appender | 无 | ||
LogBack Appender | 无 | ||
C | 无 | ||
Python | 无 | ||
Python Logging | 无 | ||
PHP | 无 | ||
.Net | 无 | ||
C++ | 无 | ||
Go | 无 | ||
NodeJS | 无 | ||
JS | 无 | ||
OS | Linux | 无 | |
Windows | 无 | ||
Mac/Unix | 无 | ||
Docker文件 | 无 | ||
Docker输出 | 无 | ||
数据库 | MySQL Binlog | 无 | |
MySQL查询 | 无 | ||
SQL Server查询结果 | 无 | ||
PostgreSQL查询结果 | 无 | ||
移动端 | iOS、Android | 无 | |
网页 | 无 | ||
智能IoT | |||
标准协议 | HTTP 轮询 | ||
Syslog | 无 | ||
Kafka | 无 | ||
OpenTelemetry | 无 | ||
数据导入 | OSS数据 | 无 | |
MySQL数据 | 无 | ||
Elasticsearch数据 | 无 | ||
Kafka数据 | 无 | ||
云监控数据 | 无 | ||
GCP Pub/Sub消息 | 无 | ||
第三方 | Logstash | 无 | |
Flume | 无 | ||
Beats | 无 | ||
Fluentd | 无 | ||
Telegraf | 无 | ||
Loggie | 无 | ||
阿里云云产品 | ECS、OSS等阿里云产品日志 | 无 |
选择网络和接入点
日志服务提供以下网络类型的接入点:
阿里云内网(经典网络和专有网络VPC):本地域内服务访问,带宽链路质量较好。
公网:可以被任意访问,访问速度取决于链路质量。为了保障传输安全建议使用HTTPS。
关于接入点的更多信息,请参见服务入口。
常见问题
专线方式接入应如何选择网络?
请选择阿里云内网(经典网络或专有网络VPC)。
采集公网数据时能否采集公网IP地址?
您可以在Logstore属性中开通记录外网IP功能。更多信息,请参见创建Logstore。
将地域A上的ECS日志采集到地域B下日志服务Project中,应如何选择网络?
在地域A上的ECS中安装地域B公网的版本Logtail,进行公网传输。其他情况下的网络选择,请参见选择网络。
如何快速判断目标域名能否连接?
执行以下命令,如果有返回信息则表示可以联通。
curl $myproject.cn-hangzhou.log.aliyuncs.com
$myproject
:Project名。cn-hangzhou.log.aliyuncs.com
:访问接入点。