LogHub 支持客户端、网页、协议、SDK/API等多种日志无损采集方式,所有采集方式均基于Restful API实现,除此之外您也可以通过API/SDK实现新的采集方式。

数据来源

当前,日志服务支持采集以下来源的日志数据:
类别 来源 接入方式 更多
应用 程序输出 Logtail 查询分析-程序日志
访问日志 Logtail 采集并分析Nginx访问日志
链路跟踪 Jaeger Collector,Logtail -
语言 Java SDKJava Producer Library -
Log4J Appender 1.x2.x -
LogBack Appender LogBack -
C Native -
Python Python -
Python Logging Python Logging Handler -
PHP PHP -
C# C# -
C++ C++ SDK -
Go GoGolang Producer Library -
NodeJS NodeJs -
JS JS/Web Tracking -
OS Linux Logtail -
Windows Logtail -
Mac/Unix Native C -
Docker文件 Logtail 文件采集 -
Docker输出 Logtail 容器输出 -
数据库 MySQL Binlog MySQL Binlog方式 -
JDBC Select JDBC查询结果 -
移动端 iOS/Android iOS SDKAndroid SDK -
网页 JS/Web Tracking -
智能IoT C Producer Library 采集-IoT/嵌入式日志
其他 HTTP 轮询 Logtail HTTP 分析-Nginx监控日志
Syslog Logtail插件-syslog输入源 -
云产品 ECS、OSS等多个云产品。详细清单请参考云产品日志 云产品控制台开通。 云产品日志
MaxCompute导入 通过DataWorks导出MaxCompute数据。 采集MaxCompute数据
第三方 Logstash Logstash -
Flume Flume消费 -
另外,当前支持通过日志服务采集日志数据的阿里云云产品如下:
分类 云产品名称 开通方式 使用说明
弹性计算 云服务器(ECS) 安装Logtail。 Logtail采集简介
容器服务/K8S 产品控制台开通。 文本输出
函数计算 产品控制台开通。 函数日志
存储服务 对象存储(OSS) 产品控制台开通。 OSS访问日志简介
文件存储(NAS) 产品控制台开通。 简介
数据库 DRDS 产品控制台开通。 简介
RDS 产品控制台开通。 简介
网络 负载均衡(SLB) 产品控制台开通。 说明
专有网络 VPC 产品控制台开通。 创建流日志
API 网关 产品控制台开通。 说明
CDN CDN 产品控制台开通。 简介
安全 操作审计 产品控制台开通。 简介
安骑士 购买安骑士企业版本,并产品控制台开通。 说明
Web应用防火墙(WAF) 购买WAF企业版,并购买日志模块。 WAF日志
DDoS高防/新BGP高防 产品控制台开通。 DDoS高防/新BGP高防
态势感知 购买态势感知(企业版),并在控制台开通。 态势感知日志
爬虫风险管理 产品控制台开通。 爬虫风险管理日志
风险识别 购买风险识别增强模块,并在控制台开通。 风险识别日志简介
云防火墙 产品控制台开通。 云防火墙日志
应用 日志服务(LOG) 产品控制台开通。 简介
消息服务(MNS) 产品控制台开通。 说明

网络与接入点选择

日志服务在各 Region 提供 服务入口,每个 Region 提供两种网络接入方式:

  • 内网(经典网)/私网(专有网络 VPC):本 Region 内服务访问,带宽链路质量较好(推荐)。
  • 公网(经典网):可以被任意访问,访问速度取决于链路质量、传输安全保障建议使用 HTTPS。

常见问题

  • Q:专线方式接入应如何选择网络?

    A:请选择内网/私网接入点。

  • Q:采集公网数据时能否采集公网IP?

    A:参考操作Logstore,开通记录外网IP功能。

  • Q:把另一个Region A上的ECS日志采集到本Region B下日志服务Project中,应如何选择网络?

    A:在Region A ECS上安装 Region B公网版本Logtail,进行公网传输。其他情况下如何选择网络,请参考选择网络

  • Q:如何快速判断能否连接?

    A:运行以下命令,如果有返回信息则表示可以联通。

     curl $myproject.cn-hangzhou.log.aliyuncs.com

    其中,$myproject表示Project名,cn-hangzhou.log.aliuncs.com表示访问接入点。