全部产品
存储与CDN 数据库 安全 应用服务 数加·人工智能 数加·大数据基础服务 互联网中间件 视频服务 开发者工具 解决方案 物联网 钉钉智能硬件
日志服务

GetProjectLogs

更新时间:2017-11-24 14:13:41

统计Project下所有日志。

请求语法:

  1. GET /logs/?query=SELECT * FROM sls_operation_log where __line__ = 'abc' and __date__ >'2017-09-01 00:00:00' and __date__ < '2017-09-02 00:00:00&line=20&offset=0 HTTP/1.1
  2. Authorization: <AuthorizationString>
  3. Date: Wed, 3 Sept. 2014 08:33:46 GMT
  4. Host: big-game.cn-hangzhou.log.aliyuncs.com
  5. x-log-bodyrawsize: 0
  6. x-log-apiversion: 0.4.0
  7. x-log-signaturemethod: hmac-sha1

请求参数

参数名称 类型 是否必须 描述
query string 查询sql条件

请求头

GetProjectLogs接口无特殊请求头。关于日志服务 API 的公共请求头,请参考 公共请求头

响应头

关于日志服务 API 的公共响应头,请参考 公共响应头

响应头中有专门成员表示请求返回结果是否完整。具体响应元素格式如下:

名称 类型 描述
x-log-progress 字符串 查询结果的状态。可以有 Incomplete 和 Complete 两个选值,表示本次是否完整。
x-log-count 整型 当前查询结果的日志总数。
x-log-processed-rows 整型 本次计算处理的行数
x-log-elapsed-millisecond 整型 本次计算消耗的毫秒时间

响应元素

请求成功,其响应 Body 会包括计算结果,GetProjectLogs的响应body是一个数组,数组中每个元素是一条日志结果。数组中的每个元素结构如下:

名称 类型 描述
__time__ 整型 日志的时间戳(精度为秒,从 1970-1-1 00:00:00 UTC 计算起的秒数)。
__source__ 字符串 日志的来源,由写入日志时指定。
[content] Key-Value对 日志原始内容,以 Key-value 对的形式组织。

细节描述

  • 该接口的query是一个标准的SQL查询语句。
  • 查询的Project,在请求的域名中指定。
  • 查询的logstore,在查询语句的from条件中指定。logstore相当于SQL中的表。
  • 在查询的SQL条件中,必须指定要查询的时间范围,时间范围由__date__(timestamp类型)来指定,或__time__(int 类型,单位是unix_time)来指定。
  • 如上所述,该接口一次调用必须要在限定时间内返回结果,每次查询只能扫描指定条数的日志量。如果一次请求需要处理的数据量非常大的时候,该请求会返回不完整的结果(并在返回结果中的 x-log-progress 成员标示是否完整)。如此同时,服务端会缓存 15 分钟内的查询结果。当查询请求的结果有部分被缓存命中,则服务端会在这次请求中继续扫描未被缓存命中的日志数据。为了减少您合并多次查询结果的工作量,服务端会把缓存命中的查询结果与本次查询新命中的结果合并返回给您。因此,日志服务可以让您通过以相同参数反复调用该接口来获取最终完整结果。因为您的查询涉及的日志数据量变化非常大,日志服务 API 无法预测需要调用多少次该接口而获取完整结果。所以需要用户通过检查每次请求的返回结果中的x-log-progress成员状态值来确定是否需要继续。需要注意的是,每次重复调用该接口都会重新消耗相同数量的查询 CU。

特有错误码

GetProjectLogs 接口除了可能返回日志服务 API 的 通用错误码,还可能返回如下特有错误码:

HTTP状态码(Status Code) 错误码(Error Code) 错误消息(Error Message) 描述(Description)
400 ParameterInvalid parameter is invalid 请求的参数错误,具体错误参考错误的message。

示例

以杭州地域内名为 big-game 的 Project 为例,查询该 Project 内名为 app_log 的 Logstore 中,主题为 groupA 的日志数据。查询区间为 2014-09-01 00:00:00 到 2014-09-01 22:00:00,查询关键字为 error,且从时间区间头开始查询,最多返回 20 条日志数据。

请求示例:
  1. GET /logs/?query=SELECT * FROM sls_operation_log where __line__ = 'abc' and __date__ >'2017-09-01 00:00:00' and __date__ < '2017-09-02 00:00:00&line=20&offset=0 HTTP/1.1
  2. Authorization: <AuthorizationString>
  3. Date: Wed, 3 Sept. 2014 08:33:46 GMT
  4. Host: big-game.cn-hangzhou.log.aliyuncs.com
  5. x-log-bodyrawsize: 0
  6. x-log-apiversion: 0.4.0
  7. x-log-signaturemethod: hmac-sha1
响应示例:
  1. HTTP/1.1 200 OK
  2. Content-MD5: 36F9F7F0339BEAF571581AF1B0AAAFB5
  3. Content-Type: application/json
  4. Content-Length: 269
  5. Date: Wed, 3 Sept. 2014 08:33:47 GMT
  6. x-log-requestid: efag01234-12341-15432f
  7. x-log-progress : Complete
  8. x-log-count : 10000
  9. x-log-processed-rows: 10000
  10. x-log-elapsed-millisecond:5
  11. {
  12. "progress": "Complete",
  13. "count": 2,
  14. "logs": [
  15. {
  16. "__time__": 1409529660,
  17. "__source__": "10.237.0.17",
  18. "Key1": "error",
  19. "Key2": "Value2"
  20. },
  21. {
  22. "__time__": 1409529680,
  23. "__source__": "10.237.0.18",
  24. "Key3": "error",
  25. "Key4": "Value4"
  26. }
  27. ]
  28. }

在这个响应示例中,x-log-progress 成员的状态为 Complete,表明整个日志查询已经完成,返回结果为完整结果。在这次请求中共查询到 2 条符合条件的日志,且日志数据在 logs 成员中。如果响应结果中的 x-log-progress 成员的状态为 Incomplete,则需要重复相同请求以获得完整结果。

本文导读目录