创建索引

更新时间:2025-02-10 01:49:26

调用CreateIndex为指定Logstore创建索引。

前提条件

您已完成以下操作:

参数说明

def create_index(self, project_name, logstore_name, index_detail):

请求参数

名称

类型

是否必填

说明

project_name

String

Project名称:项目(Project)是日志服务的资源管理单元,是进行多用户隔离与访问控制的主要边界。更多信息,请参见管理Project

logstore_name

String

Logstore名称:Logstore是日志服务中日志数据的采集、存储和查询单元。更多信息,请参见管理Logstore

index_detail

IndexConfig

索引配置信息。

IndexConfig参数说明:

名称

类型

是否必填

说明

line_config

IndexLineConfig

IndexLineConfig类,用于配置全文索引。

key_config_list

Dict[str, IndexLineConfig]

IndexKeyConfig类,用于配置字段索引,类型是一个字典。字典的键为字段名称,类型为字符串。值为该字段的索引配置,类型为IndexLineConfig。

log_reduce

bool

是否开启日志聚类。开启后白名单与黑名单只生效其中一个。

  • True:开启日志聚类。

  • False(默认值):不开启日志聚类。

IndexLineConfig参数说明:

名称

类型

是否必填

说明

token_list

List

分词符列表。按照给出的分词符列表进行词语的划分。例如指定分词符列表包含, : 时,日志内容hello:aliyun,sls将被拆分成三个词语helloaliyunsls,查询时可搜索词关键词。

case_sensitive

bool

是否大小写敏感。

  • True:大小写敏感。

  • False(默认值):大小写不敏感。

chinese

bool

是否启用中文分词功能。开启中文分词后,shard的读写能力会有一定下降。

  • True:启用

  • False(默认值):不启用

IndexKeyConfig参数说明:

名称

类型

是否必填

说明

index_type

String

索引类型。默认为text。可选textlongdoublejson

  • text:文本字段。可配置 token_listcase_sensitivechinesedoc_valuealias参数。

  • long:整型字段。可配置doc_valuealias参数。

  • double:浮点数字段。可配置doc_valuealias参数。

  • json:JSON文本字段。仅可配置json_key_config参数。

token_list

List

分词符列表。按照给出的分词符列表进行词语的划分。例如指定分词符列表包含, : 时,日志内容hello:aliyun,sls将被拆分成三个词语helloaliyunsls,查询时可搜索词关键词。

case_sensitive

bool

是否大小写敏感。

  • True:大小写敏感。

  • False(默认值):大小写不敏感。

doc_value

bool

是否开启统计分析功能,开启后该字段可用于分析语句。

alias

String

索引键的别名。

json_key_config

IndexJsonKeyConfig

IndexJsonKeyConfig类,当index_typejson时,需要配置此项。

chinese

bool

是否启用中文分词功能。开启中文分词后,shard的读写能力会有一定下降。

  • True:启用

  • False(默认值):不启用

IndexJsonKeyConfig参数说明:

名称

类型

是否必填

说明

index_all

bool

如果JSON键中的所有字符串值都应该被索引,则设置为True。

max_depth

int

index_allTrue时,只有当JSON值的depth <= max_depth才会被索引。默认值为 -1-1表示无深度限制。

alias

String

索引键的别名。

json_keys

Dict[str, JsonKeyConfigValue]

JSON字段内嵌套的子字段索引配置。可通过调用IndexJsonKeyConfig实例的add_key方法添加子字段。例如日志字段为:

jsonKey:{
    "level_1_key_1": 123,
    "level_1_key_2": {
        "level_2_key_1": "hello"
    }
}

可以配置字段jsonKeyindex_typejsonjson_key_config参数上调用add_key("level_1_key_1", "long")add_key("level_1_key_2.level_2_key_1", "text")来为嵌套子字段添加字段索引。

返回参数

返回参数请参见:CreateIndex - 创建索引

示例代码

from aliyun.log import LogClient, IndexConfig, IndexKeyConfig, IndexLineConfig, IndexJsonKeyConfig
import os

# 本示例从环境变量中获取AccessKey ID和AccessKey Secret
access_key_id = os.environ.get('ALIBABA_CLOUD_ACCESS_KEY_ID', '')
access_key_secret = os.environ.get('ALIBABA_CLOUD_ACCESS_KEY_SECRET', '')
# 日志服务的服务接入点
endpoint = "cn-hangzhou.log.aliyuncs.com"

# 实例化LogClient类
client = LogClient(endpoint, access_key_id, access_key_secret)

project_name = "project-1"
logstore_name = "logstore-1"


def main():
    ttl = 1
    token_list = [",", "\t", "\n", ";"]

    # 全文索引配置
    line_config = IndexLineConfig(token_list, case_sensitive=False, include_keys=None, exclude_keys=None, chinese=None)
    # 字段索引配置
    index_config = IndexKeyConfig(token_list, case_sensitive=False, index_type='text', doc_value=False, alias=None,
                                  json_key_config=None, chinese=None)
    # 构造index_detail配置信息
    key_config_list = {"key_1": index_config, "key_2": index_config}
    index_detail = IndexConfig(ttl, line_config, key_config_list, all_keys_config=None, log_reduce=None)

    # 为指定Logstore创建索引
    res = client.create_index(project_name, logstore_name, index_detail)
    res.log_print()


if __name__ == '__main__':
    main()

示例返回结果

CreateIndexResponse:
headers: {'Server': 'AliyunSLS', 'Content-Length': '0', 'Connection': 'keep-alive', 'Access-Control-Allow-Origin': '*', 'Date': 'Sat, 12 Oct 2024 06:27:20 GMT', 'x-log-time': '1728714440', 'x-log-requestid': '670A16C88F14B9A316BC3ADE'}

Process finished with exit code 0

相关文档

  • 本页导读 (1)
  • 前提条件
  • 参数说明
  • 请求参数
  • 返回参数
  • 示例代码
  • 示例返回结果
  • 相关文档