管理Shard
您可以通过分裂、合并操作控制活跃的Shard数量来调整日志服务Logstore可以提供的最大读写能力。分裂Shard可以自动触发，但合并Shard必须手动执行。本文为您介绍如何分裂、合并、删除Shard以及设置自动分裂Shard。基本概念 日志服务中的数据...
分区（Shard）
当数据流量远未达到Shard的最大读写能力时，及时合并Shard以减少Shard个数，从而降低活跃Shard租用费用。例如您有两个readwrite状态的Shard，最大可提供10 MB/s的数据写入服务。当您实时写入数据流量达到14 MB/s时，建议分裂其中一个Shard...
logstore
名称 类型 描述 示例值 object ...query：支持高性能查询，索引流量费用约为 Standard 的一半，但不支持 SQL 分析，适用于数据量大、存储周期长（周、月级别以上）、无日志分析的场景。standard productType string 日志所属产品类型。aliyun
管理MetricStore
删除全部MetricStore的当天仍会产生存储等费用，次日不再产生任何费用。即您在删除全部MetricStore的第三天不会再收到日志服务的账单。删除MetricStore后，以当前MetricStore为数据源的导出任务、数据加工任务、定时SQL任务和以当前...
管理Logstore
计费模式 Logstore的计费方式，包含 按写入数据量计费 和 按使用功能计费。具体信息，请参见 计费项。说明 当首次使用按写入数据量计费时，需要根据界面提示进行开通。Logstore名称 Logstore的名称，在其所属Project内必须唯一。创建...
管理EventStore
数据热存储、低频存储及归档存储相关费用，请参见 计费项。Shard数目 日志服务使用Shard读写数据。一个Shard提供的写入能力为5 MB/s、500次/s，读取能力为10 MB/s、100次/s。每个EventStore中最多创建10个Shard，每个Project中最多创建200...
优化查询
注意 分裂Shard会产生更多费用，且只对新数据起到加速效果，旧数据仍然在旧Shard中。缩减查询的时间范围和数据量 时间范围越大，查询越慢。适当缩短查询的时间范围可以更快地完成计算。数据量越大，查询越慢。请尽量减少查询的数据量。多次...
create_logstore
query：支持高性能查询，索引流量费用约为Standard的一半，但不支持SQL分析，适用于数据量大、存储周期长（周、月级别以上）、无日志分析的场景。关于该命令的全局参数，请参见 全局参数。命令示例 使用默认账号创建logstore-a。命令示例 ...
update_logstore
query：支持高性能查询，索引流量费用约为Standard的一半，但不支持SQL分析，适用于数据量大、存储周期长（周、月级别以上）、无日志分析的场景。关于该命令的全局参数，请参见 全局参数。命令示例 请求示例 使用默认账号修改logstore-a...
分区分裂
场景 3：目标分区为模板化的二级分区 当二级分区是模板化分区时，可以通过分裂语法直接将某个模板二级分区分裂，分裂模板二级分区会使所有的一级分区下的子分区同时分裂。模板化二级分区是Range/Range column策略的分区表分裂 表级用法 ...
简介
Shard 每个Logstore默认创建2个Shard，并开启自动分裂Shard功能，详情请参见 自动分裂Shard。日志存储时间 默认保存30天，支持修改保存时间。详细步骤请参见 管理Logstore。索引 默认为采集到的所有日志数据开启索引。如果没有查询分析和...
UpdateLogStore
query：支持高性能查询，索引流量费用约为Standard的一半，但不支持SQL分析，适用于数据量大、存储周期长（周、月级别以上）、无日志分析的场景。返回数据 名称 类型 示例值 描述 Server String nginx 服务器名称。Content-Type String ...
快速入门
参数 描述 计费模式 Logstore的计费方式，包含 按写入数据量计费 和 按使用功能计费。更多信息，请参见 计费项。Logstore名称 Logstore的名称，在其所属Project内必须唯一。创建Logstore成功后，无法更改其名称。Shard数目 日志服务使用...
CreateLogStore
query：支持高性能查询，索引流量费用约为Standard的一半，但不支持SQL分析，适用于数据量大、存储周期长（周、月级别以上）、无日志分析的场景。返回数据 名称 类型 示例值 描述 Server String nginx 服务器名称。Content-Type String ...
按使用功能计费模式计费项
日志服务的所有计费项都是单独计费的，例如您存储日志会产生日志存储费用，您采集日志会产生写流量费用等。本文介绍日志服务按使用功能计费模式计费项的组成及付费方式。说明 日志服务按使用功能计费模式支持采集日志和时序数据，时序数据...
UpdateLogStore-更新LogStore
query：支持高性能查询，索引流量费用约为 Standard 的一半，但不支持 SQL 分析，适用于数据量大、存储周期长（周、月级别以上）、无日志分析的场景。standard infrequentAccessTTL integer 否 低频存储。没有最少存储时间要求，至少保存 ...
窗口函数
例如，下面的查询语句为每个店员计算每天的滚动订单价格总和：SELECT clerk,orderdate,orderkey,totalprice,sum(totalprice)OVER(PARTITION BY clerk ORDER BY orderdate)AS rolling_sum FROM orders ORDER BY clerk,orderdate,orderkey ...
配置实时日志推送
自动分裂数 控制台默认自动分裂数为32个。日志服务授权 需要授予VOD访问日志服务。选择关联域名并绑定，单击 创建，完成配置。注意 日志分析服务为付费服务，请确认您已知晓付费详情，请参见 费用说明。说明 迁移域名：A域名的数据需要从...
Tablestore HBase Client 支持的功能
表格存储与 HBase 的 API 区别 作为 NoSQL 数据库服务，表格存储为您屏蔽了数据表分裂、Dump、Compact、Region Server 等底层相关的细节，您只需要关心数据的使用。因此，虽然与HBase在数据模型及功能上相近，Tablestore HBase Client 与...
通用数据结构
Shard分裂后，先消费原Shard中数据，然后同时消费由该Shard分裂的Shard中数据。Shard合并后，先消费原Shard中数据，然后消费由原Shard合并后的新Shard中数据。false：不按顺序消费。即所有同时开始消费，Shard分裂或者合并后产生的新Shard...
事件操作函数
事件分裂 e_split 基于日志字段的值分裂出多条日志，并且支持通过JMES提取字段后再进行分裂。支持和其他函数组合使用。相关示例，请参见 复杂JSON数据加工。输出事件 e_output、e_coutput 输出日志到指定的Logstore中，并可配置输出时的...
创建实时日志推送服务
自动分裂数 系统默认提供的Shard自动分裂数。日志服务授权 单击 日志服务授权，根据页面提示，完成授权。授权后，视频点播产品将使用AliyunCDNLogArchiveRole角色访问日志服务资源。如果已存在AliyunCDNLogArchiveRole角色，则无需重复授权...
功能特性
功能集 功能 功能描述 参考文档 资源计费 读流量 按照实际传输的数据量计费 产品定价 存储容量 按照实际的存储量计费 产品定价 公网流量 使用阿里云公网进行的网络传输数据流量 产品定价 活跃shard租用 Shard租用只统计当前状态为活跃...
创建实时日志推送服务
自动分裂数 系统默认提供的Shard自动分裂数。日志服务角色 单击 日志服务角色，根据页面提示，完成授权。授权后，视频直播产品将使用AliyunCDNLogArchiveRole角色访问日志服务资源。如果已存在AliyunCDNLogArchiveRole角色，则无需重复授权...
SplitShard-分裂Shard
分裂一个指定的readwrite状态的Shard。接口说明 Host 由 Project 名称和日志服务 Endpoint 构成，您需要在 Host 中指定 Project。每个 Shard 均有范围，为 MD5 左闭右开区间[BeginKey,EndKey)。Shard 状态包括 readwrite（读写）和 ...
概述
不同分区策略下支持的分区变更操作类型 操作语义 Hash Key Range Range Columns List List Columns CoHash 分裂分区 将一个分区分裂为多个 支持 支持 支持 支持 支持 支持 支持 分裂热点 基于热点值进行分裂操作 不支持 支持 不支持 不支持...
Kafka消费概述
费用说明 当涉及的Logstore的计费模式为按使用功能计费模式，Kafka消费涉及多个计费项，包括读写流量、请求费用等。具体内容，请参见 按使用功能计费模式计费项。当涉及的Logstore的计费模式为按写入数据量计费模式，消费将不产生费用。...
测试模型
大规模的压力测试可能会触发后端流控并且可能会产生较贵的费用，如果需要做大规模的性能测试，请 提交工单，保证测试结果并控制测试费用。表格存储的BatchWriteRow会以分区维度并发处理，每个分区的数据会最终变成一次写磁盘操作。建议您在...
表分区定义
分裂分区存在如下限制：仅支持分裂最底层的分区，即只有包含数据的分区可以被分裂。分裂分区语句中指定的分裂值会被分在后一个分区中。将2017年1月的分区分裂成两个分区，一个分区包含1月1号至15号，第二个分区包含1月16号至31号，分裂分区...
LightGBM
同每层分裂(Level-wise)相比，在分裂次数相同的情况下，叶分裂(Leaf-wise)可以降低更多的误差，得到更好的精度。当样本量较小的时候，leaf-wise 可能会造成过拟合。所以，LightGBM 可以利用参数"最大树深度"来限制树的深度并避免过拟合。...
SplitShard
调用SplitShard接口分裂一个指定的readwrite状态的Shard。接口说明 Host由Project名称和日志服务Endpoint构成，您需要在Host中指定Project。已创建并获取AccessKey。更多信息，请参见 访问密钥。阿里云账号AccessKey拥有所有API的访问权限...
什么是日志服务
关于日志服务的计量项和计费项，请参见 按使用功能计费模式计费项。立即开通 单击下方按钮可立即前往日志服务开通页面。立即开通日志服务 扩展阅读 SLS不仅能进行日志查询与分析，还能观测告警、数据库审计、数据加工与处理、实现商业分析...
身份证识别
计费说明 关于身份证识别的计费方式及报价，请参见 计费介绍。说明 下方调试接口为付费接口，如需免费体验调试请前往 体验中心。调试 您可以在OpenAPI Explorer中直接运行该接口，免去您计算签名的困扰。运行成功后，OpenAPI Explorer可以...
创建数据表
分区键相同的数据会存放在同一个分区内，所以相同分区键下的数据尽量不要超过10 GB，否则会导致单分区过大，无法分裂。另外，数据的读/写访问尽量在不同的分区键上均匀分布，有利于负载均衡。definedColumnSchema：预先定义一些非主键列...
宽表模型介绍
计费说明 表格存储 支持预留模式（预付费）和按量模式（后付费）两种计费模式，请根据所用的实例模型参考相应计费模式了解计费信息。更多信息，请参见 计费概述。预留模式：计费项包括计算能力、数据存储量和外网下行流量，其中数据存储量...
格子
本文档介绍格子在流式布局画布中的操作方法，包括格子高度调整、分裂格子和删除格子等，帮助您更加方便快捷地在移动端可视化应用中对格子进行配置。DataV提供了格子调整高度、分裂格子等功能，使流式布局画布中内容操作更流畅。您可以在...
格子
本文介绍格子在流式布局画布中的操作方法，包括格子高度调整、分裂格子和删除格子等，帮助您更加方便快捷地在移动端可视化应用中对格子进行配置。操作功能 DataV提供了格子调整高度、分裂格子等功能，使流式布局画布中内容操作更流畅。您...
应用场景
数据本地处理 场景说明 场景示例 使用云盒的优势 某些场景下需要使用大量数据，这些数据传输到云上处理不仅会受到带宽或时间等限制，还会产生传输费用，因此需要在本地处理大量数据。AI模型训练和渲染、交通视频数据分析等 云盒可以帮忙您...
什么是云盒
例如：智能小区、工厂等。产品架构 云盒是公共云在本地数据中心（Internet Data Center，简称IDC）的延伸，购买云盒后，阿里云会将计算、存储、网络等基础设施部署到您指定的本地IDC中，您可以方便地在云盒内创建云产品实例。云盒产品架构...
创建数据表
分区键相同的数据会存放在同一个分区内，所以相同分区键下的数据尽量不要超过10 GB，否则会导致单分区过大，无法分裂。另外，数据的读/写访问最好在不同的分区键上均匀分布，有利于负载均衡。DefinedColumns：预先定义一些非主键列以及其...
- 产品推荐
- 这些文档可能帮助您