全部产品
弹性计算 会员服务 网络 安全 移动云 数加·大数据分析及展现 数加·大数据应用 管理与监控 云通信 阿里云办公 培训与认证 更多
存储与CDN 数据库 域名与网站(万网) 应用服务 数加·人工智能 数加·大数据基础服务 互联网中间件 视频服务 开发者工具 解决方案 物联网 智能硬件
日志服务

操作Shard

更新时间:2018-03-01 15:25:21

Logstore读写日志必定保存在某一个分区(Shard)上。每个日志库(Logstore)分若干个分区,您在创建Logstore时需要为该Logstore设置Shard的数量,创建完成后还可以分裂或合并Shard,以达到增加或减少Shard的目的。

对于已存在的Shard,您可以进行以下操作:

分裂Shard

每个分区(Shard)能够处理5M/s的数据写入和10M/s的数据读取,当数据流量超过分区服务能力时,建议您及时增加分区。扩容分区通过分裂(split)操作完成。

使用指南

在分裂分区时,需要指定一个处于readwrite状态的ShardId和一个MD5。MD5要求必须大于分区的BeginKey并且小于EndKey。

分裂操作可以从一个分区中分裂出另外两个分区,即分裂后分区数量增加2。在分裂完成后,被指定分裂的原分区状态由readwrite变为readonly,数据仍然可以被消费,但不可写入新数据。两个新生成的分区状态为readwrite,排列在原有分区之后,且两个分区的MD5范围覆盖了原来分区的范围。

操作步骤

  1. 登录 日志服务管理控制台

  2. 选择所需的项目,单击项目名称。

  3. Logstore列表 页面,选择所需的日志库并单击操作列下的 修改

  4. 选择要分裂的分区,单击右侧的 分裂

    split shard

  5. 单击 确认 并关闭对话框。

    分裂操作完成后,原分区变为readonly状态,两个新生成的分区的MD5范围覆盖了原来分区的范围。

    split shard -2

合并Shard

您可以通过合并(merge)操作缩容分区。合并操作可以将指定分区与其右侧相邻分区的范围合并,并将此范围赋予新生成的readwrite分区,两个被合并的原分区变为readonly状态。

使用指南

在合并操作时,必须指定一个处于readwrite状态的分区,指定的分区不能是最后一个readwrite分区。服务端会自动找到所指定分区的右侧相邻分区,并将两个分区范围合并。在合并完成后,所指定的分区和其右侧相邻分区变成只读(readonly)状态,数据仍然可以被消费,但不能写入新数据。同时新生成一个 readwrite 状态的分区,新分区的MD5范围覆盖了原来两个分区的范围。

操作步骤

  1. 登录 日志服务管理控制台

  2. 选择所需的项目,单击项目名称。

  3. Logstore列表 页面,选择所需的日志库并单击操作列下的 修改

  4. 选择要合并的分区,单击右侧的 合并 并关闭对话框即可。

    merge shard1

    在合并完成后,所指定的分区和其右侧相邻分区变成只读(readonly)状态,新生成的readwrite分区的MD5范围覆盖了原来两个分区的范围。

    merge shard2

删除Shard

Logstore的生命周期即数据保存时间支持设置为1~365天,分区及分区中的日志数据在超出该时间后会自动删除。readonly 分区不参与计费。

您也可以通过删除Logstore的方式删除整个日志库中的所有分区。

本文导读目录