快速使用存算分离版实例

前提条件

• 已注册阿里云账号，并完成实名认证。具体操作请参见账号注册（PC端）。

• 如果是RAM用户，已授权AliyunEMRStarRocksFullAccess系统权限策略，详情请参见为RAM用户授权。

  说明

  创建和管理StarRocks实例需要具备AliyunEMRStarRocksFullAccess系统权限策略。

注意事项

代码的运行环境由所属用户负责管理和配置。

操作步骤

步骤二：连接StarRocks实例

1. 在实例列表页面，单击操作列的连接实例。

   您也可以通过其他方式连接StarRocks实例。

2. 连接StarRocks实例。

   1. 在新建连接页签，配置以下信息。

      

      参数	示例	描述
      地域	华东1（杭州）	选择已创建的StarRocks实例所在的物理位置。
      实例	StarRocks_Serverless	选择已创建的StarRocks实例的名称。
      连接名称	Connection_Serverless	连接名称，自定义输入。 长度限制为1~64字符，仅可使用中文、字母、数字、短划线（-）和下划线（_）。
      用户名	根据实际情况输入	默认初始用户名为admin，您可以选择使用该用户名进行连接，或者根据需要创建其他用户，创建用户详情请参见管理用户及数据授权。
      密码	根据实际情况输入	StarRocks实例中已创建的用户名对应的密码。

   2. 单击测试连通性。

   3. 验证通过后，单击确定。

      进入SQL Editor页面，即可执行相关的SQL。更多使用信息，请参见通过EMR StarRocks Manager连接StarRocks实例。

步骤三：SQL查询

1. 在SQL Editor的查询列表页面，单击图标。

2. 在新建文件对话框中，单击确认。

3. 在新建的文件中，输入以下命令，选中所有命令后，单击运行。

   /**创建数据库**/
   CREATE DATABASE IF NOT EXISTS load_test;
   
   /**使用数据库**/
   USE load_test;
   
   /**创建表**/
   CREATE TABLE insert_wiki_edit
   (
       event_time DATETIME,
       channel VARCHAR(32) DEFAULT '',
       user VARCHAR(128) DEFAULT '',
       is_anonymous TINYINT DEFAULT '0',
       is_minor TINYINT DEFAULT '0',
       is_new TINYINT DEFAULT '0',
       is_robot TINYINT DEFAULT '0',
       is_unpatrolled TINYINT DEFAULT '0',
       delta INT SUM DEFAULT '0',
       added INT SUM DEFAULT '0',
       deleted INT SUM DEFAULT '0'
   )
   AGGREGATE KEY(event_time, channel, user, is_anonymous, is_minor, is_new, is_robot, is_unpatrolled)
   PARTITION BY RANGE(event_time)
   (
       PARTITION p06 VALUES LESS THAN ('2015-09-12 06:00:00'),
       PARTITION p12 VALUES LESS THAN ('2015-09-12 12:00:00'),
       PARTITION p18 VALUES LESS THAN ('2015-09-12 18:00:00'),
       PARTITION p24 VALUES LESS THAN ('2015-09-13 00:00:00')
   )
   DISTRIBUTED BY HASH(user) BUCKETS 10
   PROPERTIES("replication_num" = "1");
   
   /**插入数据**/
   INSERT INTO insert_wiki_edit VALUES("2015-09-12 00:00:00","#en.wikipedia","GELongstreet",0,0,0,0,0,36,36,0),("2015-09-12 00:00:00","#ca.wikipedia","PereBot",0,1,0,1,0,17,17,0);
   
   /**查询数据**/
   select * from insert_wiki_edit;

返回信息如下所示。

步骤四：查看表信息

1. 在新建的文件中，输入以下命令，查看数据库。

   SHOW PROC '/dbs';

   返回信息如下所示。

   

2. 输入以下命令，查看表的详细信息。

   SHOW PROC '/dbs/10120';

   返回信息如下所示。

   

   其中，在存算分离模式下，CLOUD_NATIVE为表的类型字段标识；StoragePath为表在OSS对象存储中的路径，通过该路径可以定位到存算分离表的数据存储位置。

步骤五：Cache特性演示

1. 在左侧导航栏，选择诊断与分析 > SQL任务。

2. 找到对应的Query，单击查询ID。

3. 单击执行详情页签。

   通过查看Profile执行树，您可以定位到相关节点，并重点关注右侧指标中的CompressedBytesReadLocalDisk（从本地缓存读取）和CompressedBytesReadRemote（从远端OSS对象存储读取）两个指标。

   本示例中，insert_wiki_edit_cache表开启了本地缓存功能。通过观察相关指标值，可以确定查询全部命中了本地缓存。

   

   insert_wiki_edit_nocache表未启用本地缓存功能。通过分析其对应的指标值，可以确定该表的查询操作未命中本地缓存，数据全部来自远端OSS对象存储。

   

步骤六：性能测试

本示例为您展示了存算分离结合本地缓存和存算一体两种模式下的查询性能对比。您可以使用SSB测试集进行更详细的性能对比测试，详情请参见SSB性能测试说明。

• 准备数据环境。

  • 集群资源配置：1FE（8CU）+3CN（算力：16CU｜存储：1000 GB）。

  • 集群参数：使用默认设置，存算分离集群开启本地缓存。

  • 数据量：500 GB（sf=500）

• 测试结果。

  • 存算一体总计用时：21.586s。

  • 存算分离总计用时（第2次执行时开启本地缓存的情况下）： 27.364s。

  • 存算分离没有开启本地缓存，总计用时：117.529s。

执行sh ssb_query.sh ssb脚本进行SSB测试后，结果显示表明在开启本地缓存的情况下，存算分离和存算一体的查询性能基本相同，且明显优于未开启本地缓存时的性能。

（可选）步骤七：释放实例

当您不再需要某个实例提供服务时，您可以释放该实例，以免产生额外的费用。

1. 在实例列表页面，单击实例操作列的释放。

2. 在弹出的对话框中，单击确定。

相关文档

• 如需了解SQL Editor更多操作，请参见SQL Editor。

• 如需查看当前实例的SQL查询信息，分析SQL的执行计划，及时诊断和排查SQL问题，详情请参见诊断与分析。

• 如需查看并分析数据库中发生的所有操作，详情请参见审计日志。

联系我们

如果您在使用过程中有任何疑问或问题，可以使用钉钉搜索群号24010016636进行咨询。