快速使用数据湖分析版实例

（可选）步骤一、创建DLF元数据的Hive集群

该场景需要使用阿里云DLF作为Hive Catalog元数据中心，所以需要开通DLF服务。您可以在DLF开通页面开通DLF服务。

1. 在EMR on ECS页面，创建一个DataLake类型的集群，需选中Hive服务，并且元数据选择DLF统一元数据。创建集群操作，请参见创建集群。

2. 通过SSH方式连接集群，详情请参见登录集群。

3. 执行以下命令，创建Hive测试表。

   进入Hive客户端及Hive基础操作，请参见Hive基础操作。

   create database test_db;
   create table test_db.hive_test(id int, name string);
   insert into test_db.hive_test values(1, 'Alice'),(2, 'Bob');

步骤二、连接StarRocks实例

1. 在实例列表页面，单击操作列的连接实例。

   您也可以通过其他方式连接StarRocks实例，详情请参见连接实例。

2. 连接StarRocks实例。

   1. 在新建连接页签，配置以下信息。

      参数	示例	描述
      地域	华东1（杭州）	选择已创建的StarRocks实例所在的物理位置。
      实例	StarRocks_Serverlesss	选择已创建的StarRocks实例的名称。
      连接名称	Connection_Serverlesss	实例名称，自定义输入。 长度限制为1~64字符，仅可使用中文、字母、数字、短划线（-）和下划线（_）。
      用户名	根据实际情况输入	默认初始用户名为admin，您可以选择使用该用户名进行连接，或者根据需要创建其他用户，创建用户详情请参见管理用户及数据授权。
      密码	根据实际情况输入	StarRocks实例中已创建的用户名对应的密码。

   2. 单击测试连通性。

   3. 验证通过后，单击确定。

      进入SQL Editor页面，即可执行相关的SQL。更多使用信息，请参见通过EMR StarRocks Manager连接StarRocks实例。

步骤三：创建External DLF Catalog

1. 在SQL Editor的查询列表页面，单击图标。

2. 输入以下命令，单击运行。

   CREATE EXTERNAL CATALOG hive_dlf
   PROPERTIES 
   (
       "type" = "hive",
       "hive.metastore.type" = "DLF"
   );

   在SQL Editor的数据库页面，单击图标，即可看到hive_dlf相关的信息。

   

   此外，创建External DLF Catalog时还支持其他属性，例如dlf.catalog.id、dlf.catalog.region、dlf.catalog.endpoint等。如果您不想使用DLF默认的数据目录（通常与您阿里云账号UID相同），而是在步骤一中创建了一个新的DLF数据目录，假设其名称为new_dlf_catalog，您可以通过如下两种方式创建Catalog，使得其能够访问到新的数据目录：

   • 通过修改配置文件

     您可以通过修改hive-site.xml来控制所有DLF Catalog的默认配置。修改方法为：

     1. 在Serverless StarRocks控制台的实例配置中找到hive-site.xml。

     2. 将dlf.catalog.id参数的值修改为您新创建的DLF数据目录名称，例如new_dlf_catalog，然后提交修改。

     3. 重启后，实例中所有Catalog以及新建的Catalog都会使用更新后的配置。

   • 通过SQL语句直接指定属性

     如果您希望更改特定Catalog的DLF配置，而不重启集群，可在创建Catalog的SQL语句中指定新的属性，属性信息的键和值与配置文件hive-site.xml完全一致。

     CREATE EXTERNAL CATALOG hive_dlf_new
     PROPERTIES 
     (
         "type" = "hive",
         "hive.metastore.type" = "DLF",
         "dlf.catalog.id" = "new_dlf_catalog" #修改为您的数据目录名称。
     );

步骤四、查询数据

• 查看Catalog中的所有数据库

  SHOW DATABASES FROM hive_dlf;

  可能的结果如下所示。

  +----------+
  | Database |
  +----------+
  | default  |
  | test_db  |
  +----------+

• 查看Catalog中的所有数据表

  SHOW TABLES FROM hive_dlf.test_db;

  可能的结果如下所示。

  +-------------------+
  | Tables_in_test_db |
  +-------------------+
  | hive_test         |
  +-------------------+

• 查询表中所有数据

  SELECT * FROM hive_dlf.test_db.hive_test;

  可能的结果如下所示。

  +------+-------+
  | id   | name  |
  +------+-------+
  |    1 | Alice |
  |    2 | Bob   |
  +------+-------+

（可选）步骤一、创建RDS或MySQL元数据的Hive集群

1. 在EMR on ECS页面，创建一个DataLake类型的集群，需选中Hive服务，并且元数据选择DLF统一元数据。

   创建集群操作，请参见创建集群。

   重要

   请确保EMR集群和Serverless StarRocks实例使用相同的VPC。

2. 通过SSH方式连接集群，详情请参见登录集群。

3. 执行以下命令，创建Hive测试表。

   进入Hive客户端及Hive基础操作，请参见Hive基础操作。

   create database test_db;
   create table test_db.hive_test(id int, name string);
   insert into test_db.hive_test values(1, 'Alice'),(2, 'Bob');

步骤二、连接StarRocks实例

1. 在实例列表页面，单击操作列的连接实例。

   您也可以通过其他方式连接StarRocks实例，详情请参见连接实例。

2. 连接StarRocks实例。

   1. 在新建连接页签，配置以下信息。

      参数	示例	描述
      地域	华东1（杭州）	选择已创建的StarRocks实例所在的物理位置。
      实例	StarRocks_Serverlesss	选择已创建的StarRocks实例的名称。
      连接名称	Connection_Serverlesss	实例名称，自定义输入。 长度限制为1~64字符，仅可使用中文、字母、数字、短划线（-）和下划线（_）。
      用户名	根据实际情况输入	默认初始用户名为admin，您可以选择使用该用户名进行连接，或者根据需要创建其他用户，创建用户详情请参见管理用户及数据授权。
      密码	根据实际情况输入	StarRocks实例中已创建的用户名对应的密码。

   2. 单击测试连通性。

   3. 验证通过后，单击确定。

      进入SQL Editor页面，即可执行相关的SQL。更多使用信息，请参见通过EMR StarRocks Manager连接StarRocks实例。

步骤四、查询数据

• 查看Catalog中的所有数据库

  SHOW DATABASES FROM hive_catalog;

  可能的结果如下所示。

  +----------+
  | Database |
  +----------+
  | default  |
  | test_db  |
  +----------+

• 查看Catalog中的所有数据表

  SHOW TABLES FROM hive_catalog.test_db;

  可能的结果如下所示。

  +-------------------+
  | Tables_in_test_db |
  +-------------------+
  | hive_test         |
  +-------------------+

• 查询表中所有数据

  SELECT * FROM hive_catalog.test_db.hive_test;

  可能的结果如下所示。

  +------+-------+
  | id   | name  |
  +------+-------+
  |    1 | Alice |
  |    2 | Bob   |
  +------+-------+