使用 DLF 共享样例数据集

更新时间:
复制 MD 格式

DLF 提供多种规格的 TPC-DS 样例数据库和搜索样例数据集,可用于传统大数据查询与性能验证,以及图片、向量和全文检索等多模态场景。本文介绍可用的样例数据集,以及如何创建只读样例 Catalog 并使用样例数据。

选择样例数据集

DLF 提供以下两类共享样例数据集:

  • TPC-DS Paimon 和 TPC-DS Iceberg 数据集:适用于传统大数据查询、分析和性能验证。

  • 搜索样例数据集:包含图片、向量和官方文档数据,适用于图片检索、向量检索和全文检索等多模态场景。

具体包含以下数据集:

样例数据库名称

样例数据说明

tpcds_paimon_sf1

TPC-DS 1G Paimon 表

tpcds_paimon_sf2

TPC-DS 2G Paimon 表

tpcds_paimon_sf10

TPC-DS 10G Paimon 表

tpcds_paimon_sf100

TPC-DS 100G Paimon 表

tpcds_iceberg_sf1

TPC-DS 1G Iceberg 表

search_samples

搜索样例数据集,包含图片、向量和官方文档数据,适用于图片检索、向量检索和全文检索等场景

创建只读样例 Catalog

  1. 登录数据湖构建控制台

  2. 单击左侧导航栏数据目录

  3. 单击数据共享 > 我接收的,找到名为dlf_samples的数据共享,并创建 Catalog

    基于接收的数据共享创建的 Catalog 为只读。

  4. 单击数据目录页签,可以看到创建后的 Catalog。

    在 Catalog 列表中,创建后的 Catalog 状态显示为运行中

使用样例数据集

样例数据集由 DLF 官方统一创建和维护,支持以图搜图、可视化探查、全文检索等多模态能力。详细操作请参见快速体验 DLF 多模态检索能力