二级索引
desc-o/tmp/describe_table_meta.json 使用二级索引查询数据 读取单行数据 读取表中的数据。您也可以将读取的数据导出到本地JSON格式的文件中。说明 如果读取的数据行不存在，则返回结果为空。命令格式 get-pk '[primaryKeyValue,...
读取数据
当要读取单行数据或者批量读取表中数据时，您必须指定行的完整主键；当要范围读取表中数据时，您需要指定完整主键范围或者主键前缀。读取数据时支持配置返回指定属性列、指定数据版本个数、指定数据时间范围或者满足过滤条件的数据。如果...
读取数据
适用于能确定完整主键，且要读取行数较多或者要读取多个表中数据的场景。范围读取数据 调用 GetRange 接口读取一个范围内的数据。GetRange操作支持按照确定范围进行正序读取和逆序读取，可以设置要读取的行数。如果范围较大，已扫描的行数...
IoT数据源
Reader脚本Demo 从IoT Reader数据源的产品时序存储表中读取数据，写入到一张MaxCompute表中的脚本示例如下。{"type":"job","version":"2.0","steps":[{"stepType":"iot",/请指定"iot"，表示IoT Reader数据源"parameter":{"accessId":"LT*",...
将自建ClickHouse向企业版迁移
在目标集群中使用 Remote 函数从源集群的源表中读取数据。INSERT INTO db.table SELECT*FROM remote('source-hostname:9000',db,table,'exporter','password-here')在源集群中使用 Remote 函数将数据推送到目标集群中。说明 为了使 Remote ...
过滤器
示例 使用SingleColumnValueFilter过滤数据 以下示例用于读取数据表中的一行数据，设置读取最新版本的数据以及根据Col0列的值过滤数据。private static void getRow(SyncClient client,String pkValue){/构造主键。PrimaryKeyBuilder ...
表引擎
MergeTree 用于插入极大量的数据到一张表中，数据以数据片段的形式一个接着一个的快速写入，数据片段按照一定的规则进行合并。Data Replication 用于将数据从一个节点复制到其他节点，并保证数据的一致性。Custom Partitioning Key 用于...
使用二级索引读取数据
表格存储 提供了单行读取和范围读取的查询方式用于读取索引表中数据。当返回的属性列在索引表中时，您可以直接读取索引表获取数据，否则请自行反查数据表获取数据。前提条件 已初始化Client。具体操作，请参见 初始化OTSClient。已创建二级...
使用二级索引读取数据
表格存储 提供了单行读取和范围读取的查询方式用于读取索引表中数据。当返回的属性列在索引表中时，您可以直接读取索引表获取数据，否则请自行反查数据表获取数据。前提条件 已初始化Client。具体操作，请参见 初始化OTSClient。已创建二级...
使用二级索引读取数据
表格存储 提供了单行读取和范围读取的查询方式用于读取索引表中数据。当返回的属性列在索引表中时，您可以直接读取索引表获取数据，否则请自行反查数据表获取数据。说明 二级索引包括全局二级索引和本地二级索引。关于二级索引的更多信息，...
使用二级索引读取数据
表格存储 提供了单行读取和范围读取的查询方式用于读取索引表中数据。当返回的属性列在索引表中时，您可以直接读取索引表获取数据，否则请自行反查数据表获取数据。前提条件 已初始化Client。具体操作，请参见 初始化OTSClient。已创建二级...
使用二级索引读取数据
表格存储 提供了单行读取和范围读取的查询方式用于读取索引表中数据。当返回的属性列在索引表中时，您可以直接读取索引表获取数据，否则请自行反查数据表获取数据。前提条件 已初始化Client。具体操作，请参见 初始化Client。已创建二级...
二级索引简介
背景信息 表格存储的数据表是通过指定主键来实现表中数据的查询。但是，通常情况下很多应用可能需要通过数据表主键以外的属性对数据进行查询。为了解决此问题，您可以为数据表创建一个或多个二级索引，然后使用索引表查询数据。二级索引...
使用二级索引读取数据
表格存储 提供了单行读取和范围读取的查询方式用于读取索引表中数据。当返回的属性列在索引表中时，您可以直接读取索引表获取数据，否则请自行反查数据表获取数据。前提条件 已初始化Client。具体操作，请参见 初始化OTSClient。已创建二级...
快速入门
for record in o.read_table(table):print(record[0],record[1])#以运行SQL的方式读取表中的数据。result=o.execute_sql('select*from my_new_table;',hints={'odps.sql.allow.fullscan':'true'})#读取SQL执行结果。with result.open_...
步骤三：创建实时计算表
现在我们需要创建一个订单表对应的实时元表，可以从订单表中读取增量数据。步骤一：创建 oms_orders订单来源元表 在Dataphin首页，单击顶部菜单栏的 研发。按照下图操作指引，进入 新建表 对话框。在 新建表 页面，配置相关参数。参数 描述...
步骤三：创建实时计算表
现在我们需要创建一个订单表对应的实时元表，可以从订单表中读取增量数据。步骤一：创建 oms_orders订单来源元表 在Dataphin首页，单击顶部菜单栏的 研发。按照下图操作指引，进入 新建表 对话框。在 新建表 页面，配置相关参数。参数 描述...
在本地环境上使用PyODPS
for record in o.read_table(table):print(record[0],record[1])#以运行SQL的方式读取表中的数据。result=o.execute_sql('SELECT*FROM pyodps_iris LIMIT 3;',hints={'odps.sql.allow.fullscan':'true'})#删除表以清除资源。table.drop()...
通过SDK使用二级索引
} 步骤三：读取索引表中数据 从索引表中单行或者范围读取数据，当返回的属性列在索引表中时，您可以直接读取索引表获取数据，否则请自行反查数据表获取数据。您可以通过 Java SDK、Go SDK、Python SDK、Node.js SDK、.NET SDK 和 PHP SDK ...
配置Oracle输入组件
切分键 您可以将源数据表中字段类型为整型的某一列作为切分键，推荐使用 主键 或 有索引的列 作为切分键。读取数据时，根据配置的切分键字段进行数据分片，实现并发读取，可以提升数据同步效率。批量条数 配置数据同步时，每条并发SQL语句...
配置Oracle输入组件
切分键 您可以将源数据表中字段类型为整型的某一列作为切分键，推荐使用 主键 或有 索引的列 作为切分键。读取数据时，根据配置的切分键字段进行数据分片，实现并发读取，可以提升数据同步效率。批量条数 配置数据同步时，每条并发SQL语句...
配置ClickHouse输入组件
切分键 您可以将源数据表中字段类型为整型的某一列作为切分键，推荐使用 主键 或有 索引的列 作为切分键。读取数据时，根据配置的切分键字段进行数据分片，实现并发读取，可以提升数据同步效率。批量条数 配置数据同步时每条并发SQL语句...
配置AnalyticDB for PostgreSQL输入组件
切分建 您可以将源数据表中字段类型为整型的某一列作为切分键，推荐使用 主键 或有 索引的列 作为切分键。读取数据时，根据配置的切分键字段进行数据分片，实现并发读取，可以提升数据同步效率。批量条数 配置数据同步时，每条并发SQL语句...
配置AnalyticDB for PostgreSQL输入组件
切分建 您可以将源数据表中字段类型为整型的某一列作为切分键，推荐使用 主键 或有 索引的列 作为切分键。读取数据时，根据配置的切分键字段进行数据分片，实现并发读取，可以提升数据同步效率。批量条数 配置数据同步时，每条并发SQL语句...
读取数据
适用于能确定完整主键，且要读取行数较多或者要读取多个表中数据的场景。范围读取数据 调用 GetRange 接口读取一个范围内的数据。GetRange操作支持按照确定范围进行正序读取和逆序读取，可以设置要读取的行数。如果范围较大，已扫描的行数...
配置ClickHouse输入组件
切分键 您可以将源数据表中字段类型为整型的某一列作为切分键，推荐使用 主键 或有 索引的列 作为切分键。读取数据时，根据配置的切分键字段进行数据分片，实现并发读取，可以提升数据同步效率。批量条数 配置数据同步时每条并发SQL语句...
配置PolarDB输入组件
切分键 您可以将源数据表中某一列作为切分键，建议使用主键或有索引的列作为切分键。批量条数 每个并发SQL语句读取数据的条数，默认的批量条数为1024。输入过滤 填写输入字段的过滤信息，例如 ds=${bizdate}。输入过滤适用于以下两种场景：...
创建二级索引
在数据表上创建索引表后，可根据需要读取索引表中的数据或者删除数据表上指定的索引表。说明 二级索引包括全局二级索引和本地二级索引。关于二级索引的更多信息，请参见 二级索引。您也可以使用CreateTable接口在创建数据表的同时创建一个...
配置PolarDB输入组件
切分键 您可以将源数据表中某一列作为切分键，建议使用主键或有索引的列作为切分键。批量条数 每个并发SQL语句读取数据的条数，默认的批量条数为1024。输入过滤 填写输入字段的过滤信息，例如 ds=${bizdate}。输入过滤适用于以下两种场景：...
读取数据
适用于能确定完整主键，且要读取行数较多或者要读取多个表中数据的场景。范围读取数据 调用 GetRange 接口读取一个范围内的数据。GetRange操作支持按照确定范围进行正序读取和逆序读取，可以设置要读取的行数。如果范围较大，已扫描的行数...
读取数据
适用于能确定完整主键，且要读取行数较多或者要读取多个表中数据的场景。范围读取数据 调用 GetRange 接口读取一个范围内的数据。GetRange操作支持按照确定范围进行正序读取和逆序读取，可以设置要读取的行数。如果范围较大，已扫描的行数...
配置AnalyticDB for MySQL 3.0输入组件
切分建 您可以将源数据表中某一列作为切分键，建议使用主键或有索引的列作为切分键。批量条数 配置数据同步过程中每个并发SQL语句读取数据的条数。输入过滤 填写输入字段的过滤信息，例如 ds=${bizdate}。输入过滤适用于以下两种场景：固定...
配置AnalyticDB for MySQL 3.0输入组件
切分建 您可以将源数据表中某一列作为切分键，建议使用主键或有索引的列作为切分键。批量条数 配置数据同步过程中每个并发SQL语句读取数据的条数。输入过滤 填写输入字段的过滤信息，例如 ds=${bizdate}。输入过滤 适用于以下两种场景：...
读写Elasticsearch数据
云原生数据湖分析DLA（Data Lake Analytics）中支持接入Elasticsearch，通过标准SQL语句读取Elasticsearch中的数据，从而...读取Elasticsearch中的表数据。例如通过 SELECT 在DLA中读取 product_info 表中的数据。select*from product_info;
使用Spark SQL进行作业开发
步骤二：创建DWD层数据表 本教程以从ODS层表中读取并过滤数据后写入DWD层表中为例。使用 继续执行 的方式，在 test_spark_db 库中创建一张无索引、有分区的表 adb_spark_dwd。CREATE TABLE test_spark_db.adb_spark_dwd(id int,name string...
使用XIHE BSP SQL进行作业开发
步骤二：创建DWD层数据表 本教程以从ODS层表中读取并过滤数据后写入DWD层表中为例。输入以下语句，并单击 执行SQL（F8）。在 test_xihe_db 库中创建一张无索引，有分区的表 adb_xihe_dwd。CREATE TABLE test_xihe_db.adb_xihe_dwd(id int,...
深度解析PolarDB数据库并行查询技术
对于方案一，需要读取表中的所有数据，根据选中的HASH key，对数据进行分区，并将数据发送到不同的处理线程中，这需要额外增加一个Repartition算子，负责根据分区规则将数据发送到不同的处理线程。对于方案二，需要并行创建共享的HASH ...
创建及管理外部表
使用限制 Hologres支持跨工作空间读取外部表数据，您当前使用的账号需要拥有其他工作空间的MaxCompute表访问权限，才可以使用HoloStudio一键创建外部表直接读取MaxCompute表数据。当MaxCompute的源头表存在时，您才可以新建外部表并读取...
Hive数据源
您可以基于HDFS文件和Hive JDBC两种方式读取数据：基于HDFS文件读取数据 Hive Reader插件通过访问HiveMetastore服务，解析出您配置的数据表的HDFS文件存储路径、文件格式、分隔符等信息后，再通过读取HDFS文件的方式读取Hive中的表数据。...
EMR Hive数据整库离线同步至MaxCompute
读取Hive方法 基于HDFS文件读取数据：Hive Reader插件通过访问HiveMetastore服务，解析出您配置的数据表的HDFS文件存储路径、文件格式、分隔符等信息后，再通过读取HDFS文件的方式读取Hive中的表数据。基于Hive JDBC读取数据：Hive Reader...
- 产品推荐
- 这些文档可能帮助您