转义字符
返回结果 \\"(.*)\\"SQL转义增强 SQL、JSON和正则表达式都使用了 \ 作为转义字符容易引起混乱，选择 \ 作为转义字符是因为在正常的语句中出现的频率很低，但是在几种规范组合的场景反而大量出现，出现转义字符膨胀的问题。为了处理好此类...
MaxCompute JSON类型使用指南
MaxCompute当前支持JSON数据类型，提高了表中带有JSON类型数据的计算和分析的性能，本文为您介绍JSON类型的使用方法。JSON类型简介 背景信息 半结构化数据介于结构和非结构化数据之间，数据中有一定的Schema，但是Schema灵活，没有强约束，...
告警规则指标说明
指标维度 节点机IP，筛选条件如下：遍历：遍历每个节点机IP，针对每台节点机的指标数据单独进行监控告警。指定筛选固定的几台节点机进行监控告警。示例：=172.20.XX.XX。无维度：汇总所有节点机的指标数据，针对所有节点机的指标数据进行...
配置for-each节点
DataWorks为您提供遍历节点（for-each节点），您可以通过for-each节点来循环遍历赋值节点传递的结果集。同时您也可以重新编排for-each节点内部的业务流程。本文以一个具体示例，通过for-each节点2次循环遍历赋值节点输出结果，并在每次循环...
交叉透视表
小计：设置表格中数据的小计功能。您可单击 控制小计的显隐，选择 上(前)方 和 下(后)方 两种显示位置。图标：设置表格中数据的 同环比上升 或 同环比下降 图标。您可单击 控制图标的显隐。形状：设置图标形状。颜色：设置图标颜色。尺寸：...
Echarts 漏斗图
数据源 单击 配置数据源，可在 设置数据源 面板中修改数据源类型和数据查询代码、预览数据源返回结果以及查看数据响应结果，详情请参见 配置资产数据。数据过滤器 数据过滤器提供数据结构转换、筛选和一些简单的计算功能。单击 添加过滤器...
半结构化分析
JSON/JSONB AnalyticDB PostgreSQL版 支持JSON数据格式。JSON格式数据在业务上也可以用text类型来存储，但是使用JSON/JSONB数据类型会在用户写入数据时对输入做JSON规则校验，避免不合法JSON数据写入。同时 AnalyticDB PostgreSQL版 提供...
数据格式描述文件
键 格式 描述 是否必须 type 字符串 数据格式，可以是“json”、“jsonLowercase”、“csv”和“tsv”几种格式。是 timestampSpec JSON对象 时间戳和时间戳类型。是 dimensionsSpec JSON对象 数据的维度（包含哪些列）。是 对于不同的数据...
如何对JSON类型进行高效分析
在处理JSON数据时，为了提高查询性能，数仓往往在ETL任务中预先解析JSON数据且按需计算出对应值，然后作为表的单独一列插入到表中，即将JSON数据一些属性按需处理后构成大宽表。查询时不再需要读取和解析整个JSON列数据，直接读取对应普通...
范围选择器功能介绍
选择数据格式 在选中地图中的区域范围后，可自定义选择所需的范围数据格式内容，可选数据格式内容包括如下几种：JSON API：单击链接右侧的 图标，即可复制JSON数据的API链接。JEOJEON API：单击链接右侧的 图标，即可复制JEOJEON数据的API...
范围选择器功能介绍
选择数据格式 在选中地图中的区域范围后，可自定义选择所需的范围数据格式内容，可选数据格式内容包括如下几种：JSON API：单击链接右侧的 图标，即可复制JSON数据的API链接。GeoJSON API：单击链接右侧的 图标，即可复制GeoJSON数据的API...
SelectObject
仅Csv文件有column index)|json path(例如s.contacts.firstname 仅应用在JSON文件)|function(column index|column name)|function(json_path)(仅应用在JSON文件)|select_list AS alias 说明 支持的function为AVG、SUM、MAX、MIN、COUNT、...
JSON支持
JSON format的使用只是提供了一种使用JSON方式的方法。Lindorm CQL支持将多个列的数据按照JSON的格式进行输入和输出。SELECT JSON 对于SELECT语句，可以使用JSON关键字将每一行作为单个JSON编码的映射返回。SELECT语句行为的其余部分是相同...
JSON类型
根据 RFC 7159 中的说明，JSON 数据类型是用来存储 JSON（JavaScript Object Notation）数据的。这种数据也可以被存储为 text，但是 JSON 数据类型的优势在于能强制要求每个被存储的值符合 JSON 规则。也有很多 JSON 相关的函数和操作符...
for-each节点逻辑原理介绍
DataWorks为您提供遍历节点（for-each节点），您可以通过for-each节点来循环遍历赋值节点传递的结果集。同时您也可以重新编排for-each节点内部的业务流程。本文为您介绍for-each节点的组成与应用逻辑。使用说明 您可通过以下内容了解遍历...
PGVector
PGVector是一个高效的向量数据库插件，支持多种向量计算算法和数据类型，同时还能够高效存储与查询以向量表示的AI Embedding。本文档将为您介绍PGVector的背景、原理、使用方法及其他相关信息。背景信息 随着数据科学和机器学习等技术的...
基于GitHub公开事件数据集的离线实时一体化实践
已开通对象存储OSS并在ECS中安装ossutil工具，用于存储 GH Archive 提供的JSON数据文件，详情请参见 开通OSS服务 和 安装ossutil。已开通大数据计算服务MaxCompute并创建Project，详情请参见 创建MaxCompute项目。已开通大数据开发治理平台...
JSON格式导入
假设JSON数据为：{"id":123,"name":null } 则使用以下两种JSON Path会获得相同的结果：123 和 null。["$.id","$.name"]["$.id","$.info"]完全匹配失败 为防止一些参数设置错误导致的误操作。Doris在尝试匹配一行数据时，如果所有列都匹配...
PGVector
PGVector是一个高效的向量数据库插件，支持多种向量计算算法和数据类型，同时还能够高效存储与查询以向量表示的AI Embedding。本文档将为您介绍PGVector的背景、原理、使用方法及其他相关信息。背景信息 随着数据科学和机器学习等技术的...
PGVector
PGVector是一个高效的向量数据库插件，支持多种向量计算算法和数据类型，同时还能够高效存储与查询以向量表示的AI Embedding。本文档将为您介绍PGVector的背景、原理、使用方法及其他相关信息。背景信息 随着数据科学和机器学习等技术的...
热点行优化
减少B-tree索引的遍历 MySQL是以B-tree索引的方式管理数据的，每次执行查询时，都需要遍历索引才能定位到目标数据行，数据表越大，索引层级越多，遍历时间就越长。在前面提到的对更新操作进行分组的机制中，只有每组的Leader遍历索引定位...
区域下钻热力层（v1.x版本）
登入 DataV.GeoAtlas，获取得到浙江省范围的JSON数据（复制如下图所示API地址后打开该网址，另存为.json文件即可。登入 geojson.io 网站，单击左上角 Open>File，将获取到的浙江省范围的JSON数据添加到geojson.io右侧编辑框内。单击左上角 ...
基于GitHub公开事件数据集的离线实时一体化实践
已开通对象存储OSS并在ECS中安装ossutil工具，用于存储 GH Archive 提供的JSON数据文件，详情请参见 开通OSS服务 和 安装ossutil。已开通大数据计算服务MaxCompute并创建Project，详情请参见 创建MaxCompute项目。已开通大数据开发治理平台...
缓冲区管理
一种获取一致性位点的方法是遍历Buffer Pool中所有Buffer，找到最小值，但遍历代价较大，CPU开销和耗时都很大。为高效获取一致性位点，PolarDB 引入FlushList机制，将Buffer Pool中所有脏页按照Oldest LSN从小到大排序。借助FlushList，...
区域下钻热力层（v2.x版本）
登入 DataV.GeoAtlas，获取得到浙江省范围的JSON数据（复制如下图所示API地址后打开该网址，另存为.json文件即可。登入 geojson.io 网站，单击左上角 Open>File，将获取到的浙江省范围的JSON数据添加到geojson.io右侧编辑框内。单击左上角 ...
同步Redis后出现数据不一致
解决方法 建议可通过以下2种方法判断数据是否一致：说明 同步Redis数据的任务，若想看同步之后数据是否有丢失，需要看源数据keys是否已经过期。已过期的数据也会被统计到 expires 中，因此，不能单靠 expires 去判断数据的一致性。对比A...
Python SDK示例：Table
print(partition.name)#具体的遍历步骤，这里是打印分区名 for partition in table.iterate_partitions(spec='dt>20230119'):#遍历 dt>20230119 分区下的二级分区 print(partition.name)#具体的遍历步骤，这里是打印分区名 重要 PyODPS自0....
命令行界面
下载CLI 根据操作系统的不同，下载合适的二进制包，下载地址如下：macOS(amd64)Linux(amd64)Windows 解压下载的压缩包，进入到解压后的文件夹，可获得命令行工具 influx（Windows下为 influx.exe）。启动influx 在cmd终端启动 influx。成功...
Alink协议
非透传格式（Alink JSON）数据 序号 说明 1 设备通过非透传格式数据的Topic，上报透传数据。Topic说明，请参见 设备属性、事件、服务。1.1 物联网平台进行业务处理。若配置了规则引擎，则会根据数据流转规则，将数据流转到数据目的地（其他...
使用Aviator函数作为过滤器的最佳实践
本实践以Aviator函数及对应语法为例，为您介绍几种函数逻辑的编写示例。应用场景 如果将函数设置为API的前置过滤器，当API被调用时，函数可以对API的请求参数进行预先处理。如果将函数设置为API的后置过滤器，当API被调用时，函数可以对API...
JSON和JSONB类型
本文将为您介绍Hologres中JSON和JSONB数据类型的语法和使用方法。JSON和JSONB介绍 近年来随着移动端应用的普及，应用埋点、用户标签计算等场景开始诞生，为了更好的支撑这类场景，越来越多的大数据系统开始使用半结构化格式来存储此类数据...
JOIN优化和执行
JOIN是将多个表以某个或某些列为条件进行连接操作而检索出关联数据的过程，多个表之间以共同列关联在一起。本文主要介绍 PolarDB-X 如何优化和执行JOIN。基本概念 JOIN是SQL查询中常见的操作，逻辑上说，它的语义等价于将两张表做笛卡尔积...
TairDoc性能白皮书
TairDoc是一种文档类型的数据结构，类似RedisJSON模块，支持JSON标准。本文介绍TairDoc的性能测试方法及测试结果。TairDoc的主要特性如下：完整地支持JSON标准。部分兼容 JSONPath RFC draft-4标准。说明 仅JSON.GET命令支持。完整地支持 ...
Python 3 UDTF
返回值为GENERATOR类型，调用者以遍历方式获取表的内容，每次遍历可得到以数组形式存在的表中的一条记录。引用文件资源和表资源的代码示例如下。from odps.udf import annotate from odps.udf import BaseUDTF from odps.distcache import ...
复杂类型函数
JSON_FORMAT 将JSON数据转换成STRING类型，默认不自动进行美化。JSON_PARSE 将STRING类型转成JSON类型，非JSON格式转换为字符串会报错。JSON_VALID 检查字符串是否为合法的JSON格式。CAST 支持基本类型与JSON类型的转换。说明 以下函数示例...
RestAPI（HTTP形式）数据源
是 无 column 生成JSON数据对应的字段路径列表，type指定源数据的类型，name指定当前column数据放置的JSON路径。您可以指定column字段信息，配置如下。column":[{"type":"long","name":"a.b"/放置column数据到路径a.b},{"type":"string",...
分发消息
Y“”data object 通知给客户端带的信息，Android 下会把 JSON 数据遍历，然后把里面每一项的 Value 都转成 String 类型发送，请注意兼容数据格式。N-fn function 回调函数。N-出参 result:{success}：回调函数带入的参数。名称 类型 描述 ...
Python 2 UDTF
返回值为GENERATOR类型，调用者以遍历方式获取表的内容，每次遍历可得到以数组形式存在的表中的一条记录。引用文件资源和表资源的代码示例如下。coding:utf-8-*-from odps.udf import annotate from odps.udf import BaseUDTF from odps....
上传数据
本文介绍在我的数据页面中针对三种不同类型数据，上传不同格式数据的方法。背景信息 在管理数据页面中，数据的类型分为 矢量、栅格、地理服务、三维模型、三维瓦片 和 业务数据 六种。不同类型对应可上传的数据包括：矢量：在矢量页签内，...
上传数据
本文介绍在我的数据页面中针对三种不同类型数据，上传不同格式数据的方法。背景信息 在管理数据页面中，数据的类型分为 矢量、栅格、地理服务、三维模型、三维瓦片 和 业务数据 六种。不同类型对应可上传的数据包括：矢量：在矢量页签内，...
- 产品推荐
- 这些文档可能帮助您