概述
实时计算Flink版支持在Flink SQL作业中使用Java自定义函数，本文介绍Flink Java自定义函数的分类、参数传递及调用注意事项。注意事项 为了避免JAR包依赖冲突，在开发自定义函数时您需要注意以下几点：SQL开发页面选择的Flink版本，请和Pom...
GroupBySorter
表示分组中的item排序规则。三种不同排序中选择一种即可，默认是按照row_count_sort排序。数据结构 message GroupBySorter { optional GroupKeySort group_key_sort=1;...sub_agg_sort SubAggSort 否 按照某个子统计聚合排序的排序规则。
阿里云Elasticsearch实例FAQ
本文列举了阿里云Elasticsearch（ES）相关的常见问题，包括购买、退订、配置、访问、查询、写入、插件、分词、日志、重启、负载或状态异常、备份与恢复、监控报警等相关问题。常见问题概览 购买或退订实例问题 购买ES实例时选错配置，如何...
SubAggSort
按照某个子统计聚合结果排序的排序规则。数据结构 message SubAggSort { optional string sub_agg_name=1;optional SortOrder order=2;} 名称 类型 是否必选 描述 sub_agg_name string 是 子统计聚合名称。order SortOrder 是 子统计聚合...
查询概述
在查询功能方面，不论是简单的单表过滤、排序、聚合操作，还是复杂的多表关联、子查询、窗口函数等，SelectDB都可以通过SQL轻松完成，极大地降低了使用成本。查询进阶 查询加速 为了提供极致的数据分析服务，SelectDB中采用了查询优化技术...
通过Java SDK上报监控数据（推荐）
您可以先在本地通过Java SDK聚合数据，再通过Java SDK上报监控数据。聚合周期为60秒或300秒。安装Java SDK 通过Maven安装Java SDK，需要添加的依赖如下：<dependency><groupId>...
DataFrame概述
排序、去重、采样、数据变换：本文为您介绍DataFrame对象执行排序、去重、采样、数据变换操作。数据合并：本文向您介绍DataFrame支持的数据表的JOIN操作、UNION操作等数据合并操作。窗口函数：本文为您介绍DataFrame API支持使用窗口函数。...
API调用特殊参数说明
数据资源平台提供了一系列内置的请求参数，在API的调用过程中，您可以通过这些特殊的请求参数，在数据API原有的查询逻辑上添加聚合、排序、过滤返回字段等等额外的逻辑，或者在返回结果里透出额外的信息字段等。本文为您介绍API调用的一些...
API调用特殊参数
我们提供了一系列内置的请求参数，在API的调用过程中，用户可以通过这些特殊的请求参数，在数据API原有的查询逻辑上添加聚合、排序、过滤返回字段等等额外的逻辑，或者在返回结果里透出额外的信息字段等等。使用场景 交管云控平台使用 数据...
API调用特殊参数
我们提供了一系列内置的请求参数，在API的调用过程中，用户可以通过这些特殊的请求参数，在数据API原有的查询逻辑上添加聚合、排序、过滤返回字段等等额外的逻辑，或者在返回结果里透出额外的信息字段等等。使用场景 交管云控平台使用 企业...
计算下推
多元索引提供了条件过滤、聚合、排序等功能，在创建多元索引后，使用SQL查询时，系统能够充分利用多元索引的计算能力，将部分SQL计算任务下推到多元索引执行，避免全表扫描，提高计算效率。前提条件 已创建多元索引。具体操作，请参见 创建...
BI分析模式数据面板功能介绍
设定地理角色的字段无法进行聚合/排序）说明 字段类型配置详情请参见 添加数据集。配置图表映射字段样式 当 图表配置 区域中的字段右侧有 图标时，您可以单击该图标展开样式面板，配置对应字段的映射样式。图表配置中的大小、颜色、形状...
对接Kibana
sudo docker run-d-name es-p 9200:9200 \-e"discovery.type=single-node"\-e"ES_JAVA_OPTS=-Xms2G-Xmx2G"\-e ELASTIC_USERNAME=elastic \-e ELASTIC_PASSWORD=passwd \-e xpack.security.enabled=true \-v/data:/usr/share/elasticsearch/...
配置图表字段
排序 不排序、升序、降序、组内升序、组内降序、自定义、字段排序、高级排序。选择自定义排序时，您可以拖动目标字段至指定区域。高级计算 无、TopN。请参见 TopN。空值展示样式 支持设置 空值 或空 字符串 的展示样式。空值：自动：将跟随...
查询计划概述
通用物理算子 Lindorm SQL实现了一套通用物理算子供优化器生成物理计划，包括查询中诸如排序、聚合、投影、运算等通用计算行为。以下是查询中常见的物理算子：EnumerableLimit算子 通用LIMIT算子，基于用户指定的OFFSET和LIMIT对结果集数据...
交叉表
高级排序：高级排序一般适用于聚合表和明细表。行维度和列维度的指标均支持高级排序。聚合计算：支持求和、平均值、计数、去重计数、最大值、最小值、总体标准差、样本标准差、总体方差、样本方差、开始时间点、最后时间点。开始时间点：您...
数据索引
通过数据索引功能，您可以在查找目标Object时指定过滤条件，对查询结果按需选择排序和聚合的方式，提升查找目标Object的效率。注意事项 仅Java SDK 3.1.6.0及以上版本支持使用数据索引功能。仅华东1（杭州）以及澳大利亚（悉尼）地域的...
fielddata内存使用率高问题的排查与处理方法
解决方案：Elasticsearch官方文档 中指出禁止对_id 进行聚合、排序和脚本操作，建议将_id 数据复制到开启 doc_values 的字段进行对应操作。Kibana Discover通过_id 查询数据时，下拉提示功能会自动触发聚合。建议在 Kibana>StackManagement...
概述
实时计算Flink版支持在Flink SQL作业中使用Python自定义函数，本文为您介绍Flink Python自定义函数的分类、Python依赖使用方法和能调优方式。自定义函数分类 分类 描述 UDSF（User Defined Scalar Function）...使用UDAF实现数据排序和聚合。
分析视图简介
此外还提供了按实现内存占用大小排序的 Java 类型饼图,帮助用户快速定位占用内存最多的类型。对象报表 以可视化的形式列出堆中哪些对象最多，占比最大，哪些可能有潜在问题 类报表 以可视化的形式列出堆中哪些类型的对象最多，占比最大，...
附录：字段和操作符的支持列表
本文介绍了简单查询条件、聚合操作以及排序操作中支持的字段（Field）和操作符（Operation），以及字段对相应操作符的支持情况。注意事项 简单查询条件中支持使用的操作符包括eq（等于）、gt（大于）、gte（大于等于）、lt（小于）、lte...
并发导出数据
ParallelScan接口相对于Search接口，保留了所有的查询功能，但是舍弃了排序、统计聚合等分析功能，从而带来了5倍以上的性能提升，因此使用ParallelScan接口可以实现1分钟内上亿级别数据行的导出能力，导出能力可以水平扩展，不存在上限。...
搜索索引介绍
云原生多模数据库 Lindorm 宽表引擎除了支持高性能原生二级索引，也支持一种新的索引类型，称为搜索索引（SearchIndex），搜索索引主要面向复杂的多维查询场景，能够覆盖分词、模糊查询、聚合分析、排序翻页等场景。本文介绍搜索索引的功能...
管理自定义函数（UDF）
注意事项 当RAM用户或RAM角色等其他身份需要进行管理自定义函数（UDF）等相关操作时，请确保其具有目标项目空间的访问权限，详情请参见 项目空间授权。为了避免JAR包依赖冲突，在开发自定义函数时您需要注意...使用UDAF实现数据排序和聚合。
统计聚合
使用统计聚合功能可以实现求最小值、求最大值、求和、求平均值、统计行数、去重统计行数、百分位统计、按字段值分组、按范围分组、按地理位置分组、按过滤条件分组、直方图统计、日期直方图统计、获取统计聚合分组内的行、嵌套查询等；...
开源Elasticsearch FAQ
说明 doc_values是专为排序、聚合和脚本操作优化的列存储格式。text类型字段，默认情况下不支持聚合。如果您需要对text字段进行聚合，必须在映射中启用fielddata。说明 开启fielddata会显著增加内存使用，因为它会把所有的文本数据加载到...
使用UDAF实现数据排序和聚合
本文提供了一个自定义聚合函数（UDAF），实现将多行数据合并为一行并按照指定列进行排序，并以居民用电户电网终端数据为例，介绍如何在实时计算控制台使用该函数进行数据聚合和排序。示例数据 居民用电户电网终端数据表electric_info，包括...
统计聚合
使用统计聚合功能可以实现求最小值、求最大值、求和、求平均值、统计行数、去重统计行数、百分位统计、按字段值分组、按范围分组、按地理位置分组、按过滤条件分组、直方图统计、日期直方图统计、获取统计聚合分组内的行、嵌套查询等；...
FieldSchema
只有开启排序与统计聚合功能的字段才能进行排序。store bool 否 是否在多元索引中附加存储该字段的值。开启后，可以直接从多元索引中读取该字段的值，而不必反查数据表，可用于查询性能优化。field_schemas repeated FieldSchema 否 字段...
ALIYUN:OTS:SearchIndex
EnableSortAndAgg Boolean 否 否 是否开启排序与统计聚合功能。取值：true：开启排序与统计聚合功能。false：关闭排序与统计聚合功能。Store Boolean 否 否 是否在多元索引中附加存储该字段的值。取值：true：附加存储该字段的值。false：...
创建多元索引
重要 Nested类型的字段不支持开启排序与统计聚合功能，但是Nested类型内部的子列支持开启排序与统计聚合功能。Store（可选）：是否在多元索引中附加存储该字段的值，类型为Boolean。开启后，可以直接从多元索引中读取该字段的值，而不必...
创建多元索引
重要 Nested类型的字段不支持开启排序与统计聚合功能，但是Nested类型内部的子列支持开启排序与统计聚合功能。store（可选）：是否在多元索引中附加存储该字段的值，类型为Boolean。开启后，可以直接从多元索引中读取该字段的值，而不必...
多元索引介绍
查询功能：非主键列查询、全文检索、前缀查询、模糊查询、多字段自由组合查询、嵌套查询、地理位置查询 折叠（去重）排序 统计聚合 数据总行数 ComputeSplits+ParallelScan 多并发数据导出接口，支持多元索引中的查询功能，不支持排序、...
创建多元索引
重要 Nested类型的字段不支持开启排序与统计聚合功能，但是Nested类型内部的子列支持开启排序与统计聚合功能。Store（可选）：是否在多元索引中附加存储该字段的值，类型为Boolean。开启后，可以直接从多元索引中读取该字段的值，而不必...
聚集函数
No percentile_disc(fraction double precision)WITHIN GROUP(ORDER BY anyelement)→anyelement 计算 离散百分比（discrete percentile），即聚合参数值的有序集合中的第一个值，该值在排序中的位置等于或超过指定的 fraction。聚合参数...
内建函数概述
复杂类型函数 支持处理MAP、ARRAY、STRUCT及JSON类型数据，实现去重元素、聚合元素、元素排序、合并元素等业务处理能力。其中JSON函数的使用限制请参见 JSON函数的使用限制。加密函数 支持处理STRING、BINARY类型的表数据，实现加密、解密...
创建多元索引
重要 Nested类型的字段不支持开启排序与统计聚合功能，但是Nested类型内部的子列支持开启排序与统计聚合功能。store（可选）：是否在多元索引中附加存储该字段的值，类型为Boolean。开启后，可以直接从多元索引中读取该字段的值，而不必...
SQL性能问题
LocalGlobal优化针对普通聚合（例如SUM、COUNT、MAX、MIN和AVG）有较好的效果，对于COUNT DISTINCT收效不明显，因为COUNT DISTINCT在Local聚合时，对于DISTINCT KEY的去重率不高，导致在Global节点仍然存在热点问题。适用场景 使用COUNT ...
多元索引
重要 Nested类型的字段不支持开启排序与统计聚合功能，但是Nested类型内部的子列支持开启排序与统计聚合功能。Store（可选）：是否在多元索引中附加存储该字段的值，类型为Boolean。开启后，可以直接从多元索引中读取该字段的值，而不必...
创建多元索引
重要 Nested类型的字段不支持开启排序与统计聚合功能，但是Nested类型内部的子列支持开启排序与统计聚合功能。store（可选）：是否在多元索引中附加存储该字段的值，类型为Boolean。index_setting 索引设置，包含routing_fields设置。...
- 产品推荐
- 这些文档可能帮助您