2021年

2021-11-23 全部地域 清空分区数据 MaxCompute集成网易有数BI工具(商业化)发布 MaxCompute集成网易有数BI无缝对接,支持网易有数BI对MaxCompute直连场景下BI分析,同时可以支持可视化配置数据缓存时长,对数据进行缓存,以提高数据查询...

数据统计

发送数据 在邮件推送控制台左侧导航栏,单击 发送数据,进入发送数据展示页面。查看发送数据 选择 邮件标签、发信地址、起始时间 和 结束时间,然后单击 查询。说明:最多可查询7天的发信统计。您可以从邮件发送数据中,查看最多连续 7 天...

ListMessageMetrics-获取短信发送统计

Date string 发送日期。20210321 Fail integer 发送失败。0 Pending integer 发送中。0 Rate float 发送成功率。0.8 Success integer 发送成功。0 Total integer 总计短信数量。0 PageNumber integer 分页数,从 1 开始,默认为 1。1 ...

回收站列表

回收日期 数据表(包括逻辑表和物理表)在治理工作台中被删除后,会被移至回收站。您在治理工作台中删除数据表的时间即为回收站中的回收日期。操作日期 清除数据表的日期。回收状态 数据表的 回收状态。清除表 清除后的数据表不支持再次...

分区值格式说明

202304 表达式列表 系统变量 说明 示例${} 取业务日期数据,最小单位为天${yyyyMMdd},表示取前一天数据${yyyyMM-1},表示取前一个月数据$[]表达式取调度时间,最小运算单位为天$[yyyyMMdd HH-1/24],表示取调度时间前一小时数据${bizdate}...

使用SDK示例代码消费PolarDB-X 1.0订阅数据

完成数据订阅任务后,您可以使用DTS提供的SDK示例代码来订阅数据变更信息。本文介绍通过SDK示例代码消费分布式订阅数据,支持的数据源包括PolarDB-X 1.0和DMS LogicDB。前提条件 已安装JDK 1.8版本。已安装IntelliJ IDEA软件。注意事项 ...

使用SDK示例代码消费PolarDB-X 1.0订阅数据

完成数据订阅任务后,您可以使用DTS提供的SDK示例代码来订阅数据变更信息。本文介绍通过SDK示例代码消费分布式订阅数据,支持的数据源包括PolarDB-X 1.0和DMS LogicDB。前提条件 已安装JDK 1.8版本。已安装IntelliJ IDEA软件。注意事项 ...

查看任务流详情

补数据:通常情况下,对于离线周期任务,当前序任务失败或任务第一次上线,需要补录当前日期前业务日期数据时,需要发起补数据计划,具体操作请参见 在任务流中补数据。取消部署:取消部署,对任务流进行下线。在 部署/下线日志 页签下,可...

增量数据同步

无 取数规则 非必填,只针对日期数据做取数规则,其中yyyy表示4位的年份、yy表示2位的年份、mm(MM)表示月、dd表示天、hh24表示小时(12进制使用hh)、mi表示分钟、ss表示秒。您可以任意组合参数,例如$[yyyymmdd]、$[yyyy-mm-dd]、$[hh24...

教程概述

本案例的原理如下:在设备端模拟两个字段,通过MQTT协议向阿里云物联网平台设备(高级版)发送数据。物联网平台接收到数据后通过规则引擎转发至DataHub。在DataHub中通过DataConnector将数据同步到RDS MySQL数据库中。使用DataV将RDS MySQL...

新增离线数据同步任务

取数规则:只针对日期数据做取数规则,其中yyyy表示4位的年份、yy表示2位的年份、mm(MM)表示月、dd表示天、hh24表示小时(12进制使用hh)、mi表示分钟、ss表示秒。您可以任意组合参数,例如$[yyyymmdd]、$[yyyy-mm-dd]、$[hh24miss]、$...

新增离线数据同步任务

取数规则:只针对日期数据做取数规则,其中yyyy表示4位的年份、yy表示2位的年份、mm(MM)表示月、dd表示天、hh24表示小时(12进制使用hh)、mi表示分钟、ss表示秒。您可以任意组合参数,例如$[yyyymmdd]、$[yyyy-mm-dd]、$[hh24miss]、$...

ODS层设计规范

自主设置是否保留特殊日期数据。ODS镜像型全量表 按天分区 重要的业务表及需要保留历史的表视情况保存。ODS全量表的默认生命周期为2天,支持通过 ds=max_pt(tablename)方式访问数据。ODS增量表 按天分区 有对应全量表,最多保留最近14天...

组复制简介

特性 组复制 半同步复制 异步复制 数据可靠性★数据一致性 保证主备数据一致性 不保证 不保证 全局事务一致性 支持 不支持 不支持 数据 强 可靠性 组复制的数据强可靠性来源于Paxos协议的多数派原则,即当多数派收到事务的Binlog后,事务...

设计阶段

DWS层 汇总指标:自行选择保留月初、特定日期数据。设计加密技术:根据实际情况对敏感字段设计加密方案。Mapping设计 Mapping设计采用图形化或伪代码的形式编写规划以下内容:每个字段的生成逻辑。表与表之间的关系。目标字段与原字段间的...

使用SDK示例代码消费订阅数据

完成数据订阅通道的配置后,您可以使用DTS提供的SDK示例代码来订阅数据变更信息,本文介绍该示例代码的使用说明。操作步骤 重要 若数据源是PolarDB-X 1.0或DMS LogicDB,消费订阅数据的操作步骤请参见 使用SDK示例代码消费PolarDB-X 1.0...

入门概览

本文介绍 云原生多模数据库 Lindorm 时序引擎的使用流程,帮助您快速连接使用Lindorm时序引擎。操作流程 从创建Lindorm实例到Lindorm时序引擎的应用开发,您需要完成以下操作:创建Lindorm实例,创建时选择数据引擎为时序引擎,具体操作请...

使用SDK示例代码消费订阅数据

在完成数据订阅通道的配置(创建好订阅任务和消费组)后,您可以自行编写SDK示例代码或使用DTS提供的SDK示例代码来订阅数据变更信息,本文介绍示例代码的使用方法。操作步骤 重要 如果数据源是PolarDB-X 1.0或DMS LogicDB,消费订阅数据的...

日期数据格式转换:STRING、TIMESTAMP、DATETIME互相...

日期数据格式转换常见场景如下:STRING转换为TIMESTAMP STRING转换为DATETIME TIMESTAMP转换为STRING TIMESTAMP转换为DATETIME DATETIME转换为TIMESTAMP DATETIME转换为STRING STRING转换为TIMESTAMP 应用场景 将STRING类型数据转换为...

基于MaxCompute实现拉链表

有效开始日期 数据版本的有效开始时间。有效结束日期 数据版本的有效结束时间。通常用一个极大值“9999-12-31”表示当前数据有效。状态标识符 标识是否为最新版本。版本 标识相同业务主键的不同历史版本号。说明 本文主要展示拉链表的实现...

行协议写入

对于通过行协议发送数据的应用或设备,都可以将数据写入Lindorm时序引擎中。支持的数据类型 行协议写入语法的数据类型包括Float、Integer、String、Boolean和Timestamp。数据类型说明参见下表。数据类型 说明 Float 默认解析类型,例如:1...

Join优化

表S数据不移动,表R数据根据分区计算的结果发送到S表扫表的节点 Colocation Join 对于多个相关联的表,在建表时确保表的数据分片数量一致,相同Hash分桶在分布式系统中的分布一致,那么实际查询时就可以跳过数据的Shuffle过程,直接进行...

集成组件库开发说明

Dataphin数据集成的离线管道功能为您提供可视化组件的开发方式。创建离线管道脚本后,您可以通过多样性的组件库拖拽所需模块进行开发。可视化组件开发方式不仅能降低开发难度和效率,还方便您快速梳理来源与去向数据源。本文为您介绍如何...

SDK接口

本文为您介绍流式数据通道SDK接口的使用方法。使用说明 您可以基于MaxCompute Studio通过Java SDK使用MaxCompute流式数据通道服务。您可以使用以下配置在MaxCompute Studio上添加指定版本的pom依赖。groupId>...

流式读写

本文介绍Delta Lake作为数据源和数据接收端如何流式读写数据。Delta Table作为数据源(Source)spark.readStream.format("delta").option("maxFilesPerTrigger",1000).load("/tmp/delta_table")maxFilesPerTrigger 指定了一个批次最多处理...

ETL工作流快速体验

OSS 数据集成 数据开发 基础版 基于GitHub Archive公开数据集,通过DataWorks 数据集成 模块获取过去1小时GitHub中提交次数最多的代码语言数据,在DataStudio 数据开发 模块通过函数计算节点周期调度实现将处理后的数据发送至用户预设的...

Bucket Shuffle Join

本文介绍 云数据库 SelectDB 版 支持通过Bucket Shuffle Join进行查询优化,能够减少数据在节点间的传输耗时和Join时的内存开销,进而优化查询性能。功能简介 Bucket Shuffle Join旨在为某些Join查询提供基于本地的优化,减少数据在节点间...

重要组件

由于多个主机的数据库实例需要访问块存储上的同一份数据,常用的Ext4等文件系统不支持多点挂载,PolarDB数据库团队自行研发了专用的用户态文件系统,提供常见的文件读写查看接口,支持类似O_DIRECT的非缓存方式读写数据,还支持数据页原子...

查询和修改数据复制方式

MySQL 5.6高可用系列 MySQL 5.7、8.0集群系列 MySQL 5.5 复制方式介绍 组复制(MySQL Group Replication,MGR)组复制基于分布式一致性协议(Paxos),事务在主节点提交之前,会将事务的数据发送到各个备节点上,确保超过半数备节点收到...

深度解析PolarDB数据库并行查询技术

如何将查询并行起来 对于一个类OLAP的查询,它通常是对大批量数据的查询,数据量大意味着数据远大于数据库的内存容量,大部分数据可能无法缓存到数据库的缓冲区中,而必须在查询执行时才动态加载到缓冲区中,这样就会造成大量IO操作,而IO...

发送量统计

短信发送数据支持根据短信签名、模板类型、短信模板名称筛选指定日期区间的短信发送记录。在 短信发送数据详情 区域,您可以查看当天的 发送条数(总)、发送成功(条)、发送失败(条)、已发送未回执(条)以及 发送成功率。如果有短信...

JDBC 连接池配置示例

在使用 JDBC 进行数据库连接的时候,需要配置相关参数来获得数据库使用的最佳性能。这里推荐一些相关参数的配置。JDBC 连接示例如下:conn=jdbc:oceanbase:/xxx.xxx.xxx.xxx:1521?rewriteBatchedStatements=TRUE&allowMultiQueries=TRUE&...

附录:周期任务补数据

按周期:用于需要回刷多个连续业务日期内每周中星期或每月中的日期数据。每周:回刷连续时间内每周所选中的星期。每月:回刷连续时间内每月所选中的日期。说明 月末指每月的最后1天。自定义:适用于需要回刷多个不连续业务日期的数据。您...

创建报警规则

您可以通过 PolarDB 控制台创建报警规则,帮助您及时了解 PolarDB 集群、数据库代理或计算节点的监控数据异常并快速进行处理。操作步骤 登录 PolarDB控制台。在控制台左上角,选择集群所在地域。找到目标集群,单击集群ID。在左侧导航栏中...

修改报警规则

当已有报警规则不能满足您指定云产品的监控指标的报警需求时,您可以根据所需修改报警...取值:不做任何处理(默认值)发送数据报警 视为恢复 说明 单击 高级设置,可设置该参数。标签 报警规则的标签。包括标签名称和标签值。单击 确定。

设置报警规则

您可以为 AnalyticDB MySQL版 集群设置报警规则,实时监控集群CPU使用率、磁盘使用率、IOPS使用率、查询耗时以及数据库连接数。系统在监控数据满足条件时,会通知报警联系组中的所有联系人。背景信息 云原生数据仓库AnalyticDB MySQL版 ...

设置阈值报警规则

数据库MongoDB支持为实例的重要监控项设置阈值报警规则。当监控项的值不在设置的阈值范围内时,系统会自动向你发出报警通知,提醒您数据异常,帮助您快速定位问题并进行处理。本文介绍在MongoDB控制台设置阈值报警规则的方法。操作步骤 ...

NOTIFY

简介 NOTIFY 命令发送一个通知事件以及一个可选的“载荷”字符串给每个正在监听的客户端应用,这些应用之前都在当前数据库中为指定的频道名执行过 LISTEN channel。通知对所有用户都可见。NOTIFY 为访问同一个PolarDB数据库的进程集合提供...

产品概述

什么是全密态数据库 全密态数据库是数据库与存储实验室与阿里云数据库团队合作的自研产品,以技术为基石,最小化人员、平台管理等不可控因素造成的潜在数据安全隐患,可以有效杜绝云数据库服务(或应用服务等数据拥有者以外的任何人)接触...

产品概述

什么是全密态数据库 全密态数据库是 达摩院数据库与存储实验室 与阿里云数据库团队合作的自研产品,以技术为基石,最小化人员、平台管理等不可控因素造成的潜在数据安全隐患,可以有效杜绝云数据库服务(或应用服务等数据拥有者以外的任何...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
云数据库 RDS 数据库备份 云数据库 Redis 版 数据传输服务 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用