产品优势
产品优势 海量并发 支持十万核级别并发规模。自动高效完成数据分发和计算调度。弹性伸缩 根据作业需求动态分配计算资源。支持任务依赖关系（DAG），轻松组建工作流。I/O优化 独有数据分布式缓存技术，极大加速大规模共享数据分发。直接挂载...
查询加速
支持 支持 并发计算会将Query拆分成多个小Query并调度到多个子计算节点执行，最后在主计算节点上汇聚结果。mode 并发选择模式，说明如下：auto：根据最近几次执行的情况自动选择并发度。static：手动配置时间分片和并发度。支持 不支持 ...
不同性能压测工具对比
支持 不支持，需自己实现 不支持 不支持 是否支持使用函数生成或者二次加工压测数据 支持 支持 不支持 不支持 压测模型构造 是否支持并发模型 支持 支持 支持 支持 是否支持吞吐量模型 支持 不支持 支持 支持 是否支持流量漏斗模型 支持 不...
性能压测
支持 不支持，需自己实现 不支持 不支持 是否支持使用函数生成或者二次加工压测数据 支持 支持 不支持 不支持 压测模型构造 是否支持并发模型 支持 支持 支持 支持 是否支持吞吐量模型 支持 不支持 支持 支持 是否支持流量漏斗模型 支持 不...
MySQL四种能规避因数据库变更导致锁表问题的功能
RDS for MySQL Online DDL使用 RDS for MySQL表上Metadata Lock的产生和处理 Online DDL操作（5.7）Online DDL操作（5.6）MySQL 5.7 Online DDL Limitations MySQL 5.6 Online DDL Limitations PT-OSC 支持并发DML。支持避免Slave复制延迟...
新功能发布记录
含WaitFor、CheckFor的任务支持输出 WaitFor的任务支持重试策略及终止的字段 任务循环的并发支持分批处理 2019-08 全部 通知ACS:Notify ACS:WaitFor ACS:CheckFor 任务（Task）任务循环 新支持地域 发布时间 华北2（北京）、华北5...
并发导出数据
重要 表格存储 Java SDK从5.6.0版本开始支持并发导出数据功能。使用并发导出数据功能时，请确保获取了正确的Java SDK版本。关于Java SDK历史迭代版本的更多信息，请参见 Java SDK历史迭代版本。背景 多元索引中提供了Search接口，Search...
2017年
本文为PTS在2017年的功能发布记录，介绍发布的特性变更情况。2017年07月 发布全链路压测云上版本PTS铂金版，优势如下：无限接近真实的流量：业务场景中无论是高并发...多维度施压：支持并发和RPS双维度。压力动态调整：支持压测能力动态修改。
RDS MySQL Online DDL 使用
重命名列 支持 不需要 允许 允许 如果仅仅修改字段名称，而不要修改字段类型，是支持并发DML操作的。添加列 支持 需要 允许 允许 在添加auto_increment自增列时，是不允许并发 DML 操作的。尽管支持Algorithm=INPLACE，但因为数据实质上...
RDS MySQL Online DDL 使用
重命名列 支持 不需要 允许 允许 如果仅仅修改字段名称，而不要修改字段类型，是支持并发DML操作的。添加列 支持 需要 允许 允许 在添加auto_increment自增列时，是不允许并发 DML 操作的。尽管支持Algorithm=INPLACE，但因为数据实质上...
并发导出数据
重要 表格存储 Java SDK从5.6.0版本开始支持并发导出数据功能。使用并发导出数据功能时，请确保获取了正确的Java SDK版本。关于Java SDK历史迭代版本的更多信息，请参见 Java SDK历史迭代版本。前提条件 已初始化OTSClient。具体操作，请...
资源组说明
系统资源组-数据同步Worker，支持并发数为1，单个离线同步任务支持的最大资源为1c1g，不支持实时同步。自定义资源组 用户可将自有K8s注册到弹性计算中，按内置应用模板，部署后注册成资源组。自定义资源组性能基线参考典型场景：小型数据...
资源组说明
系统资源组-数据同步Worker，支持并发数为1，单个离线同步任务支持的最大资源为1c1g，不支持实时同步。自定义资源组 用户可将自有K8s注册到弹性计算中，按内置应用模板，部署后注册成资源组。自定义资源组操作指南参见 创建自定义资源组。...
计费方式与价格说明
如，选购的推荐请求QPS配额等于60次/秒，则默认弹性空间等于60次/秒，即可支持并发请求的峰值为120次/秒。您也可以根据实际业务情况将弹性空间的60次/秒，调整为50次/秒，40次/秒，30次/秒等等。如果您的业务类型比较特殊，希望将弹性空间...
同步时源库为MongoDB的注意事项及限制
若目标集合存在唯一索引或目标集合的 capped 属性为 true 时，则在增量同步阶段该集合不支持并发回放（只支持单线程写入），从而可能会导致任务延迟增高。不保留事务信息，即源库中的事务同步到目标库时会转变为单条的记录。执行数据同步前...
流量控制与配额管理
对于支持并发数量小的云产品，若单个用户产生大量并发请求，可能会导致其他用户访问云服务速度慢、甚至不可访问等问题。保障 OpenAPI 服务稳定性 若在 OpenAPI 网关不知情的情况下，用户对单个接入点的接口进行高频次的调用，会导致网关的...
配置自动调优
动态参数更新下业务中断时间较之作业整体重启缩小30%-98%，具体依赖于作业状态和逻辑，目前仅支持并发的修改。详情请参见 动态更新作业参数。如果您使用了DataStream作业或SQL自定义的连接器，请确认作业代码中未配置作业并发度，否则智能...
通过image-syncer工具迁移容器镜像
支持并发同步。可以通过配置文件调整并发数。支持自动重试失败的同步任务，解决大部分镜像同步中的网络抖动问题。不依赖Docker以及其他程序。通过使用image-syncer，只需要保证image-syncer的运行环境与需要同步的registry网络连通，您可以...
通过image-syncer工具迁移容器镜像
支持并发同步。可以通过配置文件调整并发数。支持自动重试失败的同步任务，解决大部分镜像同步中的网络抖动问题。不依赖Docker以及其他程序。通过使用image-syncer，只需要保证image-syncer的运行环境与需要同步的registry网络连通，您可以...
迁移时源库为MongoDB的注意事项及限制
若目标集合存在唯一索引或目标集合的 capped 属性为 true 时，则在增量迁移阶段该集合不支持并发回放（只支持单线程写入），从而可能会导致任务延迟增高。不支持迁移admin和local库中的数据。不保留事务信息，即源库中的事务迁移到目标库时...
新建补数据任务
说明 所选节点中存在跨周期依赖时不支持并发运行。补数据顺序 可选择根据业务时间正序或倒序进行补数据。说明 所选节点中存在跨周期依赖时不支持按业务日期倒序补数。本节点是否空跑 选择本任务是否需要空跑：是：当前任务对应的补数据实例...
PolarDB MySQL版DDL操作指南
相反，不支持Online DDL功能的语句会全程锁表，不支持并发的写入操作，当DDL操作持续时间较长时，可能会对业务操作造成重大影响。是否重建表（持续时间长短）：此类DDL需要根据新的表结构重新创建Primary Key以及所有二级索引，通常需要...
新建补数据任务
说明 所选节点中存在跨周期依赖时不支持并发运行。补数据顺序 可选择根据业务时间正序或倒序进行补数据。说明 所选节点中存在跨周期依赖时不支持按业务日期倒序补数。本节点是否空跑 选择本任务是否需要空跑：是：当前任务对应的补数据实例...
周期任务补数据
说明 所选节点中存在跨周期依赖时不支持并发运行。补数据顺序 可选择根据业务时间正序或倒序进行补数据。说明 所选节点中存在跨周期依赖、自依赖时不支持业务日期倒序补数据。暂停调度任务对应实例 配置暂停调度的任务生成的补数据实例的...
周期任务补数据
说明 所选节点中存在跨周期依赖时不支持并发运行。补数据顺序 可选择根据业务时间正序或倒序进行补数据。说明 所选节点中存在跨周期依赖、自依赖时不支持业务日期倒序补数据。暂停调度任务对应实例 配置暂停调度的任务生成的补数据实例的...
事务管理
对于部分高频的操作，会结合它的语义，在保障正确性的前提下，单独设计优化了事务冲突逻辑，来更好支持并发控制。比如对于Clustering操作和Insert into并发执行，即使事务Start和Commit时间出现交叉也不会冲突失败，因为Clustering操作虽然...
Presto
支持并发执行多条SQL。支持参数功能。支持图表展示SQL结果。示例 多行SQL 如下图所示，在一个段落里执行2句SQL语句（以分号间隔），第一句切换database，第二句运行Select语句。注释 以-开头的均为SQL注释。参数功能 Zeppelin支持${var=...
FTP数据源
多个File可以支持并发读取。单个File支持多线程并发读取，此处涉及到单个File内部切分算法。单个File在压缩情况下，从技术上无法支持多线程并发读取。FTP Writer实现了从数据集成协议转为FTP文件功能，FTP文件本身是无结构化数据存储。目前...
Hive
支持并发执行多个段落。支持参数功能。支持图表展示SQL结果。示例 多行SQL 如下图所示，在一个段落里执行2句SQL语句（以分号间隔），第一句切换执行引擎，第二句运行Select语句。注释 以-开头的均为SQL注释。参数功能 Zeppelin支持${var=...
Hudi存储
分区级生命周期管理 支持设置多种策略，如按分区数、按数据量和按过期时间策略管理分区数据生命周期，同时支持并发设置生命周期管理策略，进一步降低存储成本。异步Table Service 支持异步Table Service服务，与写入链路完全隔离，对写入...
MySQL
MySQL CDC源表支持并发地读取全量数据，通过增量快照算法实现了全程无锁和断点续传，详情可参见 关于MySQL CDC源表。作为源表，支持以下功能特性。流批一体，支持读取全量和增量数据，无需维护两套流程。支持并发读取全量数据，性能水平...
EMR-5.5.x版本说明
支持并默认开启自动Vacuum，支持并发Vacuum。优化了自动Compaction的逻辑，默认关闭。新增Zorder语法，并加速了Zorder的处理过程。Hudi 升级至0.10.0版本。支持Spark 3.2.0版本。支持JindoFS Block模式。HDFS 适配JindoSDK。YARN 适配RSS...
Postgres CDC（公测中）
支持并发读取全量数据，性能水平扩展。全量读取无缝切换增量读取，自动缩容，节省计算资源。全量阶段读取支持断点续传，更稳定。无锁读取全量数据，不影响线上业务。前提条件 Postgres CDC连接器通过PostgreSQL数据库的 逻辑复制 读取CDC...
基于镜像的日常发布
创建执行，选择实例，这里可以手动选择实例也可以按tag来，我之前已经给机器打好了标签env:test这里就用tag来操作，批次控制支持并发执行和分批执行，这两个的区别是并发执行永远保持n个运行中的，而分批执行是执行完第一批再执行第二批，...
OSS数据源
多个Object可以支持并发读取。单个Object（File）不支持多线程并发读取。单个Object在压缩情况下，从技术上无法支持多线程并发读取。单个Object（File）不超过100 GB。重要 准备OSS数据时，如果数据为CSV文件，则必须为标准格式的CSV文件。...
OSS-HDFS数据源
多个File可以支持并发读取。重要 OSS-HDFS Reader暂不支持单个File多线程并发读取，此处涉及到单个File内部切分算法。离线写 使用OSS-HDFS Writer时，请注意以下事项：目前OSS-HDFS Writer仅支持text、orc和parquet三种格式的文件，且文件...
任务循环
任务循环支持并发，不过单步模式执行下循环的任务则自动调整为依次执行无并发。限制 Loop Items的个数限制当前最大为1000个。语法 YAML语法结构-Tasks:Name:TaskName1#必填，任务名称，有效字符为[a-zA-Z0-9_-]，即英文字母数字下划线中...
HDFS数据源
多个File可以支持并发读取。CSV类型支持压缩格式有gzip、bz2、zip、lzo、lzo_deflate和snappy。目前插件中Hive版本为1.1.1，Hadoop版本为2.7.1（Apache适配JDK1.6］，在Hadoop 2.5.0、Hadoop 2.6.0和Hive 1.2.0测试环境中写入正常。重要 ...
SmartData常见问题
针对百万千万级文件数的大目录，JindoFS支持并发访问和内存优化，不会出现OOM（Out Of Memory）或者挂起。JindoFS是如何保证数据可靠性的？因为JindoFS无论使用哪种方式，数据都存放在OSS上，本地磁盘只缓存数据，所以数据可靠性是由OSS来...
ossimport概述
支持并发数据下载和上传。计费说明 ossimport工具本身不收费。在公有云情况下，数据源可能会产生公网流出流量、请求等费用，目的端为OSS会产生请求费用等。如果OSS开通和使用了传输加速，还会产生传输加速的费用。注意事项 迁移速度 ...
- 产品推荐
- 这些文档可能帮助您