出错提示S12数据同步密钥获取出错
本文主要介绍在使用SMC迁移时，迁移任务出错提示“S12_*数据同步密钥获取出错”的问题描述、问题原因及其解决方案。问题描述 在SMC迁移时，迁移任务出错提示“S12_*数据同步密钥获取出错”。其中S12_*可能的错误码如下：S12_U28 S12_U7 S12...
ASP.NET程序网站如何在多个站点之间实现Session共享
不论用户访问哪台Web服务器，都要来这台服务器获取Session数据，那么就能够实现共享Session数据了。缺点是依赖性太强，如果NFS服务器异常，那么所有用户登录都会出现异常。当然，可以考虑多台NFS服务器同步的形式。这个方案都可以解决，...
API概览
通用服务 API 标题 API概述 GetRegionStatus 获取数据湖构建服务开通状态 获取数据湖构建指定地域的服务开通状态。GetServiceStatus 获取某个用户的服务开通状态 获取数据湖构建某个用户的服务开通状态。DescribeRegions 获取开通的地区 ...
客户端FAQ
常见问题 Q：JDBC读取数据报错：java.lang.NumberFormatException:For input string:"xxxx"A：尝试按照普通数据类型解析密文数据，例如 getInt/getBigDecimal/getBoolean/getLong/getFloat/getDouble，由于密文不符合普通数据类型格式要求...
使用列索引加速ETL
PolarDB 支持ETL（Extract Transform Load）功能，开启该功能后，您可以在RW节点上使用列存索引，RW节点的SQL语句中的 SELECT 请求会发送至只读列存节点并使用列存索引功能进行加速查询，读取数据后，PolarDB 会通过内部网络将数据传回RW...
查询诊断
您也可以根据需求选择按照占用内存、磁盘读取数据量、磁盘读取数据耗时、网络传输数据量、网络传输数据耗时对算子排序以及计算整体比例。算子统计信息介绍如下：名称 说明 算子名称 算子名称与编号，在计划树中唯一。类型ID 算子类型编号。...
API概览
GetDataArchiveCount 获取数据归档工单量统计 获取数据归档工单量统计，包括：归档成功的工单数目，归档失败的工单数目，正在进行归档的工单数目，归档工单的总数目。SQL任务 API 标题 API概述 ListDBTaskSQLJob 获取SQL任务列表 获取SQL...
数据源读取时间超时的优化思路
DataV组件直接查询结果表的数据，不需要在每次组件获取数据时，再次执行SQL查询。API接口内部业务调用链路较长，查询超时 为API服务设计缓存空间，针对常用的数据进行高效缓存，减少多次调用读取耗时。优化调用链路，将可以并行调用的过程...
读数据表
用途 读数据表 算子用于从数据源中读取数据，作为下游节点输入数据的来源。适用场景 计算链路 计算引擎 是否支持 离线 MaxCompute 是 Hive 是 HiveStorage 是 RDS/MySQL 是 使用说明 选择计算资源 选择需要读取的数据源，支持的数据源类型...
数据源读取时间超时的优化思路
DataV组件直接查询结果表的数据，不需要在每次组件获取数据时，再次执行SQL查询。API接口内部业务调用链路较长，查询超时 为API服务设计缓存空间，针对常用的数据进行高效缓存，减少多次调用读取耗时。优化调用链路，将可以并行调用的过程...
配置AnalyticDB for PostgreSQL输入组件
表 选择数据同步的来源表：如果 来源表量 选择了 单表，在下拉列表中选择读取数据的表。如果 来源表 选择了 多表，则按照下图操作指引，添加读取数据的多个表。在①处配置筛选多表的表达式，连续多个表的格式如 table[A-Z]、table_[01-05]...
配置AnalyticDB for PostgreSQL输入组件
表 选择数据同步的来源表：如果 来源表量 选择了 单表，在下拉列表中选择读取数据的表。如果 来源表 选择了 多表，则按照下图操作指引，添加读取数据的多个表。在①处配置筛选多表的表达式，连续多个表的格式如 table[A-Z]、table_[01-05]...
读取OSS数据
如果直接使用OSS外部表，每次读取数据都涉及OSS的I/O操作，且MaxCompute本身针对内部存储设计的许多高性能优化都无法应用，因此性能上会有所损失。如果您需要对数据进行反复计算或对计算的高效性比较敏感，推荐先在MaxCompute项目中创建...
Query Profile介绍
LocalDiskReadIOTime 从本地缓存读取数据产生的I/O耗时。该指标仅适用于存算分离实例。RemoteReadIOTime 从远端OSS读取数据产生的I/O耗时。该指标仅适用于存算分离实例。IoSeekTime IO Seek寻址过程产生的总耗时。该指标仅适用于存算分离...
Hive数据源
您可以基于HDFS文件和Hive JDBC两种方式读取数据：基于HDFS文件读取数据 Hive Reader插件通过访问HiveMetastore服务，解析出您配置的数据表的HDFS文件存储路径、文件格式、分隔符等信息后，再通过读取HDFS文件的方式读取Hive中的表数据。...
ECS应用角色（EMR 3.32及之前版本和EMR 4.5及之前版本...
dlf:BatchGetTables 批量获取数据表列表。dlf:BatchUpdatePartitions 批量更新分区信息。dlf:BatchUpdateTables 批量更新数据表。dlf:CreateDatabase 创建数据库。dlf:CreateFunction 创建函数。dlf:CreatePartition 创建分区。dlf:...
配置IBM DB2输入组件
读取数据时，根据配置的切分键字段进行数据分片，实现并发读取，可以提升数据同步效率。批量条数 配置数据同步时，每条并发SQL语句读取数据的条数，默认的批量条数为1024。输入过滤 配置抽取数据的筛选条件，配置说明如下：配置固定值，...
配置IBM DB2输入组件
读取数据时，根据配置的切分键字段进行数据分片，实现并发读取，可以提升数据同步效率。批量条数 配置数据同步时，每条并发SQL语句读取数据的条数，默认的批量条数为1024。输入过滤 配置抽取数据的筛选条件，配置说明如下：配置固定值，...
数据导入概览
④ 图数据库GDB加载程序从满足RAM角色的Bucket中读取数据并将数据加载至图数据GDB实例。使用DataWorks数据集成同步数据到GDB DataWorks 是阿里云上的一站式大数据智能云研发平台，其中数据集成服务支持导出数据到GDB，您也可以使用平台完成...
无法更换轻量应用服务器的操作系统
问题描述 重置系统可以重新安装服务器的应用或者操作系统，达到重新初始化服务器的目的。若您在阿里云轻量应用服务器控制台中，无法更换轻量应用服务器的操作系统，可参考本文进行操作。解决方案 阿里云提醒您：如果您对实例或数据有修改、...
通过实时计算订阅数据
订阅DataHub数据进行实时计算，插入到RDS实例的目标表中。...注意 选择的读取数据时间必须在数据同步到DataHub之前，否则可能造成数据丢失，影响查询结果。icmsDocProps={'productMethod':'created','language':'zh-CN',};
管理快照
快照是某一时间点磁盘数据状态的备份文件，常用于日常数据备份、服务器数据误操作恢复、网络攻击恢复、制作自定义镜像等场景。本文介绍如何通过管理控制台创建、删除快照以及使用快照回滚磁盘、创建自定义镜像。使用限制 说明 轻量应用...
API概览
巡检评分 API 标题 API概述 GetInstanceInspections 获取数据库实例巡检评分结果 调用GetInstanceInspections接口，获取数据库实例巡检评分的结果。事件通知 API 标题 API概述 SetEventSubscription 配置事件订阅设置 调用...
DataV读取数据源超时
DataV组件直接查询结果表的数据，不需要在每次组件获取数据时，再次执行SQL查询。API接口内部业务调用链路较长 为API服务设计缓存空间，针对常用的数据进行高效缓存，减少多次调用读取耗时。优化调用链路，将可以并行调用的过程并行化处理...
API概览
数据库网关提供以下相关API接口。网关管理 API 描述 CreateGateway 调用CreateGateway创建一个新网关。...ListDatabaseAccessPoint 调用ListDatabaseAccessPoint获取数据库访问点列表。RetryDatabase 调用RetryDatabase接口重试数据库。
数据追踪
CreateDataTrackOrder-创建数据追踪工单 GetDataTrackJobDegree-获取数据追踪任务进度 GetDataTrackJobTableMeta-获取数据追踪表元数据信息 GetDataTrackOrderDetail-获取数据追踪工单详情 SearchDataTrackResult-搜索数据追踪日志解析结果...
DTS订阅通道
数据源参数 通过数据传输服务DTS控制台获取数据源参数。单击目标DTS任务在 任务管理 页面获取以下参数：topic：DTS订阅Topic名称（图示中①）。proxyAddr：DTS订阅地址（图示中②）。单击目标DTS任务在 数据消费 页面获取以下参数：sid：...
最佳实践概览
轻量应用服务器数据迁移至ECS实例 如果当前轻量应用服务器无法满足您的业务需求，您可以通过SMC将轻量应用服务器平滑迁移至云服务器ECS，以获取更加灵活的资源配置方案。源服务器迁移至轻量应用服务器 服务器迁移中心支持将其他厂商轻量...
配置Greenplum输入组件
如对于需要每天增量追加或全量覆盖获取数据的情况，可填入带有表内日期字段限制为Dataphin的系统时间参数。输出字段 输出字段区域展示了已选中表的所有字段。如果不需要将某些字段输出至下游组件，则您可以删除对应的字段：如果需要删除...
功能特性
轻量应用服务器 轻量应用服务器（Simple Application Server）是可以快速搭建且易于管理的轻量级云服务器，面向单台服务器提供了一键部署应用、一站式域名解析、安全管理以及运维监控等服务。轻量应用服务器操作简单便捷，能让您快速上手...
配置Greenplum输入组件
如对于需要每天增量追加或全量覆盖获取数据的情况，可填入带有表内日期字段限制为Dataphin的系统时间参数。输出字段 输出字段区域展示了已选中表的所有字段。如果不需要将某些字段输出至下游组件，则您可以删除对应的字段：如果需要删除...
配置FTP输入组件
数据内容起始行 设置输入组件读取数据的起始行。默认为1，从第一行开始为数据内容。若需忽略前N行，则将数据内容起始行设置为N+1。高级配置 切分方式 Text支持 分隔符切分 和 字段长度切分，CSV支持 分隔符切分。分隔符切分：将会根据 字段...
配置FTP输入组件
数据内容起始行 设置输入组件读取数据的起始行。默认为1，从第一行开始为数据内容。若需忽略前N行，则将数据内容起始行设置为N+1。高级配置 切分方式 Text支持 分隔符切分 和 字段长度切分，CSV支持 分隔符切分。分隔符切分：将会根据 字段...
BLOB数据类型（邀测中）
说明 仅Lindorm JDBC Driver为2.1.3及以上版本时，可以通过该方式读取数据。如果需要在后续业务逻辑中进行流式处理，请选择该方式。获取BLOB列对应的InputStream对象进行读取 ResultSet resultSet=stmt.executeQuery("select*from"+...
EMR Hive数据整库离线同步至MaxCompute
基于Hive JDBC读取数据：Hive Reader插件通过Hive JDBC客户端连接HiveServier2服务读取数据。此方式支持通过where条件过滤数据，并直接通过SQL读取数据。说明 HDFS方式效率更高，JDBC方式会生成MapReduce程序，同步效率较低。注意HDFS方式...
EMR Hive数据整库离线同步至MaxCompute
基于Hive JDBC读取数据：Hive Reader插件通过Hive JDBC客户端连接HiveServier2服务读取数据。此方式支持通过where条件过滤数据，并直接通过SQL读取数据。说明 HDFS方式效率更高，JDBC方式会生成MapReduce程序，同步效率较低。注意HDFS方式...
概述
用户在创建数据同步时，DataHub会自动为该同步任务绑定SubscriptionId用于记录从DataHub读取数据的读取点位（非同步点位），该SubscriptionId请用户不要操作。目前只有DataHub topic的Owner/Creator账号才具备创建connector（数据同步）的...
ResetSystem-重置系统
注意事项 重置系统或更换镜像会清除轻量应用服务器上的磁盘数据，请您根据需要做好数据备份。重置系统或更换镜像后，可能会导致监控失效。如果监控出现问题，您可以手动安装云监控插件。远程连接服务器安装：具体操作，请参见 为阿里云主机...
调试实时任务
Kafka自动抽样时，支持选择读取数据范围，最大抽样条数为 100 条。完成所有数据表的元数据采样后，单击的 确定。在 Result 页面，即可查看 调试结果。手动上传数据（本地调试方式）离线模式调试 在 调试配置 对话框的 选择采样模式 页签中...
集群自定义监控报表
集群数据库 io_write_rt SSStore 每次写入平均耗时 集群数据库 io_read_size SSStore 每秒读取数据量 集群数据库 io_size SSStore 每秒处理数据量 集群数据库 io_write_size SSStore 每秒写入数据量 集群数据库 transaction_multi_...
- 产品推荐
- 这些文档可能帮助您