BigQuery数据

网络打通的具体方法可参考:配置资源组与网络连通。数据同步任务开发 BigQuery数据同步任务的配置入口和通用配置流程指导可参见下文的配置指导,详细的配置参数解释可在配置界面查看对应参数的文案提示。创建数据源 在进行数据同步任务开发...

Amazon Redshift数据

网络打通的具体方法可参考:配置资源组与网络连通。数据同步任务开发:Amazon Redshift同步流程指导 Amazon Redshift数据同步任务的配置入口和通用配置流程指导可参见下文的配置指导,详细的配置参数解释可在配置界面查看对应参数的文案...

跨账号连接RedisECS实例

使用云企业网连接 云企业网 帮助您在不同VPC间、VPC本地数据中心之间搭建专有网络通信通道,通过自动路由分发及学习,提高网络的快速收敛和跨网络通信的质量和安全性,实现全网资源的互通,帮助您打造一张具有企业级规模和通信能力的互联...

配置资源组与网络连通

数据同步任务配置前,您需要确保用于执行同步任务的独享数据集成资源组您将要同步的数据来源端目的端数据库的网络连通性,您可以根据数据库所在网络环境,选择合适的网络解决方案来实现网络连通。本文为您介绍数据库在不同网络环境中...

跨阿里云主账号访问

您在跨账号进行数据同步任务...相关文档 配置资源组与网络联通,详情请参见 配置资源组与网络连通。购买带宽包并创建跨地域连接,详情请参见 使用带宽包。跨地域连接分配带宽,详情请参见 跨地域连接。数据源创建,详情请参见 创建数据源。

通过DataWorks导入数据

独享数据集成资源组与数据源网络已打通。详情请参见:配置资源组与网络连通。操作步骤 配置同步的源端数据库读插件。具体操作,请参见 DRDS Reader。配置同步的目标端数据库写插件。具体操作,请参见 AnalyticDB for MySQL 3.0 Writer。...

同阿里云主账号访问

详情请参见 配置资源组与网络连通。场景一:DataWorks与数据源处于同地域时 DataWorks工作空间与数据源同阿里云主账号、同地域时,您可以通过如下两种方案进行网络打通。方案1:将DataWorks资源组与数据源置于同一VPC内 资源组侧,新增专有...

新增和使用独享数据集成资源组

使用独享资源时,您需进行网络配置,为独享资源绑定一个可与数据源连通的VPC,通过此VPC实现与数据网络连通。绑定专有网络的操作如下。重要 4c8g类型的独享数据集成资源组最多支持绑定2个专有网络,其他规格的独享数据集成资源组最多支持...

通过向导模式配置离线同步任务

增量同步过滤条件的语法与数据库语法基本一致,同步时,离线同步将拼接为完整SQL向对应数据源抽取数据。当不配置数据过滤条件时,默认同步该表全量数据。关系型数据库配置切分键 定义将源端待同步数据基于源端哪一个字段进行切分,同步任务...

使用DataWorks

测试资源组与数据来源、数据去向之间的网络连通性,确认独享数据集成资源组与数据网络已打通。然后单击 下一步。配置任务。配置数据来源与去向。在 数据来源 和 数据去向 区域,配置任务读取与写入的表,及同步的数据范围。详情请参见 ...

Kafka单表实时入湖OSS(HUDI)

准备独享数据集成资源组并与数据源网络连通 在进行数据同步前,需要完成您的独享数据集成资源组和数据源的网络连通,详情请参见 配置资源组与网络连通。说明 OSS数据源在下一步新增OSS数据源时,指定Endpoint地址,即可实现OSS数据源与独享...

通过脚本模式配置离线同步任务

增量同步过滤条件的语法与数据库语法基本一致,同步时,离线同步将拼接为完整SQL向对应数据源抽取数据。关系型数据库配置切分键 定义将源端待同步数据基于源端哪一个字段进行切分,同步任务执行时将根据该字段切分为多个task,以便并发、...

通用参考:添加路由

如果添加路由后,仍然存在网络连通问题,请根据如下因素进行排查:如果独享资源组访问的是本地IDC数据源,或者跨账号访问数据源,请先参考 配置资源组与网络连通 进行网络连通,再为独享资源组绑定与数据库网络连通的VPC。如果您的数据源已...

离线同步任务调优

BatchSize或maxfilesize参数控制一次性批量提交的记录数大小,该值可以减少数据同步与数据网络交互次数,并提升吞吐量。但如果该值设置过大,会导致数据同步运行进程OOM异常。出现上述报错后,请参见:离线同步常见问题。附录:查看实际...

配置并管理实时同步任务

独享数据集成资源组与数据源网络已打通。详情请参见:配置资源组与网络连通。数据源环境已准备完成:您可以基于您需要进行的同步配置,在同步任务执行前,授予数据源配置的账号在数据库进行相应操作的权限。详情请参见:数据库环境准备概述...

独享资源组模式

重要 独享资源组需要绑定数据库所在的vpc,或者与数据网络连通的vpc。如果做过网络打通,即存在数据库和DataWorks不在同一个region、数据库和DataWorks不在同一个阿里云账号、数据库在本地IDC环境下等需要网络打通的情况,请为独享绑定...

Kafka实时ETL同步至Hologres

准备独享数据集成资源组并与数据网络连通 在进行数据同步前,需要完成您的独享数据集成资源组和数据源的网络连通,详情请参见 配置网络连通。说明 Kafka与Hologres支持的网络类型如下:Kafka:指定VPC网络、公网。Hologres:指定VPC网络、...

配置并管理实时同步任务

独享数据集成资源组与数据源网络已打通。详情请参见:配置资源组与网络连通。数据源环境已准备完成:您可以基于您需要进行的同步配置,在同步任务执行前,授予数据源配置的账号在数据库进行相应操作的权限。详情请参见:数据库环境准备概述...

ClickHouse整库数据离线同步至Hologres

准备独享数据集成资源组并与数据网络连通 在进行数据同步前,需要完成您的独享数据集成资源组和数据源的网络连通,详情请参见 配置网络连通。如果您的独享数据集成资源组和数据源属于同一地域,可使用同地域VPC内网连通独享资源组和数据...

DataStudio侧实时同步任务配置

详情请参见:配置资源组与网络连通。进入数据开发 实时同步任务配置入口在数据开发模块,您需要前往数据开发进行创建。进入数据开发页面。登录 DataWorks控制台,单击左侧导航栏的 数据建模与开发>数据开发,在下拉框中选择对应工作空间后...

离线同步任务运维

说明 修改资源组前,请确保待切换的资源组与数据网络已经连通,避免由于资源组与数据网络不通导致任务执行失败。操作环境 支持的切换操作 界面入口 切换生产环境资源组 批量切换 进入 运维中心>周期任务 界面设置。勾选需要修改资源组...

通用参考:按量付费转包年包月

若资源组切换后由于网络问题导致任务失败,请参考 配置资源组与网络连通 对资源组进行网络配置。切换任务配置时的默认资源组 您需要进入数据开发界面,在 设置>调度设置 中修改任务使用的默认资源组,修改后,后续新建的任务将默认使用该...

概述

全球数据网络(Global Database Network,简称GDN)是由分布在同一个国家内多个地域的多个 PolarDB 集群组成的网络。...相关视频 GDN 相关文档 技术架构 应用场景 创建删除全球数据网络 管理从集群 连接全球数据网络

元数据采集

参数 描述 资源组名称 选择已与数据网络连通的资源组。数据地图支持您选择如下3种资源组,您可根据需求选取:默认资源组 default。您自己的独享调度资源组。您自己的独享数据集成资源组。连通性测试 选择完资源组名称后,如果您想再次...

共享内存通信(SMC)使用说明

数据传输过程如下图所示:应用场景 基于SMC-R的高性能、透明替换等优势,适用于网络通信占比高的场景,该技术的典型应用场景示例如下:时延敏感的数据查询和处理 Redis、Memcached、PostgreSQL等高性能数据查询处理的场景,对网络性能有...

附录 2 等级保护简介

数据备份恢复 应提供异地实时备份功能,利用通信网络将重要数据实时备份至备份场地。表 6.条款解读应对政策 条款解读 应对政策 应用是具体业务的直接实现,不具有网络和系统相对标准化的特点。大部分应用本身的身份鉴别、访问控制和操作...

等保三级预检合规包

等保2.0以“一个中心,三重防护”为网络安全技术设计的总体思路,其中一个中心即安全管理中心,三重防护即安全计算环境、安全区域边界和安全通信网络。安全管理中心要求在系统管理、安全管理、审计管理三个方面实现集中管控,从被动防护...

网络连通解决方案

添加数据源时需要根据数据源所在网络环境,通过对应的网络解决方案,实现Dataphin与数据源的网络连通。本文为您介绍数据源在不同网络环境中与Dataphin的网络连通方案。网络连通方案 根据数据源所在的网络环境,在下图中选择对应的网络连通...

产品优势

本文介绍Link WAN网管核心自建核心能力间的差异以及D2D通信技术。能力差异 能力 Link WAN(LoRaWAN)其他LoRa平台 LoRaWAN国际标准 遵循LoRaWAN国际标准协议。标准纷乱,彼此互不相通,系统维护成本高。技术 阿里云自主迭代,跟随联盟...

独享数据集成资源组

网络连通方案 独享数据集成资源组与其他独享资源组类似,本质上为一组阿里云ECS实例,在数据集成任务运行时,需保障资源组与数据源之间的网络是连通的,且不会因为白名单等特殊安全访问设置阻断资源组与数据源之间的网络连通性。...

网络资源

可以与网络服务提供商协商增加带宽的容量,以满足系统的需求。网络分区故障 指网络中的一部分节点无法与其他节点进行正常的通信,导致网络被分割成多个独立的区域,节点之间无法互相访问。可能影响系统和应用程序之间的数据传输和交互,...

独享调度资源组

网络连通方案 独享调度资源组与其他资源组类似,本质上为一组阿里云ECS实例,在进行数据开发等任务运行时,需保障资源组与数据源之间的网络是连通的,且不会因为白名单等特殊安全访问设置阻断资源组与数据源之间的网络连通性。说明 如果独...

通过DataWorks导入数据

已完成数据集成资源组与数据源的网络连通。详情请参见:配置资源组与网络连通。已完成数据源环境准备。您可以基于您需要进行的同步配置,在同步任务执行前,授予数据源配置的账号在数据库进行相应操作的权限。详情请参见:数据库环境准备...

系统管理

详情请参见 配置资源组与网络连通。数据上传:引擎限制:仅支持将数据上传至MaxCompute、EMR Hive、Hologres引擎。资源组限制:数据上传功能需指定调度资源组和数据集成资源组。上传数据至MaxCompute引擎:支持使用公共资源组及独享资源组...

数据集成概述

数据集成支持您根据数据源所在网络环境,选择对应的网络同步任务,关于网络连通方案选择与配置资源组与数据源的网络连通,详情请参见:配置资源组与网络连通。基本概念 并发数 并发数是数据同步任务中,可以从源并行读取或并行写入数据存储...

通过DataWorks导入数据

已完成数据集成资源组与数据源的网络连通。详情请参见:配置资源组与网络连通。操作步骤 新增RDS SQL Server数据源。具体操作,请参见 配置SQLServer数据源。新增AnalyticDB MySQL数据源。具体操作,请参见 配置AnalyticDB for MySQL 3.0...

基本概念

术语 说明 高速通道(Express Connect)阿里云高速通道(Express Connect)帮助您在专有网络(VPC)本地数据中心之间建立私网通信通道,提高网络拓扑的灵活性和跨网络通信的质量和安全性。专有网络(Virtual Private Cloud,VPC)专有网络...

创建AnalyticDB for PostgreSQL数据

前提条件 若您需在Dataphin中创建基于阿里云产品的数据源,创建数据源前,需确保Dataphin的IP已添加至数据库白名单(或安全组)中,使数据Dataphin网络互通。具体操作,请参见 数据源白名单配置。权限说明 Dataphin仅支持 超级管理员、...

阿里云云通信短信服务安全白皮书V1.0

阿里云云通信合作伙伴应按照适用数据保护法律要求和阿里云云通信签订的协议要求,建立相对应的数据安全能力,落实必要的管理和技术措施,为合作过程中相关数据提供充分的安全保障,防止数据遭受未经授权的获取、使用、泄漏、损毁、丢失等...

创建Hologres数据

若您需在Dataphin中创建基于阿里云产品的数据源,创建数据源前,需确保Dataphin的IP已添加至数据库白名单(或安全组)中,使数据Dataphin网络互通。具体操作,请参见 数据源白名单配置。操作步骤 在Dataphin首页,单击顶部菜单栏 管理...
共有200条 < 1 2 3 4 ... 200 >
跳转至: GO
产品推荐
云服务器 安全管家服务 安全中心
这些文档可能帮助您
数据库备份 DBS 边缘网络加速 云数据库 RDS 云服务器 ECS 弹性公网IP 短信服务
新人特惠 爆款特惠 最新活动 免费试用