为了保证DataWorks中数据同步、数据调度等任务的顺利操作,还需要确保资源组绑定的VPC网络与数据源(目标网络环境下的数据库、数据服务或其他数据)之间的连通性,本文为您提供了不同网络环境下的网络连通解决方案。
背景信息
DataWorks的大部分功能(创建数据源、数据同步、数据分析、数据采集、数据服务等)均基于接入的数据源或计算资源进行相关操作,如果涉及访问的数据源不在当前DataWorks资源组绑定的VPC中(例如数据源在其他VPC或IDC中),需要根据不同网络情况选择合适的网络连通方案,使DataWorks资源组绑定的VPC与数据源所在网络连通。
例如,在数据同步流程中,需要资源组绑定的VPC网络与数据来源端、数据去向端进行网络连通。
前提条件
已购买合适规格的资源组,购买详情请参见:新增和使用Serverless资源组。
资源组的更多介绍,请参见DataWorks资源组概述。
本文提供的网络连通方案仅适用于Serverless资源组、旧版资源组中的独享数据集成资源组、独享调度资源组和独享数据服务资源组。
注意事项
Serverless资源组可通过绑定专有网络的方式在内网访问复杂网络环境下的数据源或地址。但Serverless资源组默认不具备公网访问能力,如果需要通过公网访问数据源或网络,请为Serverless资源组绑定的VPC配置公网NAT网关和EIP。具体操作,请参见方案六:公网数据源网络连通。
无法保障公网环境下各任务的速度和稳定性,建议通过内网或者云企业网同步。
资源组与数据源可连通是后续任务运行成功的必要条件之一。
暂不支持资源组与经典网络环境进行数据交互,建议您将经典网络环境下的数据源或业务迁移至专有网络VPC环境。
网络连通方案
网络连通方案选择取决于数据源与DataWorks工作空间资源组之间的环境关系,请根据实际情况选择对应的网络连通方案:
方案一:同主账号、同地域网络连通
适用场景
如果您的数据源与DataWorks工作空间同时满足以下条件,推荐使用本方案。
数据源是阿里云产品。
数据源与DataWorks工作空间归属于同一阿里云主账号。
数据源与DataWorks工作空间位于同一地域。
方案说明
同账号、同地域场景下,推荐使用VPC网络(内网)连接,将DataWorks工作空间的资源组与数据源部署在同一VPC下,即可实现网络互通。
网络连通示意图
配置网络连通
详细方案说明和操作步骤请参见方案一:同主账号、同地域网络连通。
方案二:同主账号、不同地域网络连通
适用场景
如果您的数据源与DataWorks工作空间同时满足以下条件,推荐使用本方案。
数据源是阿里云产品。
数据源与DataWorks工作空间归属于同一阿里云主账号。
数据源与DataWorks工作空间位于不同地域。
方案说明
同账号、不同地域场景下,推荐使用VPC网络(内网)连接,使用网络连通工具(云企业网、VPC对等连接)将DataWorks工作空间的资源组与数据源所在VPC打通,实现网络互通。
网络连通示意图
配置网络连通
详细方案说明和操作步骤请参见方案二:同主账号、不同地域网络连通。
方案三:不同主账号网络连通
适用场景
如果您的数据源与DataWorks工作空间同时满足以下条件,推荐使用本方案。
数据源是阿里云产品。
数据源与DataWorks工作空间归属于不同阿里云主账号。
方案说明
不同主账号场景下,推荐使用VPC网络(内网)连接,使用网络连通工具(云企业网、VPC对等连接)将账号A的数据源与账号B的DataWorks工作空间资源组打通,实现网络互通。
网络连通示意图
配置网络连通
详细方案说明和操作步骤请参见方案三:不同主账号网络连通。
方案四:数据源部署在ECS中
适用场景
如果您的数据源满足以下条件,推荐使用本方案。
数据源部署在阿里云ECS中。
方案说明
网络连通示意图
配置网络连通
详细方案说明和操作步骤请参见方案四:部署在ECS中的数据源网络连通。
方案五:IDC数据源网络连通
适用场景
如果您的数据源满足以下条件,推荐使用本方案。
数据源部署在本地IDC中。
方案说明
数据源部署在本地IDC场景下,推荐使用VPC网络(内网)连接,使用网络连通工具(高速通道)将数据源所在的本地网络与DataWorks工作空间资源组的VPC打通,实现网络互通。
网络连通示意图
配置网络连通
详细方案说明和操作步骤请参见方案五:IDC数据源网络连通。
方案六:公网数据源网络连通
适用场景
如果您的数据源满足以下条件,推荐使用本方案。
数据源具备公网链接地址。
方案说明
Serverless资源组默认不具备公网访问能力,需要为资源组绑定的VPC配置公网NAT网关和EIP后,才支持公网访问数据源。
旧版资源组有公网访问能力,可直接连通。
旧版资源组正在下线中,推荐使用Serverless资源组。
网络连通示意图
示意图仅适用于Serverless资源组,旧版资源组已默认绑定EIP,可直接连通。
配置网络连通
详细方案说明和操作步骤请参见方案六:公网数据源网络连通。
相关文档
资源组的更多介绍,请参见DataWorks资源组概述。
创建和使用资源组,请参见新增和使用Serverless资源组。
为资源组绑定VPC,请参见绑定专有网络。
为资源组绑定的专有网络VPC和交换机配置公网NAT网关。具体操作,请参见使用公网NAT网关SNAT功能访问互联网。
网络连通的常见问题,请参见资源组操作及网络连通。
- 本页导读 (1)
- 背景信息
- 前提条件
- 注意事项
- 网络连通方案
- 方案一:同主账号、同地域网络连通
- 方案二:同主账号、不同地域网络连通
- 方案三:不同主账号网络连通
- 方案四:数据源部署在ECS中
- 方案五:IDC数据源网络连通
- 方案六:公网数据源网络连通
- 相关文档