添加数据源典型问题场景

连通性问题主要体现为测试连通性失败：

• 问题现象：添加MySQL数据源时，网络类型选择为经典网络，单击测试连通性时失败，报错信息为测试连接失败，测试数据源联通性失败，连接数据库失败，数据库连接串…异常消息：Communications link failure. The last packet sent successfully to the server was 0 milliseconds ago.The dirver has not received any packets from the server。

  解决方法：出现上述报错通常都是网络连通性问题导致。建议检查您的网络是否可达、防火墙是否对该IP或端口有相关限制，以及安全组是否已配置对IP或端口放通。

• 问题现象：添加阿里云MongoDB数据源，测试数据源连通性失败，报错如下。

  error message: Timed out after 5000 ms while waiting for a server that matches ReadPreferenceServerSelector{readPreference=primary}. Client view of cluster state is {type=UNKNOWN, servers=[..] error with code: PROJECT_DATASOURCE_CONN_ERROR

  解决方法：处理此类问题时，首先需要确定您的DataWorks工作空间所处地域。使用阿里云MongoDB，需要确定网络类型是否为VPC。VPC环境下MongoDB不支持数据连通性测试（使用方案一可以避免该问题）。

  VPC环境下阿里云MongoDB数据同步有以下两种方案：

  • 方案一：通过公网进行数据同步

    1. 数据源配置时，数据源类型选择连接串模式。

    2. VPC环境下，您的MongoDB需要开通公网访问。

    3. 在MongoDB上放行相关白名单IP，详情请参见添加白名单。

    4. 进行数据连通性测试。

  • 方案二：配置自定义资源组，从内网进行数据同步

    1. 准备一台和MongoDB同区域、同网络的ECS作为调度资源，详情请参见新增和使用自定义数据集成资源组。

    2. 将这台ECS的IP加入MongoDB的白名单或者安全组。

    3. 数据源测试连通时直接确定保存（不支持测试连通性）。

    4. 修改资源组为自定义调度资源，测试运行。

  说明

  请务必添加相应的白名单。

• 问题现象 ：添加自建MongoDB数据源，测试数据源连通性失败。

  解决方法：

  1. 数据源配置时，数据源类型选择连接串模式。

  2. 如果是VPC环境下ECS上自建的MongoDB，需要开通公网访问。

  3. 确认网络和端口之间是否能够连通，检查ECS的防火墙和安全组设置。

  4. 确认自建的数据库涉及的安全访问限制、权限的限制和远程登录的情况。

  5. 确认访问地址host:port、数据库名和用户名是否填写正确。

     说明

     添加MongoDB数据源时，使用的用户名必须是用户需要同步的这张表所在的数据库创建的用户名，不能用root。

     例如需要导入name表，name表在test库，则此处数据库名称填写为test。

     用户名为指定数据库中创建的用户名，不要使用root。例如之前指定的是test库，则用户名需使用test数据库中创建的账户。

• 问题现象 ：VPC环境下添加Redis数据源，测试数据源连通性失败，报错如下。

  解决方法：Redis添加数据源时如果没有公网IP，需要保证数据源和DataWorks工作空间地域一致，通过新增调度资源完成数据源的打通。

• 问题现象：添加MongoDB数据源，已经配置白名单，测试数据源连通性仍然失败，报错如下。

  error message: Timed out after 5000 ms while waiting for a server that matches ReadPreferenceServerSelector{readPreference=primary}

  解决方法：VPC网络的MongoDB数据源和DataWorks的默认资源组在内网上是不通的，所以无法直接进行同步任务，需要通过公网或者自定义资源组的方式进行连通。

• 问题现象：Docker中安装的MySQL如何添加到数据源？

  解决方法：Docker中安装的MySQL直接用服务器的公网IP组成的JDBC地址无法连接，连通性测试无法通过。您需要将MySQl的端口映射到宿主机上，使用映射出的端口链接。

• 问题现象：配置Redis数据源失败，测试数据源连通性失败报错如下。

  error message: java.net.SocketTimeoutException: connect timed out

  解决方法：目前DataWorks不支持Redis通过内网添加数据源，建议您为Redis数据源开通公网访问能力。数据源配置时，选择连接串模式，通过公网连接。

• 问题现象：新增阿里云RDS数据源时，测试连通性不通。

  解决方法：

  1. 当RDS数据源测试连通性不通时，需要到自己的RDS上添加数据同步机器IP白名单，详情请参见添加白名单。

     说明

     如果使用自定义资源组调度RDS的数据同步任务，必须把自定义资源组的机器IP也加到RDS的白名单中 。

  2. 确保添加的信息正确：RDS实例ID和RDS实例主账号ID、用户名、密码数据库名必须确保正确。

• 问题现象：新增自建ECS中的MySQL数据源时，数据源测试连通性不通。

  解决方法：

  1. 确认网络和端口之间是否能连通，检查ECS的防火墙以及安全组设置。

  2. 确认自建的数据库涉及的安全访问限制、权限的限制和远程登录的情况。

  3. 确认添加的用户名、密码、JDBC URL中的IP地址和端口的信息是否正确。

  4. 在VPC的环境下购买的ECS，只能用脚本模式运行任务，在添加数据源时测试连通性不能成功。购买ECS后，您可以添加自定义资源，将同步任务下发到相应的资源组运行。