访问公网

更新时间:
复制为 MD 格式

当通过MaxCompute Spark 访问公网域名时,默认情况下,MaxCompute与目标服务之间的网络不可达。本文以访问google.com:443为例,介绍访问公网域名两种方式。

Smartnat方式

  1. 设置Project公网白名单,参考访问公网方案

  2. spark-defaults.confDataWorks配置中添加以下配置项:

    # 设置smartnattrue
    spark.hadoop.odps.cupid.smartnat.enable=true
    # 添加公网访问白名单
    spark.hadoop.odps.cupid.internet.access.list=google.com:443

专线直连方式

  1. 开通专线直连,参考访问VPC方案(专线直连),需要保证VPC具备访问公网能力

  2. spark-defaults.confDataWorks配置中添加以下配置项:

    # 添加专线直连参数
    spark.hadoop.odps.cupid.eni.enable=true
    spark.hadoop.odps.cupid.eni.info=regionid:vpc-**********
    # 添加公网访问白名单
    spark.hadoop.odps.cupid.internet.access.list=google.com:443