DSW跨域拉取海外模型或容器镜像

更新时间:2025-03-19 09:05:06

当您使用海外容器镜像(如:docker.io镜像)创建DSW实例,或者在DSW实例中拉取海外模型时(如:huggingface.co模型),可能由于网络跨域的原因无法正常访问,为解决此问题,您可以创建全球加速GA(Global Accelerator)实例,使用其提供的覆盖全球的网络加速服务,使DSW具备跨域获取模型和镜像的网络访问能力。

重要事项

请规范您的网络访问行为,如果您访问的目标网站存在违法信息,将会出现无法正常访问的情况。

计费说明

全球加速GA为独立云产品,需要额外收费,其费用包括实例费用、性能容量单位CU费用、网络传输带宽费用,详情请参见全球加速产品计费

操作步骤

本文以加速huggingfacedocker为例,介绍具体操作步骤,您可以按需配置。dockerhuggingface需要加速的域名如下:

加速的资源

具体加速的域名

加速的资源

具体加速的域名

huggingface

huggingface.cocdn-lfs.hf.co(huggingfacecdn分发域名)

docker

docker.ioproduction.cloudflare.docker.com

步骤一:创建标准型全球加速实例

以下操作示例内容仅做关键配置的展示和说明,全部配置参数及说明请参见创建和管理标准型全球加速实例

  1. 创建标准型实例。开通全球加速服务,并登录控制台,单击创建标准型按量付费实例,配置实例名称等基础信息,单击下一步

    image

  2. 配置加速区域。加速区域选择DSW实例所在的地域,加速网络的带宽可根据业务需求自行设置,然后单击下一步

    image

  3. 配置监听。填写监听名称,协议选择TCP端口配置为80,443。您也可根据业务实际情况进行相应的配置。

    image

  4. 配置终端节点。

    • 地域:选择海外地域,建议选择美国(硅谷)

    • 终端节点配置:为需要加速访问的域名,此处先只配置一个,如需配置多个域名,后续可通过添加虚拟终端节点组配置。

      • 后端服务类型:选择自定义域名

      • 后端服务:填写需加速的域名,如:huggingface.co

      • 权重:默认即可。

    image

  5. 配置审核。确认最终的配置信息,然后提交

    image

步骤二:添加虚拟节点并配置转发策略

  1. 在左侧菜单栏单击标准型实例 > 实例列表,然后单击刚刚创建的实例名称,单击监听,进入监听配置页面。

    image

  2. 通过虚拟终端节点组添加其它需加速域名。单击已有的监听器名称进入监听配置页面,单击终端节点组。此时已存在步骤一中配置的域名为huggingface.co的默认终端节点组。

    image

    其他每个需加速域名都单独为其添加虚拟节点组。以本文为例,还需添加的域名有 docker.ioproduction.cloudflare.docker.comcdn-lfs.hf.co。单击添加虚拟终端节点组

    • 后端服务类型:选择自定义域名。

    • 后端服务:填写需加速的域名。

    • 权重:默认即可。

    image

    以相同方式添加其他需要加速的域名,创建完成后会有三个虚拟节点组。

    image

  3. 配置监听器转发策略。在监听器配置页面单击转发策略,对需要加速的4个域名分别插入新策略

    • 域名匹配规则:选择精确匹配及通配符

    • 转发域名:填写需要加速的域名。

    • 转发至:选择域名配置对应的终端节点组类型和节点组。例如:在本例中默认终端节点组配置的域名为huggingface.co,虚拟终端节点组1、2、3分别配置的docker.ioproduction.cloudflare.docker.comcdn-lfs.hf.co

    image

    配置完成后会有4条转发策略:

    image

步骤三:DSW使用全球加速

加速方式

方式一:修改DSW实例Hosts加速访问

方式二:通过PrivateZone加速访问

适用场景

在已创建的DSW实例中获取海外模型或其他资源。

在创建DSW实例时使用海外镜像创建,以及在DSW中获取海外模型或其他资源。

DSW是否需要配置专有网络、安全组、交换机

可选

必需

DSW是否需要配置专有网关、及SNAT

可选,当需下载大型文件时,网络速度可能无法满足需求,您可以通过专有网关提升公网访问速率

方式一:修改DSW实例Hosts加速访问

  1. 获取加速IP。在全球加速控制台,单击已创建实例名称 > 加速区域,任选一个加速IP

    image

  2. 修改DSW实例中的hosts文件。打开DSW实例,在Terminal中执行vim /etc/hosts,在文件中添加加速IP和需要加速的域名,然后保存并退出。示例如下:

    image

方式二:通过PrivateZone加速访问

  1. 获取全球加速实例CNAME加速域名。在全球加速控制台,单击已创建实例名称,在实例信息页签中获取CNAME

    image

  2. 获取DSW实例专有网络VPC信息。对于已存在的实例,单击实例名称,在实例配置信息页即可查看专有网络信息。

    image

  3. PrivateZone中添加域名和解析记录。登录云解析DNS控制台,在PrivateZone用户域名页面单击添加域名。以huggingface.cocdn-lfs.hf.co为例,首先配置内置权威域名co,单击域名生效范围,在展开的阿里云VPC内网中选择2中获取的DSW使用的VPC,单击确定。如果还未创建DSW实例,则在后续创建实例时选择与此处PrivateZone相同的专有网络。

    image

    然后,单击内置权威域名co名称进入配置页,单击添加记录。由于huggingface.cocdn-lfs.hf.co使用的是相同的权威域名co,因此依次将其添加到解析记录中

    • 记录类型:选择CNAME

    • 记录值:填写1中获取的全球加速CNAME。

    image

    按照相同的方法配置docker.ioproduction.cloudflare.docker.com,最后一共会有三条内置权威域名

    image

相关文档

当网络访问速度无法满足需求时,您可以通过专有网关提升公网访问速率

  • 本页导读 (1)
  • 重要事项
  • 计费说明
  • 操作步骤
  • 步骤一:创建标准型全球加速实例
  • 步骤二:添加虚拟节点并配置转发策略
  • 步骤三:DSW使用全球加速
  • 相关文档
AI助理

点击开启售前

在线咨询服务

你好,我是AI助理

可以解答问题、推荐解决方案等