赛尔校园公共服务平台 Logo
平台使用
阿里云
百度云
移动云
智算服务
教育生态
登录 →
赛尔校园公共服务平台 Logo
平台使用 阿里云 百度云 移动云 智算服务 教育生态
登录
  1. 首页
  2. 阿里云
  3. 全球加速
  4. 实践教程
  5. 多产品组合使用
  6. 使用GA实现PAI-DSW跨域加速拉取海外模型或容器镜像

使用GA实现PAI-DSW跨域加速拉取海外模型或容器镜像

  • 多产品组合使用
  • 发布于 2025-04-22
  • 0 次阅读
文档编辑
文档编辑

当您使用海外容器镜像(如:docker.io镜像)创建交互式建模 PAI-DSW实例,或者在PAI-DSW实例中拉取海外模型时(如:huggingface.co模型),可能由于网络跨域的原因无法正常访问,为解决此问题,您可以创建全球加速GA(Global Accelerator)实例,使用其提供的覆盖全球的网络加速服务,使PAI-DSW具备跨域获取模型和镜像的网络访问能力。

重要事项

请规范您的网络访问行为,如果您访问的目标网站存在违法信息,将会出现无法正常访问的情况。

操作步骤

本文以加速huggingface和docker为例,介绍具体操作步骤,您可以按需配置。docker和huggingface需要加速的域名如下:

加速的资源

具体加速的域名

huggingface

huggingface.co、cdn-lfs.hf.co(huggingface的cdn分发域名)

docker

docker.io、production.cloudflare.docker.com

步骤一:创建标准型全球加速实例

以下操作示例内容仅做关键配置的展示和说明,全部配置参数及说明请参见创建和管理标准型全球加速实例。

  1. 创建标准型实例。开通全球加速服务,并登录控制台,单击创建标准型按量付费实例,配置实例名称等基础信息,单击下一步。

    image

  2. 配置加速区域。加速区域选择DSW实例所在的地域,加速网络的带宽可根据业务需求自行设置,然后单击下一步。

    image

  3. 配置监听。填写监听名称,协议选择TCP,端口配置为80,443。您也可根据业务实际情况进行相应的配置。

    image

  4. 配置终端节点。

    • 地域:选择海外地域,建议选择美国(硅谷)。

    • 终端节点配置:为需要加速访问的域名,此处先只配置一个,如需配置多个域名,后续可通过添加虚拟终端节点组配置。

      • 后端服务类型:选择自定义域名。

      • 后端服务:填写需加速的域名,如:huggingface.co。

      • 权重:默认即可。

    image

  5. 配置审核。确认最终的配置信息,然后提交。

    image

步骤二:添加虚拟节点并配置转发策略

  1. 在左侧菜单栏单击标准型实例 > 实例列表,然后单击刚刚创建的实例名称,单击监听,进入监听配置页面。

    image

  2. 通过虚拟终端节点组添加其它需加速域名。单击已有的监听器名称进入监听配置页面,单击终端节点组。此时已存在步骤一中配置的域名为huggingface.co的默认终端节点组。

    image

    其他每个需加速域名都单独为其添加虚拟节点组。以本文为例,还需添加的域名有 docker.io、production.cloudflare.docker.com、cdn-lfs.hf.co。单击添加虚拟终端节点组

    • 后端服务类型:选择自定义域名。

    • 后端服务:填写需加速的域名。

    • 权重:默认即可。

    image

    以相同方式添加其他需要加速的域名,创建完成后会有三个虚拟节点组。

    image

  3. 配置监听器转发策略。在监听器配置页面单击转发策略,对需要加速的4个域名分别插入新策略

    • 域名匹配规则:选择精确匹配及通配符。

    • 转发域名:填写需要加速的域名。

    • 转发至:选择域名配置对应的终端节点组类型和节点组。例如:在本例中默认终端节点组配置的域名为huggingface.co,虚拟终端节点组1、2、3分别配置的docker.io、production.cloudflare.docker.com、cdn-lfs.hf.co。

    image

    配置完成后会有4条转发策略:

    image

步骤三:DSW使用全球加速

加速方式

方式一:修改DSW实例Hosts加速访问

方式二:通过PrivateZone加速访问

适用场景

在已创建的DSW实例中获取海外模型或其他资源。

在创建DSW实例时使用海外镜像创建,以及在DSW中获取海外模型或其他资源。

DSW是否需要配置专有网络、安全组、交换机

可选

必需

DSW是否需要配置专有网关、及SNAT

可选,当需下载大型文件时,网络速度可能无法满足需求,您可以通过专有网关提升公网访问速率。

方式一:修改DSW实例Hosts加速访问

  1. 获取加速IP。在全球加速控制台,单击已创建实例名称 > 加速区域,任选一个加速IP。

    image

  2. 修改DSW实例中的hosts文件。打开DSW实例,在Terminal中执行vim /etc/hosts,在文件中添加加速IP和需要加速的域名,然后保存并退出。示例如下:

    image

方式二:通过PrivateZone加速访问

  1. 获取全球加速实例CNAME加速域名。在全球加速控制台,单击已创建实例名称,在实例信息页签中获取CNAME。

    image

  2. 获取DSW实例专有网络VPC信息。对于已存在的实例,单击实例名称,在实例配置信息页即可查看专有网络信息。

    image

  3. 在PrivateZone中添加域名和解析记录。登录云解析DNS控制台,在PrivateZone用户域名页面单击添加域名。以huggingface.co、cdn-lfs.hf.co为例,首先配置内置权威域名co,单击域名生效范围,在展开的阿里云VPC内网中选择2中获取的DSW使用的VPC,单击确定。如果还未创建DSW实例,则在后续创建实例时选择与此处PrivateZone相同的专有网络。

    image

    然后,单击内置权威域名co名称进入配置页,单击添加记录。由于huggingface.co、cdn-lfs.hf.co使用的是相同的权威域名co,因此依次将其添加到解析记录中

    • 记录类型:选择CNAME。

    • 记录值:填写1中获取的全球加速CNAME。

    image

    按照相同的方法配置docker.io、production.cloudflare.docker.com,最后一共会有三条内置权威域名。

    image

相关文档

  • GA费用包括:GA实例费、CU费、流量费。

  • PAI-DSW计费方式及计费项,请参见交互式建模(DSW)计费说明。

  • 当网络访问速度无法满足需求时,您可以通过专有网关提升公网访问速率。

相关文章

使用GA实现ACK跨域加速拉取容器镜像 2025-04-22 18:05

如需在ACK集群中跨域拉取海外源容器镜像,您可以创建全球加速GA(Global Accelerator)实例,使用其提供的覆盖全球的网络加速服务。

使用GA实现PAI-DSW跨域加速拉取海外模型或容器镜像 2025-04-22 18:05

当您使用海外容器镜像(如:docker.io镜像)创建交互式建模 PAI-DSW实例,或者在PAI-DSW实例中拉取海外模型时(如:huggingface.co模型),可能由于网络跨域的原因无法正常访问,为解决此问题,您可以创建全球加速GA(Global Accelerator)实例,使用其提供的覆

使用GA加速无影终端访问云电脑 2025-04-22 18:05

跨地域访问无影云电脑时,由于通过公网连接,因此可能会发生延迟高、画面卡顿等影响终端用户使用体验的问题。您可以通过使用全球加速 GA(Global Accelerator),使终端用户访问请求就近接入阿里云,通过阿里云内部的加速网络到达无影云电脑。无影云电脑企业版产品集成了GA服务,您可以在无影云电脑

使用GA实现视频直播服务加速 2025-04-22 18:05

视频直播基于全球加速产品的加速能力,提供直播链路的推流加速和播流加速服务。本文介绍如何在控制台配置直播全球加速。 背景信息 视频直播基于全球加速GA产品的加速能力,提供直播链路的推流加速和播流加速服务,依托阿里云优质BGP带宽和全球传输网络

使用GA实现ALB后端应用加速 2025-04-22 18:05

当您使用ALB部署的业务被全球多地域用户访问时,因公网网络质量不高可能导致网络延迟高、抖动、丢包等问题,影响终端用户使用体验。您可以通过使用全球加速GA实现应用加速,使终端用户访问请求就近接入阿里云,通过阿里云内部的加速网络到达应用服务器。 场景示例 企业在阿里云华东1(杭州)地域使用ALB部署了高

使用GA加速访问OSS资源 2025-04-22 18:05

用户直接访问对象存储 OSS(Object Storage Service)资源时,访问速度会受到

目录
Copyright © 2025 your company All Rights Reserved. Powered by 赛尔网络.
京ICP备14022346号-15
gongan beian 京公网安备11010802041014号