ModelArts 训练使用共享文件系统指引

举报
星月菩提 发表于 2020/04/18 16:25:29 2020/04/18
【摘要】 如何在modelarts中使用sfs实现nas挂载

当前运行于专属资源池中的训练作业,可以使用华为公有云 弹性文件系统 服务提供的 SFS Turbo 文件系统。

由于专属资源池默认提供的是网络隔离、资源独占的运行环境,因此在使用 SFS Turbo 之前,需要对专属资源池与 SFS Turbo 所处的网络进行配置,以使得训练作业能访问到 SFS Turbo 文件系统。

下文详细描述在 ModelArts 训练中使用共享文件系统的操作流程。

1.1      专属资源池网络地址

专属资源池(开发环境/训练专用)由 ModelArts 服务托管,网络地址默认为 192.168.20.0/24

1.2      SFS Turbo 网络地址规划

注意到专属资源池的网络地址为 192.168.20.0/24,因此 SFS Turbo 所在的网络地址空间不能与 192.168.20.0/24 地址空间重叠。另外由于底层技术限制,要求网络地址空间网段必须为 192.168 (该限制,在专属资源池网络配置菜单中有说明)

规划 SFS Turbo 所在网络(VPC)的地址空间,例如 192.168.108.0/24 地址空间。

image.png


1.3   创建 SFS Turbo

在已规划好的 VPC Subnet 下创建 SFS Turbo 类型的文件系统


image.png

1.4      配置专属资源池网络

于专属资源池的详情页面中,配置专属资源池网络,与 SFS Turbo 所在的网络连通


image.png


选择前述 SFS Turbo 所在的 VPC Subnet

image.png


1.5      训练作业使用 SFS Turbo

选择已配置好网络的专属资源池

image.png

确定后,计算节点个数 下方会出现 选择区域

image.png


选择前述已创建好的 SFS Turbo

image.png


在训练作业代码中即可通过 /home/work/nas 路径访问 SFS Turbo 文件系统中的数据







【版权声明】本文为华为云社区用户原创内容,转载时必须标注文章的来源(华为云社区)、文章链接、文章作者等基本信息, 否则作者和本社区有权追究责任。如果您发现本社区中有涉嫌抄袭的内容,欢迎发送邮件进行举报,并提供相关证据,一经查实,本社区将立刻删除涉嫌侵权内容,举报邮箱: cloudbbs@huaweicloud.com
  • 点赞
  • 收藏
  • 关注作者

评论(0

0/1000
抱歉,系统识别当前为高风险访问,暂不支持该操作

全部回复

上滑加载中

设置昵称

在此一键设置昵称,即可参与社区互动!

*长度不超过10个汉字或20个英文字符,设置后3个月内不可修改。

*长度不超过10个汉字或20个英文字符,设置后3个月内不可修改。