云社区 博客 博客详情
云社区 博客 博客详情

ModelArts 训练使用共享文件系统指引

星月菩提 发表于 2020-04-18 16:25:29 04-18 16:25
星月菩提 发表于 2020-04-18 16:25:29 2020/04/18
0
0

【摘要】 如何在modelarts中使用sfs实现nas挂载

当前运行于专属资源池中的训练作业,可以使用华为公有云 弹性文件系统 服务提供的 SFS Turbo 文件系统。

由于专属资源池默认提供的是网络隔离、资源独占的运行环境,因此在使用 SFS Turbo 之前,需要对专属资源池与 SFS Turbo 所处的网络进行配置,以使得训练作业能访问到 SFS Turbo 文件系统。

下文详细描述在 ModelArts 训练中使用共享文件系统的操作流程。

1.1      专属资源池网络地址

专属资源池(开发环境/训练专用)由 ModelArts 服务托管,网络地址默认为 192.168.20.0/24

1.2      SFS Turbo 网络地址规划

注意到专属资源池的网络地址为 192.168.20.0/24,因此 SFS Turbo 所在的网络地址空间不能与 192.168.20.0/24 地址空间重叠。另外由于底层技术限制,要求网络地址空间网段必须为 192.168 (该限制,在专属资源池网络配置菜单中有说明)

规划 SFS Turbo 所在网络(VPC)的地址空间,例如 192.168.108.0/24 地址空间。

image.png


1.3   创建 SFS Turbo

在已规划好的 VPC Subnet 下创建 SFS Turbo 类型的文件系统


image.png

1.4      配置专属资源池网络

于专属资源池的详情页面中,配置专属资源池网络,与 SFS Turbo 所在的网络连通


image.png


选择前述 SFS Turbo 所在的 VPC Subnet

image.png


1.5      训练作业使用 SFS Turbo

选择已配置好网络的专属资源池

image.png

确定后,计算节点个数 下方会出现 选择区域

image.png


选择前述已创建好的 SFS Turbo

image.png


在训练作业代码中即可通过 /home/work/nas 路径访问 SFS Turbo 文件系统中的数据







登录后可下载附件,请登录或者注册

【版权声明】本文为华为云社区用户原创内容,转载时必须标注文章的来源(华为云社区),文章链接,文章作者等基本信息,否则作者和本社区有权追究责任。如果您发现本社区中有涉嫌抄袭的内容,欢迎发送邮件至:huaweicloud.bbs@huawei.com进行举报,并提供相关证据,一经查实,本社区将立刻删除涉嫌侵权内容。
评论文章 //点赞 收藏 0
点赞
分享文章到微博
分享文章到朋友圈

评论 (0)


0/1000
评论

登录后可评论,请 登录注册

评论

您还没有写博客的权限!

温馨提示

您确认删除评论吗?

确定
取消
温馨提示

您确认删除评论吗?

删除操作无法恢复,请谨慎操作。

确定
取消
温馨提示

您确认删除博客吗?

确定
取消

确认删除

您确认删除博客吗?

确认删除

您确认删除评论吗?

温馨提示

登录超时或用户已下线,请重新登录!!!

确定
取消