Tensorflow_estimator与moxing代码对比

举报
星月菩提 发表于 2020/11/14 17:25:02 2020/11/14
【摘要】 moxing的编程方式和tensorflow estimator差不多,但是moxing编码更加简化,举例: 同样实现resnet50,moxing只需要100行代码,而tensorflow estimator实现需要1000行

moxing介绍https://github.com/huaweicloud/ModelArts-Lab/tree/master/docs/moxing_api_doc

moxing的编程方式和tensorflow estimator差不多,但是moxing编码更加简化,举例:

同样实现resnet50,moxing只需要100行代码,而tensorflow estimator实现需要1000行

代码见附件


执行方式如下:


1      数据准备

通过下面地址下载数据集

http://download.tensorflow.org/example_images/flower_photos.tgz

解压以后执行下面命令将数据集文件夹结构进行重构

重构以后数据目录变为

|-flowers_dataset

         |-train

                   |-label 目录

2      MoxingTensorflow Estimator训练

从附件中下载代码,解压后上传到obs, 例如上传到’obs://Your-Own-Bucket/juyiming-demo/r50_performance’

 

flowers_dataset上传到obs,例如我上传到’obs://Your-Own-Bucket/juyiming-demo/flowers_dataset’

 

训练作业进行如下配置,


Moxing启动文件选择 mox_trainer.py

tensorflow estimator启动文件选择trainer.py

 

如果运行的作业是1v100增加参数

num_gpu = 1

如果运行的作业是8v100 增加参数

Num_gpu=8


【版权声明】本文为华为云社区用户原创内容,转载时必须标注文章的来源(华为云社区)、文章链接、文章作者等基本信息, 否则作者和本社区有权追究责任。如果您发现本社区中有涉嫌抄袭的内容,欢迎发送邮件进行举报,并提供相关证据,一经查实,本社区将立刻删除涉嫌侵权内容,举报邮箱: cloudbbs@huaweicloud.com
  • 点赞
  • 收藏
  • 关注作者

评论(0

0/1000
抱歉,系统识别当前为高风险访问,暂不支持该操作

全部回复

上滑加载中

设置昵称

在此一键设置昵称,即可参与社区互动!

*长度不超过10个汉字或20个英文字符,设置后3个月内不可修改。

*长度不超过10个汉字或20个英文字符,设置后3个月内不可修改。