本地搭建Tensorflow环境模拟ModelArts(二)

举报
李国有 发表于 2019/07/21 22:57:19 2019/07/21
【摘要】 在本地Tensoflow环境部署完成后、开始进行了本的训练学习、第一次训练按照正常的指导手册进行操作、在训练的时候发现在。因为配置太低训练时间太长长 一次Epoch 的训练时间超过了20分钟。而华为云提供的GPU Notebook训练时间只有三分钟左右差太多了训练营第三期的任务就是“模型参数&网络调优”、所以开始我的折腾之路吧(最后结果如下) 1:修改图像大小 ...

在本地Tensoflow环境部署完成后、开始进行了本的训练学习、第一次训练按照正常的指导手册进行操作、在训练的时候发现在。因为配置太低训练时间太长长

image.png

  一次Epoch 的训练时间超过了20分钟。而华为云提供的GPU Notebook训练时间只有三分钟左右差太多了

image.png


训练营第三期的任务就是“模型参数&网络调优”、所以开始我的折腾之路吧(最后结果如下)

    1:修改图像大小

    image.png

    

    测试结果如下:

    image.png

    测试结果确认发现速度提高了很多、目前一轮的时间只有10分钟左右


    2:修改数据集的大小、默认的数据有25000个、本地测试可以使用部分、如下代码只随机取之中8000个数据进行测试

    image.png


    最后结果我们一轮的训练所需要的时间和在华为云GPU平台上差不多了。

    image.png



以上的测试只是为了在本地验证数据代码的完整性、在我们进行了一定的代码调整、优化或者、选择不同的结构进行训练时、我们可以使用小的训练集和本地的环境进行验证、也可以更好的记录我们在调试过程中的所有记录信息、方便后期归档查看。但是最后为了验证我们的方法或者借用的架构是否有效、还是要用大的数据收集和、更好的图像效果在华为云中所的提供的GPU平台进行验证。

        

【版权声明】本文为华为云社区用户原创内容,转载时必须标注文章的来源(华为云社区)、文章链接、文章作者等基本信息, 否则作者和本社区有权追究责任。如果您发现本社区中有涉嫌抄袭的内容,欢迎发送邮件进行举报,并提供相关证据,一经查实,本社区将立刻删除涉嫌侵权内容,举报邮箱: cloudbbs@huaweicloud.com
  • 点赞
  • 收藏
  • 关注作者

评论(0

0/1000
抱歉,系统识别当前为高风险访问,暂不支持该操作

全部回复

上滑加载中

设置昵称

在此一键设置昵称,即可参与社区互动!

*长度不超过10个汉字或20个英文字符,设置后3个月内不可修改。

*长度不超过10个汉字或20个英文字符,设置后3个月内不可修改。