建议使用以下浏览器,以获得最佳体验。 IE 9.0+以上版本 Chrome 31+ 谷歌浏览器 Firefox 30+ 火狐浏览器
请选择 进入手机版 | 继续访问电脑版
设置昵称

在此一键设置昵称,即可参与社区互动!

确定
我再想想
选择版块
直达楼层
标签
您还可以添加5个标签
  • 没有搜索到和“关键字”相关的标签
  • 云产品
  • 解决方案
  • 技术领域
  • 通用技术
  • 平台功能
取消

采纳成功

您已采纳当前回复为最佳回复

DrDr

发帖: 6粉丝: 0

发消息 + 关注

发表于2021年04月06日 15:59:05 90 2
直达本楼层的链接
楼主
显示全部楼层
[问题求助] 【模型训练】【mindinsight】timeline的时间和实际用时相差很远

【功能模块】

【模型训练】【mindinsight】【timeline】


【操作步骤&问题现象】

1、训练模型,跑了两个epoch,耗时大概十分钟

2、下载timeline

image.png

3、导入到chrome的tracing功能中


【截图信息】

timeline:

image.png

看到timeline中颜色条集中在两个地方,一个是0days附近,一个是在2.315days前那里。从timeline上看一个用时超过1天。而且在下载timeline的那个地方,显示Total operator execution time:597285262.1108ms,相当于6.9天


但从loss-step的折线图看,2个epoch总共才用了624秒:

image.png


为什么程序实际上只跑了十分钟,但timeline那里却显示那么久?


举报
分享

分享文章到朋友圈

分享文章到微博

采纳成功

您已采纳当前回复为最佳回复

chengxiaoli

发帖: 154粉丝: 25

级别 : 版主,版块专家

发消息 + 关注

发表于2021年04月06日 16:35:45
直达本楼层的链接
沙发
显示全部楼层

您好,欢迎使用MindSpore。正在联系专家分析定位,会尽快给您答复。

评论
chengxiaoli 4 天前 评论

您好,感谢您的提问,您这里的问题和您另一篇帖子的问题相似,我们的专家将在哪里解答,请关注哦,谢谢。https://bbs.huaweicloud.com/forum/thread-119082-1-1.html

... 查看全部
点赞 评论 引用 举报

采纳成功

您已采纳当前回复为最佳回复

ttandqq

发帖: 0粉丝: 0

发消息 + 关注

更新于2021年04月08日 14:38:35
直达本楼层的链接
板凳
显示全部楼层

您好,方便把生成的profiler的数据发一份吗?我们确认下,timeline的图有点模糊

评论
DrDr 前天 15:52 评论

已经私信给您了。我们后来修改了代码,发给您的是我们最新跑的结果。但timeline的问题依然存在。

... 查看全部
DrDr 前天 15:59 评论

然后能否协助我们定位一下TransData算子耗时占比那么高的原因?TransData应该是自动插入,用来转换数据排布的,要如何定位到是哪些算子导致了TransData?我在计算图中找不到TransData算子

... 查看全部
点赞 评论 引用 举报

游客

富文本
Markdown
您需要登录后才可以回帖 登录 | 立即注册

邀请回答
您可以邀请3位专家

结贴

您对问题的回复是否满意?
满意度
非常满意 满意 一般 不满意
我要反馈
0/200