当前位置:网站首页>MindSpore:【模型训练】【mindinsight】timeline的时间和实际用时相差很远
MindSpore:【模型训练】【mindinsight】timeline的时间和实际用时相差很远
2022-07-30 19:04:00 【小乐快乐】
问题描述:
【功能模块】
【模型训练】【mindinsight】【timeline】
【操作步骤&问题现象】
1、训练模型,跑了两个epoch,耗时大概十分钟
2、下载timeline

3、导入到chrome的tracing功能中
【截图信息】
timeline:

看到timeline中颜色条集中在两个地方,一个是0days附近,一个是在2.315days前那里。从timeline上看一个用时超过1天。而且在下载timeline的那个地方,显示Total operator execution time:597285262.1108ms,相当于6.9天
但从loss-step的折线图看,2个epoch总共才用了624秒:

为什么程序实际上只跑了十分钟,但timeline那里却显示那么久?
解决方案:
是AIcpu和AIcore算子的时间戳没有对齐。我们正在修复,会尽快合入master分支。您可以基于现有的timeline文件,主要关注AIcore算子的信息(Process 0下的算子)进行性能分析。
边栏推荐
- - daily a LeetCode 】 【 191. A number of 1
- 还有三天忙完
- LeetCode每日一题(1717. Maximum Score From Removing Substrings)
- NC | Tao Liang Group of West Lake University - TMPRSS2 "assists" virus infection and mediates the host invasion of Clostridium sothrix hemorrhagic toxin...
- 微信小程序云开发 | 城市信息管理
- Entering the applet for the first time
- vxe-table实现复选框鼠标拖动选中
- Delay queue optimization (2)
- 【剑指 Offe】剑指 Offer 18. 删除链表的节点
- Codeblocks + Widgets create window code analysis
猜你喜欢

【Pointing to Offer】Pointing to Offer 18. Delete the node of the linked list

SimpleOSS第三方库libcurl与引擎libcurl错误解决方法

Recommendation | People who are kind to you, don't repay them by inviting them to eat

ctf.show_web5

SwiftUI iOS Boutique Open Source Project Complete Baked Food Recipe App based on SQLite (tutorial including source code)

nlohmann json 使用指南【visual studio 2022】

Basic use of scrapy

解决终极bug,项目最终能顺利部署上线。

【网站放大镜效果】两种方式实现

一文读懂“语言模型”
随机推荐
牛客刷题系列之进阶版(组队竞赛,排序子序列,倒置字符串, 删除公共字符,修理牧场)
LeetCode Exercise - Two Questions About Finding Sum of Array Elements
常见链表题及其 Go 实现
【Pointing to Offer】Pointing to Offer 22. The kth node from the bottom in the linked list
【Pointing to Offer】Pointing to Offer 18. Delete the node of the linked list
第十七届“振兴杯”全国青年 职业技能大赛——计算机程序设计员(云计算平台与运维)参赛回顾与总结
- daily a LeetCode 】 【 191. A number of 1
跨域问题的解决方法
Chapter 14 Type Information
SwiftUI iOS 精品开源项目之 完整烘焙食品菜谱App基于SQLite(教程含源码)
你好,我的新名字叫“铜锁/Tongsuo”
Go system collection
【Prometheus】Prometheus联邦的一次优化记录[续]
C# wpf borderless window add shadow effect
VBA batch import Excel data into Access database
设计消息队列存储消息数据的 MySQL 表格
自己需要努力
golang日志库zerolog使用记录
MongoDB打破了原则引入SQL?
"Ruffian Heng Embedded Bimonthly" Issue 59