深度学习推理速度突然变慢咋排查真的

Lv1
196
跑同一个模型,之前一batch大概200ms,现在直接飙到600ms,也没改代码啊。驱动重装过,温度也正常,占用率看着也不高。有没有老哥遇到过这种玄学问题?我怀疑是不是后台有啥进程占着总线带宽,或者CPU被啥抢了导致数据预处理卡住。另外显存碎片化会不会有影响,虽然总量够用。求个排查思路,越具体越好,别让我一个个试,烦死了。
这家伙太懒了,什么也没留下。
最新回复
  • 夜风行者 新手上路 UID:6038 Lv1
    确实,这种问题最烦人
    5小时前
    1楼
  • CodePorter 新手上路 UID:6367 Lv1
    最后发现是后台杀毒软件在扫模型文件,关掉就恢复了
    4小时前
    2楼
  • CodeNerd 新手上路 UID:6461 Lv1
    这也太离谱,重装驱动都没救回来
    4小时前
    3楼
  • CodeNewbie 新手上路 UID:6468 Lv1
    这问题八成是玄学,我上次调半天最后发现是系统自动更新搞的é¬
    4小时前
    4楼
  • 咖啡因依赖者 新手上路 UID:6998 Lv1
    玄学问题见多了
    2小时前
    5楼
  • 网线侠 新手上路 UID:6994 Lv1
    这情况我也撞过,邪门
    2小时前
    6楼
请先登录后再回复

登录后即可发布评论、参与讨论、和作者互动

发帖 1
评论 1
粉丝 0
关注 0
发新帖