有时候用nvidia-smi看不到进程但是内存都满了,可能是有些进程没有kill
2021/5/14 7:29:15
本文主要是介绍有时候用nvidia-smi看不到进程但是内存都满了,可能是有些进程没有kill,对大家解决编程问题具有一定的参考价值,需要的程序猿们随着小编来一起学习吧!
最近遇见很尴尬的问题,这几天GPU一直是很满的状态 但是我又看不见进程nvidia-smi,如下:
因为我目前正在用2跑代码,我发现23占内存一样,好嘛那我就有理由相信问题是我了,可能是我没有杀死进程,悄咪咪的要在被发现之前解决这个问题才行,并且不能断掉我自己现在跑了很久的2的代码!
网上有的答案是用fuser,
fuser -v /dev/nvidia*
但是我不想再装了,于是找到了一个更简单的方法!
出来的结果如下,好家伙不愧是我!果然是我!但是我不记得是哪个该杀死了,好在目前正在运行的代码写了日志,打开日志一看就知道要哪个进程不要哪个进程了!
找到罪魁祸首是我应该停掉第一行的代码,然后直接
kill -9 【pid】
就可以了!这个pid在这里就是701
再看3已经被空出来了,因为之前这个应该杀死的进程701在GPU3上面运行着!
这篇关于有时候用nvidia-smi看不到进程但是内存都满了,可能是有些进程没有kill的文章就介绍到这儿,希望我们推荐的文章对大家有所帮助,也希望大家多多支持为之网!
- 2024-07-04TiDB 资源管控的对撞测试以及最佳实践架构
- 2024-07-03万字长文聊聊Web3的组成架构
- 2024-07-02springboot项目无法注册到nacos-icode9专业技术文章分享
- 2024-06-26结对编程到底难不难?答案在这里
- 2024-06-19《2023版Java工程师》课程升级公告
- 2024-06-15matplotlib作图不显示3D图,怎么办?
- 2024-06-1503-Loki 日志监控
- 2024-06-1504-让LLM理解知识 -Prompt
- 2024-06-05做软件测试需要懂代码吗?
- 2024-06-0514-ShardingSphere的分布式主键实现