1.nvidia-smi    查看gpu占用情况

   kill -9 PID

清理进程后显示没有PID, 运行还是继续报错

2. sudo fuser -v /dev/nvidia*   会显示 top 命令隐藏的 进程

 批量kill 进程  ：pkill -u user 或 killall -u user, 解决kill的线程太多。