运行test.py,标准输出(运行记录)保存在log.txt中
nohup python -u test.py > log.txt 2>&1 &
nohup是no hang up,& 是后台运行,两者结合可以在用户退出时,保持后台运行
-u 是不启用缓存,不然的话print重定向写入文件的过程会有缓存,log.txt文件不会实时更新
2>&1 错误重定向到标准输出
在实验的过程中,我们可能会因为代码bug等各种原因,希望提前停止在后台运行的程序。但是此时可能你已经记不清后台运行的多个程序中,哪一个是我们想要停止的程序。此时可以先通过观察GPU的使用情况命令,获取正在GPU上运行的程序的pid。
watch -n 1 nvidia-smi
在或许到后台运行的程序的pid集合后,我们可以通过以下命令查看每个pid对应的程序,运行后会输出我们运行程序使用的命令以及命令行参数,从而找到需要提前终止的程序。
ps -ef|grep 16923
假设pid为16923的程序就是我们希望提前终止的程序,那么我们使用以下命令提前终止程序的运行。
kill -9 16923