1.查看内存
df -h
2.cuda 加载 用模型的方式
model load cuda91/tookit/...
3.切换节点
ssh node0n
nvidia-smi 看当前可使用的显卡数量
4.分屏 切换
tmux 激活
ctrl b 然后"/% 分屏 注意加shift
ctrl b 然后空格 切换布局
ctrl b 然后 o 切换
ctrl b 然后 x 关闭
5.程序后台执行
nohup python3 train.py &
输出定向到日志文件中
nohup python3 train.py > ./cat_dog_logfile.txt &
6.任务提交，以及系统资源查看
sbatch train.sh
squeue 查看任务排队
scancl jodid 取消任务
