第三章 / 实验进度

训练与评测进度

正在连接服务器…

显卡在忙什么

连接后显示两台服务器的全部显卡。

运算占用 显存占用
正在读取 3490 和 A40…

我们的任务

正在读取新任务…

任务 / 显卡当前阶段与进度最近验证 PSNR启动 / 已用时间预计剩余 / 对应结束时间说明与日志
读取中…

默认显示当前任务;完整数据的标准主模型和 Mamba 优先,其后为三组对比训练。已完成任务保留在历史筛选中。总轮次与当前批次分开显示;未提供批次日志的任务不会猜测进度。

历史 AE 训练记录(点击展开,原始记录全部保留)

历史 AE 训练记录

验证成绩来自相同的 89 个病例;比较效果时要看相同轮次。

模型与实验服务器 / 显卡轮次与当前进度最近验证 PSNR每轮用时预计还需 / 结束时间详情
正在读取训练进度…

这些数字怎么看?

轮次
一次完整训练再加一次验证,才算完成一轮。每轮有 710 个训练批次,当前批次是最近一次日志记录的位置。

GPU 与显存
运算占用表示显卡此刻忙不忙;显存占用表示模型占了多少空间。原基准跨两张卡运行,两张卡会轮流忙。

预计结束
取最近最多 5 个已完成轮次的用时中位数,减去本轮已花的时间。最初 1–2 轮标为初估,范围只是计划余量,并非统计置信区间。

断线与更新
本地脚本每 60 秒并行读取两台服务器。断线时显示上次数据并停止估算该机任务;关闭本地监控不会停止服务器训练。