第三章 / 实验进度
训练与评测进度
正在连接服务器…
显卡在忙什么
连接后显示两台服务器的全部显卡。
正在读取 3490 和 A40…
当前训练、评测与准备任务
读取中…
正在读取真实训练日志
—运行中
—待启动
—需留意
按最近完成轮次估算,包含验证时间。
我们的任务
正在读取新任务…
| 任务 / 显卡 | 当前阶段与进度 | 最近验证 PSNR | 启动 / 已用时间 | 预计剩余 / 对应结束时间 | 说明与日志 |
|---|---|---|---|---|---|
| 读取中… | |||||
默认显示当前任务;完整数据的标准主模型和 Mamba 优先,其后为三组对比训练。已完成任务保留在历史筛选中。总轮次与当前批次分开显示;未提供批次日志的任务不会猜测进度。
历史 AE 训练记录(点击展开,原始记录全部保留)
历史 AE 训练记录
验证成绩来自相同的 89 个病例;比较效果时要看相同轮次。
| 模型与实验 | 服务器 / 显卡 | 轮次与当前进度 | 最近验证 PSNR | 每轮用时 | 预计还需 / 结束时间 | 详情 |
|---|---|---|---|---|---|---|
| 正在读取训练进度… | ||||||
这些数字怎么看?
轮次
一次完整训练再加一次验证,才算完成一轮。每轮有 710 个训练批次,当前批次是最近一次日志记录的位置。
GPU 与显存
运算占用表示显卡此刻忙不忙;显存占用表示模型占了多少空间。原基准跨两张卡运行,两张卡会轮流忙。
预计结束
取最近最多 5 个已完成轮次的用时中位数,减去本轮已花的时间。最初 1–2 轮标为初估,范围只是计划余量,并非统计置信区间。
断线与更新
本地脚本每 60 秒并行读取两台服务器。断线时显示上次数据并停止估算该机任务;关闭本地监控不会停止服务器训练。