持续研究中
CUT3R StreamBench
在线三维重建的云边拆分与通信实验
视频中的每一帧,都带来新的空间信息。这个项目以 CUT3R 为基础,比较“上传图像”与“上传编码特征”两条路径,探索在有限通信预算下如何保留对三维重建有用的信息。
查看实验思路阶段性基准规模,依据 2026 年 9 月实验记录。
01 / RESEARCH
持续研究中
在线三维重建的云边拆分与通信实验
视频中的每一帧,都带来新的空间信息。这个项目以 CUT3R 为基础,比较“上传图像”与“上传编码特征”两条路径,探索在有限通信预算下如何保留对三维重建有用的信息。
查看实验思路阶段性基准规模,依据 2026 年 9 月实验记录。
把编码与重建解码放在不同计算端,验证中间特征传输后的输出一致性,建立可比较的系统基线。
端侧编码 / 云端解码考察 FP16、INT8、INT4 等特征表示与熵编码,记录真实二进制码流大小,以及压缩带来的质量变化。
量化编码 / 通信字节同时观察深度、相机位姿与处理时延;按序列汇总结果,保留失败案例和评价口径的修订记录。
深度估计 / 位姿评价从问题到证据
压缩率只是起点。重建质量与系统开销,需要放在同一组实验中理解。
用深度误差与相机位姿误差衡量输出,关注不同场景是否有一致的变化。
统计实际序列化字节数,区分目标帧率下的码率需求与真实网络吞吐。
分别记录编码、传输与解码开销,区分实测处理时间和网络条件下的估算。
02 / FIELD NOTES
从项目记录中整理的三则笔记,点击标题展开阅读。
在深度估计任务里,预测图与真实深度图必须对应到相同的图像区域。输入发生中心裁剪后,如果直接将预测拉伸到整张真实深度图,数值仍能被计算出来,却已经失去了正确的像素对应。
项目在复核中修正了这一问题,改用官方不裁剪预处理,并重新执行基准测试。受旧评价口径影响的历史精度结论不再作为正式证据。
记录要点:预处理、坐标变换与评价掩码,是实验协议的一部分。
上传压缩特征可以减少部分方案的通信量,但还会引入端侧编码、量化与恢复开销。图像上传基线也需要公平设置:先缩放到模型实际使用的分辨率,再进行 JPEG 编码,往往与直接压缩原尺寸图像有明显差别。
因此,实验同时保留图像和特征两条路径,统计真实码流,并分别评价深度与位姿。当前结果尚不能证明特征上传全面优于图像上传,也不能将估算时延当作真实网络收益。
记录要点:好的基线和明确的适用条件,比单一压缩比更有解释力。
统一配置、固定帧列表、按序列独立评价,再汇总结果,可以降低重复实验中的口径漂移。模型拆分、可逆字节协议和编解码模块也分别验证,避免把系统问题误判为算法问题。
对通信字节、任务质量与处理时间分别保存结果,记录预热范围、有效样本和失败条件。阶段报告保留探索中的负面结果,让后续判断有可追溯的依据。
记录要点:可复现不仅是保留代码,也包括说明测量了什么、没有证明什么。
内容整理自个人 CUT3R StreamBench 项目记录,更新至 2026 年 9 月。CUT3R 为所使用的研究基础模型;本站展示个人实验与学习记录。
03 / ABOUT
这里是一个个人科研与技术记录网站,用于整理本科阶段的研究过程、阶段性成果与工程经验。在提出问题、搭建实验与修正认识的过程中,留下清晰、诚实、可回看的记录。