希柯克技术备忘录

个人科研与技术档案 / 2026

从一帧图像,
探索三维世界。

记录本科阶段的科研探索与工程实践。
关注三维视觉、云边协同,以及让实验结果可复核的每一个细节。

了解研究项目
计算机视觉三维重建实验与复现
研究路线示意FIG. 01
从二维图像到三维表示的云边协同示意图 左侧连续图像经端侧编码与特征传输,在右侧云端形成三维空间表示。本图是方法示意,不是实验重建结果。 连续图像特征传输三维空间表示 INPUT FRAMES3D REPRESENTATION
01 端侧编码02 压缩通信03 云端重建
将视觉计算拆分到端与云,观察质量、通信与时延之间的关系。

01 / RESEARCH

正在探索的课题

让问题具体,让结论有据可查。

持续研究中

CUT3R StreamBench

在线三维重建的云边拆分与通信实验

视频中的每一帧,都带来新的空间信息。这个项目以 CUT3R 为基础,比较“上传图像”与“上传编码特征”两条路径,探索在有限通信预算下如何保留对三维重建有用的信息。

查看实验思路
3评估数据集Bonn · Sintel · KITTI
75序列 / 相机分组按组独立评估
4,924评估帧统一预处理与评价口径

阶段性基准规模,依据 2026 年 9 月实验记录。

01

模型的云边拆分

把编码与重建解码放在不同计算端,验证中间特征传输后的输出一致性,建立可比较的系统基线。

端侧编码 / 云端解码
02

低精度特征通信

考察 FP16、INT8、INT4 等特征表示与熵编码,记录真实二进制码流大小,以及压缩带来的质量变化。

量化编码 / 通信字节
03

可复核的实验评估

同时观察深度、相机位姿与处理时延;按序列汇总结果,保留失败案例和评价口径的修订记录。

深度估计 / 位姿评价

从问题到证据

一次实验,
三种观察尺度。

压缩率只是起点。重建质量与系统开销,需要放在同一组实验中理解。

  1. Q

    重建质量

    用深度误差与相机位姿误差衡量输出,关注不同场景是否有一致的变化。

  2. B

    通信成本

    统计实际序列化字节数,区分目标帧率下的码率需求与真实网络吞吐。

  3. T

    处理时延

    分别记录编码、传输与解码开销,区分实测处理时间和网络条件下的估算。

02 / FIELD NOTES

实验之外,也记录过程

一些值得留下的技术备忘。

从项目记录中整理的三则笔记,点击标题展开阅读。

01实验方法先对齐像素,再讨论模型精度

在深度估计任务里,预测图与真实深度图必须对应到相同的图像区域。输入发生中心裁剪后,如果直接将预测拉伸到整张真实深度图,数值仍能被计算出来,却已经失去了正确的像素对应。

项目在复核中修正了这一问题,改用官方不裁剪预处理,并重新执行基准测试。受旧评价口径影响的历史精度结论不再作为正式证据。

记录要点:预处理、坐标变换与评价掩码,是实验协议的一部分。

02通信与系统更少的字节,不一定意味着更好的系统

上传压缩特征可以减少部分方案的通信量,但还会引入端侧编码、量化与恢复开销。图像上传基线也需要公平设置:先缩放到模型实际使用的分辨率,再进行 JPEG 编码,往往与直接压缩原尺寸图像有明显差别。

因此,实验同时保留图像和特征两条路径,统计真实码流,并分别评价深度与位姿。当前结果尚不能证明特征上传全面优于图像上传,也不能将估算时延当作真实网络收益。

记录要点:好的基线和明确的适用条件,比单一压缩比更有解释力。

03工程实践把一次运行,变成一组可以复核的实验

统一配置、固定帧列表、按序列独立评价,再汇总结果,可以降低重复实验中的口径漂移。模型拆分、可逆字节协议和编解码模块也分别验证,避免把系统问题误判为算法问题。

对通信字节、任务质量与处理时间分别保存结果,记录预热范围、有效样本和失败条件。阶段报告保留探索中的负面结果,让后续判断有可追溯的依据。

记录要点:可复现不仅是保留代码,也包括说明测量了什么、没有证明什么。

内容整理自个人 CUT3R StreamBench 项目记录,更新至 2026 年 9 月。CUT3R 为所使用的研究基础模型;本站展示个人实验与学习记录。

03 / ABOUT

希柯克技术备忘录

这里是一个个人科研与技术记录网站,用于整理本科阶段的研究过程、阶段性成果与工程经验。在提出问题、搭建实验与修正认识的过程中,留下清晰、诚实、可回看的记录。

网站性质
个人非商业网站
记录方向
科研探索与技术经验
服务语言
中文简体