OmniCam由全景图生成相机轨迹
热点事件观察中
OmniCam由全景图生成相机轨迹
1 篇报道1 个报道来源1 天前更新
先了解这件事
AI 综述
Zhenyang Liu等提出OmniCam,利用单张全景图像和文本描述自回归生成相机位姿序列,并通过几何与语义条件、显式3D目标锚点约束轨迹。团队同时构建含四类相机行为、26.77万条轨迹的OmniCaT数据集。 论文摘要报告,在OmniCaT评测中,OmniCam相较于用该数据集重训的GenDoP,轨迹误差降低28%—47%、碰撞率降低65.8%;相较各指标的最佳基线,ATE降低43.0%、碰撞率降低62.3%。消融实验支持几何和目标感知条件的作用,研究还在相机控制视频生成和机器人主动感知任务中进行了下游实验。
AI 根据报道生成 · 30 分钟前更新
最新进展10月7日 14:08
OmniCam通过几何引导的位姿Token生成全景相机轨迹报道时间线
沿着报道,了解事件的不同侧面。
10月7日
- arXiv · cs.AIOmniCam通过几何引导的位姿Token生成全景相机轨迹
研究作者提出OmniCam,一种从单张全景图像和文本轨迹描述生成相机位姿序列的自回归模型。该模型结合全景点云编码、绝对旋转与相对平移的混合Token化,以及几何和语义双条件流,并使用显式3D目标锚点。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。