公里级场景也能稳住了，国产团队把长视频3D重建又往前推了一步
公里级场景也能稳住了，国产团队把长视频3D重建又往前推了一步长视频 3D 重建最怕的，其实不是 "看不清"。
来自主题: AI技术研报
8400 点击 2026-05-06 14:30
# 热门搜索 #
大模型
人工智能
openai
融资
chatGPT
搜索
长视频 3D 重建最怕的，其实不是 "看不清"。
在生成式视频快速发展的今天，模型已经能够生成高质量的短视频片段，但一个更具挑战性的问题正逐渐成为研究焦点：
随着多模态大语言模型（MLLM）支持更长上下文，高分辨率图像和长视频会产生远多于文本的视觉 Token，在自注意力二次复杂度下迅速成为效率瓶颈。
打破多模态视觉+语言拼接套路！
自回归视频生成越往后越崩的问题有救了！
随着高分辨率图像理解与长视频处理需求的爆发式增长，大型视觉语言模型（LVLMs）所需处理的视觉 Token 数量急剧膨胀，推理效率成为落地部署的核心瓶颈。Token 压缩是缩短序列、提升吞吐的直接手段，但现有方法普遍依赖注意力权重来判断 Token 重要性，这一路线暗藏两个致命缺陷：
近年来多模态大模型在视觉感知，长视频问答等方面涌现出了强劲的性能，但是这种跨模态融合也带来了巨大的计算成本。高分辨率图像和长视频会产生成千上万个视觉 token ，带来极高的显存占用和延迟，限制了模型的可扩展性和本地部署。
OpusClip 是一款把长视频、长内容自动剪成可发布的短视频片段的 AI 工具，服务内容创作者和企业内容团队。
上海AI Lab联合多家机构开源的Yume1.5，针对这一核心难题提出了时空信道联合建模（TSCM），在长视频生成中实现了近似恒定计算成本的全局记忆访问。
大部分的高质量视频生成模型，都只能生成上限约15秒的视频。清晰度提高之后，生成的视频时长还会再一次缩短。