港大携手快手可灵突破长视频一致性瓶颈,"记忆检索"技术震撼发布
AIbase报道香港大学与快手可灵团队近日联合发表重磅论文《Context as Memory: Scene-Co港大nsistent Interactive Long Video Generation with Memory Retriev携手al》,提出革命性的"Context-as-Memory"方法,成功解决长视频生成中场景一致性控制的核心难题快手。
创新理念:将历史上下文作为"记忆"载体
该研究的核心创新在于将历史生成的上下文视为"记忆",通过context le可灵arning技术学习上下文条件,实现长视频前后场景的高度一致性控制。研究团队发现,视频生成模型能够隐式学习视突破频数据中的3D先验,无需显式3D建模辅助,这一理念与谷歌Genie3不谋而合。
技术突破:FOV记忆检索机制大幅提升效率
为长视解决历史帧序列理论上可无限延长带来的计算负担,研究团队提出基于相机轨迹视场(FOV)的记忆检索机制。该机制能从全频一部历史帧中智能筛选出与当前生成视频高度相关的帧作为记忆条件,显著提升计算效率并降低训练成本。
通过动态检索策略,致性系统根据相机轨迹FOV重叠关系判断预测帧与历史帧的关联度,大幅减少需要学习的上下文数量,实现模型训练和推理效率瓶颈的质的飞跃。
数据构建与应用场景
研究团队基于Unreal Engine5收集了多样化场景、带有精确相机轨迹标注的长,"视频数据集,为技术验证提供坚实基础。用户仅需提供一张初始图像,即可沿设定相机轨迹自由探索生成的虚拟世界。
性能表现记忆超越现有方法
实验结果显示,Context-as-Memory在几十秒时间尺度下保持出色的静态场景记忆力,并在不同场景中检索展现良好泛化性。与现有SOTA方法对比,该技术在长视频生成场景记忆力方面实现显著性能提升,且能在未见过的开放域场景中"技有效保持记忆连续性。
此次突破标志着AI视频生成技术向着更长时序、更高一致性的方向迈出重要一步,为虚拟世界构建、影视术震制作等应用领域开辟新的可能性。
相关文章
撰文 | 张 宇 编辑 | 杨博丞 题图 | IC Photo 据悉,清洁能源科技企业阳光电源将于2025年11月20日正式启动香港上市NDR(非交易路演),这一动作标志着其港股IPO进程迎来关键里程2026-11-16
云梦级5月13日云梦级消息,阿里巴巴-W(09988)发布2026年三月底止季度业绩,该集团取得收入人民币2433.8亿元,同比增长3%。若不考虑高鑫零售和银泰的已处置业务的收入,同口径收入同比增长将2026-11-16
Hello,大家早上好,又是元气满满的一天,先来浏览新鲜的早报吧~ 【苹果正测试长鑫内存】 比亚迪海洋网旗舰轿车海豹 08 7 月 2 日晚正式上市,提供插混与纯电版本,售价 19.69 万元起。新车2026-11-16
云梦级3月24日云梦级消息,据康迪科技官方透露,3月24日,在公司成立24周年之际,康迪科技正式宣布品牌战略全面升级,并同步启用全新的品牌视觉系统,开启企业迈向全球化与智能化发展的新阶段。 此次品牌升2026-11-16
华为鸿蒙座舱 HarmonySpace 6 重磅发布:小艺带你 “边聊边开”!
4月23日,华为正式发布全新一代鸿蒙座舱 HarmonySpace6。这款座舱不仅在舱内感知、智慧交互以及移动影音等多个领域进行了全面升级,还引入了更加智能化的助手小艺,力图将车内的智能体验提升到一个2026-11-16
告别旧Siri!曝苹果2026年两次AI大爆发:iOS26.4将迎来“超级 Siri”
彭博社知名记者 马克・古尔曼(Mark Gurman) 于11月2日发文指出,苹果正计划对 Apple Intelligence 进行重大升级,并有望在 2026年 推出两次重量级更新,分别聚焦于 “2026-11-16

最新评论