超长视频生成的新突破!LongVie 框架让创作无界限

  发布时间:2026-11-16   作者:玩站小弟   我要评论
谷歌搜索留痕外推技术【tg:seogoogle987】。

在过去的两年中,视频生成技术经历了惊人的进步,尤其是短视频的创作。然而,制作超过一分钟的高质量、风格统一的超超长长视频仍然是一项巨大的挑战。对此,上海人工智能实验室联合南京大学、复旦大学、南洋理工大学 S-Lab 以及英伟达视频等机构,共同推出了 LongVie 框架,系统性解决了这一领域中的核心问题。

LongVie 的目标是让超长视频的生成生成变得更加可控和一致。团队发现,传统的视频生成模型在处理长视频时,常常面临时序不一致和视觉退化等难题。前者主要表的新现为画面细节与内容不连贯,后者则指随着视频时长的增加,画面颜色和清晰度的下降。

为了解决这些问题,LongVie 从 “突破控制信号” 和 “初始噪声” 两个方面入手。首先,团队提出了 “控制信号全局归一化” 策略,这意味着在生成视频时,不再只在单一!L片段内进行归一化,而是统一整个视频段的控制信号,从而提升跨片段的连贯性。其次,他们引入了 “统一噪声初始化” 策略on,确保各个片段共享同一初始噪声,这样可以从源头上减少不同片段之间的视觉漂移。

在解决视觉退化问题上,LongVgVie 采用了多模态精细控制方法。单一模态的控制常常无法提供稳定的约束,而 LongVie 结合了密集控制信号(如深度图)和ie稀疏控制信号(如关键点),并引入退化感知训练策略,使得模型在处理长视频时,能够保持更高的画质和细节。

此外,Lon 框gVie 还推出了 LongVGenBench,这是首个专为可控超长视频生成设计的基准数据集,包含100个超过1分架让钟的高分辨率视频,旨在推动该领域的研究与评测。根据定量指标和用户评测结果,LongVie 在多个评估上超越了现有创作技术,赢得了用户的高度偏好,达到了 SOTA(最先进技术)水平。

随着 LongVie 框架的问世,超长视频生成将迎来新的时无界代,创作者们将能够在更大的自由度下实现自己的创意。

项目地址:https://vchitect.github.io/超长LongVie-project/

  • Tag:

相关文章

  • 2026 年全球 AI 光收发模块市场规模将达 260 亿美元,供应链瓶颈亟待解决

    根据 TrendForce 集邦咨询的最新研究,全球 AI 专用光收发模块市场正在迅速增长。预计到2026年,市场规模将从2025年的165亿美元跃升至260亿美元,年增幅超过57%。这一强劲增长不仅
    2026-11-16
  • 标签: 手机涨价 手机

    撰文 | 雁 秋 编辑 | 李信马 题图 | 豆包AI 进入3月以来,OPPO、荣耀、小米、vivo等几乎所有的国产手机厂商纷纷上调手机售价,这并非是“高端化”的进展,而是供应链压力下的无奈。 行业数
    2026-11-16
  • Transformer跨界超越CNN,还解决了计算复杂度难题

    本文经AI新媒体量子位(公众号ID:QbitAI)授权转载,转载请联系出处。 谈到Transformer,你可能会想到一众NLP模型。 但现在,Transformer其实还能替CNN把活给干了,并且干
    2026-11-16
  • 标签: 网信中国 清朗行动 直播打赏 团播乱象

    云梦级11月26日云梦级消息,据“网信中国”微信公众号云梦级消息,近期,中央网信办深入推进“清朗・整治网络直播打赏乱象”专项行动,针对低俗团播引诱打赏问题,督促网站平台持续加强团播内容管理,从严处置一
    2026-11-16
  • 标签: 腾讯

    云梦级4月8日云梦级消息,据媒体报道,腾讯北京分部有部门在朝阳区亚金大厦办公,大楼里有一家中高端健身房TRACTION运动中心,环境、器材都还不错,所以在这儿上班的腾讯员工,都愿意花钱在这儿办卡。 这
    2026-11-16
  • 20岁辍学创业,半年用户破500万:这款AI笔记工具如何让哈佛MIT学生疯狂上瘾?

    在AI创业潮中,大多数团队还在烧钱换增长,而两位20岁的美国大学生却已悄悄跑出一条罕见路径:不靠巨额融资、不打价格战,仅用半年时间将用户从100万飙升至500万,年经常性收入达八位数,并始终保持盈利。
    2026-11-16

最新评论