炒股就看金麒麟分析师研报,权威,专业,及时,全面,助您挖掘潜力主题机会!
来源:人民网-上海频道
人民网上海7月13日电 上海交大团队近日正式发布面向视频媒体制作的“世界叙事模型”(World Narrative Model, WNM。与目前机器人领域用于物理理解和行动规划的“世界模型”不同,“世界叙事模型”目标不是让机器理解物理世界,而是让创作者与AI协同构建可编辑、可交互的叙事时空,实现对视频生成全要素的精确控制,为长期困扰AI影视制作行业的“不可控”难题提供系统性解决方案。
该项研究由上海交大张文军院士团队的倪冰冰教授所提出并领导。该团队自2016年起便率先开展智能内容生成研究,在高可控图像/视频生成领域拥有近十年的技术积累与原创性成果。随着世界叙事模型的开源与推广,AI视频创制有望迎来从“能生成”到“能控制”的范式革命,为全球影视工业释放全新的创作生产力。
AI视频生成火热,但“不可控”成产业“阿喀琉斯之踵”
当前,AIGC特别是AI视频生成与微短剧制作热度不减,但行业始终面临一个根本性瓶颈——不可控。专业创作者使用主流视频生成模型时,往往陷入“抽卡式”低效循环:为获得一个符合基本要求的镜头,平均需生成20至50次;在追求高精度控制的精品制作中,单镜头抽卡次数更高达7次以上,有效生成成功率不足50%。究其根源,当前主流视频生成模型本质上是像素空间的“黑盒概率采样器”—输入文本指令稀疏、输出像素高维稠密,中间缺乏对物理世界的显式建模,导致生成结果无法精确控制、无法局部修改、无法保证长时序一致性,更无法满足导演对镜头语言、角色动作、光影氛围的专业级操控需求。
AI 视频产业的虚假繁荣与真实困境
“世界叙事模型”破局:从“概率抽卡”到“确定性创作”
针对上述痛点,研发团队创造性地提出“世界叙事模型”,打破传统端到端视频生成的固有范式,建立“控制器+绘图器”两阶段视频生成新架构。
“控制器”+“渲染器”的视频内容生成新范式
在这一全新范式中,“控制器”即世界叙事模型,承担“理解物理世界、规划叙事结构”的职能——将导演的创作意图(剧本、分镜、参考图)自动转化为包含场景几何、人物骨骼、道具摆放、动作动线、运镜轨迹、灯光参数等全维度要素的结构化物理参数序列,构建出一个完整、可编辑、可交互的3D+T(三维空间+时间)数字仿真世界。这一过程相当于为导演提供了一套完整的数字编导预演系统:从布景、人物、道具,到动作、走线、运镜、灯光、氛围,全部通过世界叙事模型自动生成。
“绘图器”则由现有的视频生成大模型(如Kling、Seedance、Wan等)担任——世界叙事模型将结构化物理参数通过标准化适配接口注入基模,使其降维为受控的“神经着色器”,在确定性的物理骨架基础上完成像素级渲染。
更重要的是,世界叙事模型为专业创作者提供了全维度物理参数的人机操控接口——导演可直接调整场景几何、人物动作细节、动线路径、运镜轨迹参数、灯光位置与色温等,所有修改实时生效、确定可控。创作者告别“抽卡”式反复试错,在虚拟世界中如同过去实地拍摄一样流程化工作,精准把控每一个创作细节,聚焦内容本身而非与概率模型博弈。
世界叙事模型技术架构
全新生成范式,无缝协同现有全部视频基模
据团队介绍,“世界叙事模型”架构有望成为影视创作的新一代技术范式。该模型可与市面上所有主流视频生成基模(包括开源与闭源模型)无缝协同工作——不替代任何基模,而是为基模装上“专业方向盘”,使其从“概率采样器”升级为“受控绘图器”。通过将“理解物理世界”与“渲染视觉像素”两大任务解耦,世界叙事模型从根源上解决了长时序一致性差、物理逻辑崩塌、专业操控缺失等行业共性难题。用户实验数据表明,采用该模型后,单镜头编辑轮次可从20-50次降至3次以内,制作周期从数天压缩至24小时以内,专业创作者满意度超过80%。
世界叙事模型与基线方法的用户测试对比
目前,“世界叙事模型”已实现工程化落地,并已完成大规模测试验证,覆盖室内外场景、单人及多人交互动作、推拉摇移跟升降等多种运镜类型。测试结果表明,模型在场景一致性、动作与动线控制、运镜精度等维度均显著优于现有主流控制方案。团队已公开发布技术成果,影视创作者可在线申请测试使用。
基于世界叙事模型控制的视频生成典型案例(左:世界叙事模型表征,右:生成视频;可关注布景、动作、动线、运镜质量)
在2026年5月召开的中国图像图形大会(CCIG 2026)上,张文军院士应邀作题为《世界叙事模型与高可控视频生成》的主旨报告。张文军院士指出:“视频生成的下一个分水岭是‘可控性’,可控性的基石是物理孪生式的世界叙事模型。”世界叙事模型的提出,不仅为AI视频从“概率抽卡”迈向“确定性创作”提供了可行的技术路径,更为影视制作、数字孪生、沉浸式交互、智能通信等应用场景提供了可扩展的关键技术支撑。
新浪声明:此消息系转载自新浪合作媒体,新浪网登载此文出于传递更多信息之目的,并不意味着赞同其观点或证实其描述。文章内容仅供参考,不构成投资建议。投资者据此操作,风险自担。
海量资讯、精准解读,尽在新浪财经APP
责任编辑:杨红卜
友兴网配资提示:文章来自网络,不代表本站观点。