Luma上线Ray3 Modify:AI视频编辑再进阶,表演细节无损保留,一键换装与换景

AI视频生成迎来一次重要升级。由a16z投资的3D与AI视频公司Luma AI近日发布全新模型 Ray3Modify,首次在不改变演员原有表演神韵的前提下,对现有实拍素材进行高保真AI改造——不论是替换角色外貌、切换服装、更换场景,还是生成顺滑的过渡镜头,演员的动作节奏、视线方向与情绪表达都能被完整保留。

这项能力直击创意团队的核心痛点:许多AI视频工具虽能产出惊艳画面,却难以精细控制,导致演员的真实表演在后期被削弱。Ray3Modify通过引入角色参考图(character reference image)与起止关键帧(start/end frames),实现“表演不变、呈现可变”的精准编辑。

image.png

实际使用时,创作者只需提供一段实拍视频和目标角色的形象参考(如动漫人物、历史角色或品牌虚拟代言人),Ray3Modify即可把演员的外观自然替换为新角色,同时忠实保留其原始表演——包含细微的表情变化、肢体语言与情绪张力。此外,通过设定起始与结束帧,还能引导AI生成可控的过渡镜头,实现角色行走、转身、表情渐变等连贯动作,确保叙事衔接顺畅。

“生成式视频很有表现力,但常常难以掌控,”Luma AI联合创始人兼CEO Amit Jain表示,“Ray3Modify把真实拍摄与AI的创造力结合起来,赋予创作者更强控制力。现在,团队只要用普通相机拍一次表演,就能用AI把它放进任何想象的场景——换装、换地点,甚至‘再拍一遍’,无需重搭布景或再次召集演员。”

目前,该模型已接入Luma的 Dream Machine 平台,面向专业创作者开放。作为Runway、Kling等公司的有力竞争者,Luma此次更新进一步巩固了其在可控生成视频领域的技术优势。

此次发布同样受益于强劲资本支持:2024年11月,Luma完成9亿美元融资,由沙特主权财富基金旗下AI公司Humain领投,a16z、Amplify Partners、Matrix Partners等老股东跟投。据悉,Luma还计划与Humain在沙特共建一座2GW级AI算力集群,为未来高负载的视频生成任务提供基础设施保障。

当AI不再只是“生成内容”,而是“增强表演”,影视、广告、游戏等行业的工作流或将被重塑——真实人类的表演力与AI的想象力,终于能在同一帧画面中相辅相成。

爱智特-AI智能体一站式企业智能体交易学习发行平台|智能体教程|智能体社区
© 版权声明
THE END
喜欢就支持一下吧
点赞10 分享