Luma发布革命性AI模型:仅需起始帧与结束帧即可生成完整视频
AI视频与3D建模公司Luma推出了全新AI模型Ray3 Modify,允许用户通过起始帧和结束帧生成过渡视频,并结合角色参考图像对现有影像进行精准修改。该模型旨在解决AI生成视频时难以保留真人表演细节的问题,尤其适用于创意工作室的影视制作需求。 Ray3 Modify能够忠实保留原始视频中演员的动作、节奏、眼神方向和情感表达,同时支持将人物形象转换为参考角色,实现服装、外貌和身份特征的延续。用户只需提供角色参考图,即可将真人表演“迁移”至新角色,实现从真人到虚拟角色的无缝转换。 此外,用户还可输入起始和结束帧,由模型自动生成符合场景逻辑的过渡内容,帮助创作者精准控制角色动作、行为和场景切换,确保画面连贯性。Luma表示,这一技术将真实拍摄与AI的创造性表达相结合,使团队能用摄像机捕捉表演后,立即通过AI实现场景更换、服装变换,甚至“重拍”场景,而无需重新搭建拍摄现场。 Luma联合创始人兼CEO阿米特·詹表示:“生成式视频极具表现力,但难以控制。Ray3 Modify让创作者在保持真实表演的基础上,获得完全的创作掌控力。”该模型现已上线Luma的Dream Machine平台,此前公司已于2025年6月推出视频编辑功能。 此次发布正值Luma完成新一轮9亿美元融资,由沙特公共投资基金旗下AI公司Humain领投,a16z、Amplify Partners和Matrix Partners等老股东也参与投资。Luma还计划与Humain合作,在沙特建设一个2GW的AI算力集群,进一步推动AI基础设施发展。