Meta正在将其AI视频技术引入Instagram,推出了新功能,用户可以通过文本来修改视频图像,从添加装饰到更改背景,几乎可以实现您想象的任何操作。
Instagram负责人Adam Mosseri在一段视频公告中表示:“我对我们的早期AI研究模型Movie Gen非常兴奋,它将让您通过简单的文本提示修改视频的几乎任何方面。”在视频中,Mosseri穿着原装的衣服,身处一个普通的卧室,而场景开始随机变化,将他展示在巴黎、纽约和一个游泳池中,同时将他的衣服换成不同的东西,如皮夹克或蓬松的毛衣,当他在喜马拉雅山区时。
“您应该能够更换服装或更改所处的环境,或者添加一条链子,无论您能想到什么,”Mosseri解释道,展示了他无缝切换背景和改变外貌的演示。
Meta在几个月前宣布了Movie Gen,展示了一些优于其他模型输出质量和提示遵循的生成版本。该公司还展示了一些社交媒体影响者(如Paige Piskin)和社交媒体品牌10pm Curfew的Girls和K5sh账号生成的AI创作的Instagram视频。
除了生成视频,Movie Gen还处理视频修复,即在视频中改变特定物体而保留其他元素不变。这使得该模型非常灵活,使用户能够进行各种不同的视觉操作,从更改人物的服装到更换背景,甚至通过调整整体场景风格将人物转变为像木偶般的卡通版本。
这项技术似乎是基于Meta的Movie Gen AI模型,Decrypt在去年有报道。这是该公司对竞争对手类似工具的回应,如OpenAI最近宣布的Sora视频生成器、Runway的修复功能,甚至一些开源工具如Propainter。
对于Instagram来说,这是Meta首次直接将其视频AI能力引入用户。Movie Gen可以创建全新的16秒视频或修改现有视频,包括同步的音效和音乐。
在经历了一年的相对平静发布后,最近几个月出现了非常重要的发展。Sora终于发布了,但也出现了许多有趣的替代品,如Invideo V3(能够根据一个简单的想法生成整个剧本、场景和10分钟长的视频),Dream Machine(即使在超现实场景中也能生成连贯而逼真的视频),Google的Veo2(能够生成高度逼真且提示遵循度高的视频)和Showrunner(能够生成小型卡通素描)。
Meta尚未宣布具体的发布日期,但Mosseri表示将在2024年发布。
由Andrew Hayward编辑