Runway推出Act-One功能,革新AI生成体验
10月22日,人工智能创企Runway宣布推出全新功能——Act-One,进一步扩展了其生成平台的能力。Act-One集成于Runway最新的生成模型Gen-3Alpha中,允许用户通过简单的手机或相机录制,将录制的面部表情精确地映AI生成的虚拟角色上。这一创新功能,无论是创作者还是行业专业人士,都能够轻松将真人表演转化为多样化的数字角色,开启了创作的新纪元。
根据Runway官方博客的介绍,从昨日起,Act-One功能已逐步向现有用户开放,并计划在不久后向所有用户全面推出。这一功能的发布,标志着Runway在AI技术上的又一突破,进一步巩固了其在生成领域的领先地位。
自2022年底首个文本生成模型发布以来,AI技术已经在多个领域取得了显著进展。尤其在画面真实感、分辨率、动作精度以及与输入提示的契合度等方面,都有了质的飞跃。如今,Act-One功能的推出,突破了以往技术的限制,极大地提升了使用AI生成模型重现真人动作和表情的能力,推动了这一领域的进一步发展。
目前,所有Runway平台的注册用户均可尝试这一新功能,借助Gen-3Alpha模型生成全新。只有账户中积分充足的用户才能享受这一功能的完整体验。Gen-3Alpha在今年初发布,支持包括文字转、图片转以及转等多种输入方式,用户可以根据需求上传文字、图片或,甚至组合多种输入元素,生成符合描述的新内容。
传统的面部动画制作往往需要复杂且繁琐的设备支持,包括高精度的动作捕捉仪器、人工面部绑定和大量的参考镜头。这些技术的目的是将演员的动作和表情转化为适应3D动画的数字模型,整个过程既耗时又高成本。电影行业的从业者尤其清楚这一点,尤其是在观看《指环王》系列、《阿凡达》等大片的幕后花絮时,可以看到演员们身着特制的动作捕捉服,脸上贴满标记,并佩戴着头戴设备,所有动作都通过复杂的技术手段进行捕捉。
事实上,正是这种对面部表情和细微动作精确捕捉的需求,推动了导演大卫·芬奇及其团队在《本杰明·巴顿奇事》中的创新突破,他们开发了全新的3D建模技术,并凭此技术获得了奥斯卡奖。这一技术使得数字角色能够更好地保留演员表演中的情感和细微表情,解决了传统技术无法完全复制的难题。
近年来,随着AI技术的快速发展,许多初创公司致力于突破传统的3D动作捕捉瓶颈。例如,去年获得1000万美元种子轮融资的MoveAI,就推出了一项可以用智能手机摄像头进行全身动作捕捉的技术,大大降低了传统动作捕捉所需的设备门槛。AI技术的普及,使得动作捕捉不再局限于昂贵的专业设备,而是可以通过简单的工具实现,进一步拓宽了创作的空间。
Runway的Act-One功能正是这一技术进步的最新成果。该功能不仅能够将用户上传的单一中的表演转化为多个不同角色,还能适应多种风格,保留每个角色的面部表情,精准呈现其情感变化。无论是动画制作还是角色设计,这一创新功能都为创作者提供了前所未有的灵活性和自由度。
Runway此前已经推出了基于生成的多种AI转换工具,用户可以上传,并通过Gen-3Alpha或其他生成模型(如Gen-2)对其进行重新设计。Act-One在此基础上,特别加强了面部表情映射和效果呈现,使得生成的虚拟人物能够更加生动自然。Runway的联合创始人兼首席执行官克里斯托弗·巴伦苏埃拉(Cristóbal Valenzuela)在接受采访时表示,Act-One的突出特点就是其在一致性和表现力上的优势,使得虚拟角色的情感和表演更具真实感。
不仅如此,Runway团队还在不断探索如何通过Act-One生成多回合、富有表现力的对话场景,这是生成模型面临的一大挑战。现如今,用户仅需通过普通相机录制一名演员演绎不同角色的表演,Act-One就能根据这些输入,生成多个不同角色的对话场景。这一功能的推出,将极大改变叙事内容的制作方式,特别是在资源有限的独立电影制作和数字媒体创作领域,具有非常重要的意义。
巴伦苏埃拉在社交媒体上公开表示,随着生成技术的不断发展,行业的关注点已经不再是“生成模型是否能产出一致的”这一问题,而是如何高效利用这些技术,创造出更具创意和表现力的内容。他指出,一个优秀的生成模型已经成为新标准,关键在于如何应用和开发这些模型,以适应不同的创作需求。
为了确保生成内容的安全性和合规性,Runway对Act-One功能进行了严格的内容审核和安全保障措施。这些措施包括自动检测和阻止生成公众人物内容、确保用户拥有自定义语音的合法使用权,以及实时监控防止平台滥用等。
Act-One的推出,标志着AI面部识别技术的一次重要突破,它使得Runway在激烈的竞争中脱颖而出。当前,Runway面临的竞争者包括AI初创公司LumaAI、国内的MiniMax及其旗下的AI生成器Hailuo、快手推出的AI模型Kling,以及最近发布的开源生成模型Mochi1等。面对日益增多的同行挑战,Runway凭借其创新技术和领先的用户体验,持续推动着整个行业的发展。