Runway AI推出Act-One功能,简化面部动画创作流程

2024年10月23日 由 daydream 发表 57 0

Runway AI ,一家专注于AI视频创作工具的初创公司,近期正式推出了名为Act-One的新功能。该功能允许用户利用智能手机摄像头录制面部表情,并将其应用到AI生成的视频角色上。


微信截图_20241023112453


Act-One功能目前面向拥有Runway账户的用户开放,但用户需确保账户积分充足,以使用Runway的Gen-3 Alpha视频生成模型。Gen-3 Alpha模型支持多种转换模式,包括文本到视频、图像到视频和视频到视频,用户可以通过输入描述、上传图像或视频来生成新视频。


尽管Gen-3 Alpha模型在视频生成方面表现出色,但在面部动画方面仍有不足,特别是在为角色创建与场景情绪相匹配的面部表情时。传统的面部动画需要复杂的动作捕捉技术和手动面部绑定,成本高昂且耗时费力。


Act-One功能的推出旨在解决这一问题。通过该功能,用户无需使用昂贵的动作捕捉设备,即可将面部表情转移到AI生成的角色上,包括微表情和视线等细节。该功能适用于动画师、视频游戏开发人员和独立电影制作人等创意专业人士,使他们能够生成更加逼真、具有电影质感的视频角色。




Runway表示,Act-One功能包含多项内置保护措施,以防止滥用。例如,该功能具有防止未经授权生成包含公众人物内容的机制,以及验证声音使用权的工具。Runway将持续监控该功能的使用情况,确保其被负责任地使用。


自2022年末以来,AI视频技术取得了显著进步,在逼真度、分辨率、保真度和指令遵循度等方面均有大幅提升。然而,许多AI视频创作者在描绘真实面部表情方面仍面临挑战。Act-One功能的推出,为这一问题的解决提供了新的途径。


此外,Runway还与狮门影业达成了合作,共同开发基于狮门影业超过2万部影片目录的定制化AI视频生成模型。这一合作将进一步推动AI视频技术的发展和应用。


Act-One功能简化了传统面部动画的复杂流程,无需动作捕捉设备或角色绑定,即可实现多种风格和设计的角色动画化。用户只需通过一段简单的驱动视频,即可将表演转移到生成的角色上,甚至可应用于不同风格的多个角色。这一功能有望改变叙事内容创作,特别是在独立电影制作和数字媒体领域。


Runway联合创始人兼首席执行官Cristóbal Valenzuela指出,Act-One功能目前主要聚焦于面部,能够准确捕捉演员的表演深度,同时在不同角色设计和比例之间保持通用性。此外,Act-One还具备从各种摄像角度和焦距提供电影级别逼真输出的能力,增强了创作者通过角色表演讲述情感共鸣故事的能力。

文章来源:https://siliconangle.com/2024/10/22/runways-act-one-uses-smartphone-cameras-replicate-facial-expression-motion-capture/
欢迎关注ATYUN官方公众号
商务合作及内容投稿请联系邮箱:bd@atyun.com
评论 登录
热门职位
Maluuba
20000~40000/月
Cisco
25000~30000/月 深圳市
PilotAILabs
30000~60000/年 深圳市
写评论取消
回复取消