字节跳动发布AI系统,可将照片转化为逼真视频

2024年11月11日 由 daydream 发表 65 0

字节跳动公司近期推出了一款人工智能系统,能够将任意照片转化为极具说服力的视频表演,其细腻的表情和情感深度足以媲美真实影片。其“X-Portrait 2”系统旨在让静态图像呈现出如经典电影般的场景,效果逼真,模糊了真实与人工内容的界限。


微信截图_20241111103402


X-Portrait 2的演示展示了来自《闪灵》、《变脸》和《栅栏》等电影中的标志性场景,通过静态照片重新演绎,捕捉到了原表演中的每一个微妙表情。一张照片现在能够展现出恐惧、愤怒或喜悦等情绪,细节之丰富堪比专业演员,同时保留了原有人物的身份和特征。


这一技术突破正值关键时刻。社会正面临数字虚假信息和美国大选余波的挑战,X-Portrait 2能从任何照片中生成与真实无异的视频,引发了严重担忧。以往的AI动画工具产生的结果往往具有明显的人工痕迹和机械动作,但字节跳动的新系统捕捉到了面部肌肉的自然流动、微妙的眼神移动和复杂的表情,这些正是人类面部独特表达的关键所在。


字节跳动实现这一逼真效果的方法颇具创新性。不同于大多数动画软件采用的跟踪面部特定点的标准方法,该系统观察和学习完整的面部动作。旧系统通过连接点来创建表情,而X-Portrait 2则捕捉整个面部的流畅运动,即使在快速说话或从不同角度观看时也能做到。


字节跳动在AI领域的这一突破,得益于其作为TikTok所有者的独特地位。TikTok每天处理超过10亿条用户生成的视频,这一庞大的面部表情、动作和情感数据集,为AI模型提供了规模空前的训练数据。竞争对手往往依赖有限的数据集或合成数据,而字节跳动则能利用真实世界中不同面孔、光照条件和拍摄角度下的表情来微调其AI模型。


X-Portrait 2的发布与字节跳动在AI研究方面的全球扩张不谋而合。该公司正在欧洲建立新的研究中心,潜在地点包括瑞士、英国和法国。此外,字节跳动还计划在马来西亚建立一个耗资21.3亿美元的AI中心,并与清华大学展开合作,这表明其旨在在多个大陆建立AI专业知识的战略。


这一全球研究攻势正值关键时刻。尽管字节跳动在西方市场面临监管审查,包括加拿大最近要求TikTok停止运营以及美国持续进行的限制辩论,但该公司仍在不断推进其技术能力。


对于动画行业而言,X-Portrait 2的影响远不止技术层面。目前,大型工作室在动作捕捉设备和动画师上投入数百万美元,以创造逼真的面部表情。而X-Portrait 2预示着未来可能仅需一名摄影师和一段参考视频,就能替代大部分基础设施。


这一转变正值关于AI生成内容和数字权利的辩论日益激烈之际。竞争对手纷纷公开发布代码,而字节跳动则选择将X-Portrait 2的实施细节保密,这一决定反映了人们对AI工具可能被滥用以创建未经授权的表演或误导性内容的日益关注。


字节跳动专注于人类动作和表情,与其他AI公司形成了鲜明对比。当OpenAI和Anthropic等公司专注于语言处理时,字节跳动则在其核心优势上发展:理解人们在镜头前的动作和表达方式。这一专长直接源于TikTok多年来对舞蹈趋势和面部表情的分析。


随着工作和社交越来越多地转移到虚拟空间,能够准确捕捉和传递人类情感的技术变得至关重要。字节跳动的进步使其能够影响人们在数字环境中的互动方式,从商务会议到娱乐。


随着娱乐、教育和商业通信等领域对AI生成视频内容的需求不断增长,这一技术应运而生。X-Portrait 2在保持身份一致性的同时传递微妙表情方面展示了显著的技术进步,但也引发了关于AI生成内容的认证和验证的问题。

文章来源:https://venturebeat.com/ai/bytedances-ai-can-now-turn-your-selfies-into-videos-but-should-we-be-worried/
欢迎关注ATYUN官方公众号
商务合作及内容投稿请联系邮箱:bd@atyun.com
评论 登录
热门职位
Maluuba
20000~40000/月
Cisco
25000~30000/月 深圳市
PilotAILabs
30000~60000/年 深圳市
写评论取消
回复取消