高通发布骁龙8 Gen3芯片,可运行大模型和AI软件

2023年10月25日 由 daydream 发表 688 0

高通的新一代旗舰移动芯片从头到尾都注重设备内部的AI功能。骁龙8 Gen 3将生成式AI能力直接引入芯片,大大加快了通常外包给云端的处理密集活动的速度。这是在AI领域的又一大进步,而且预计将在未来几周推出搭载新芯片的手机。


微信截图_20231024100419

骁龙8 Gen 3支持在Meta的Llama 2训练的聊天机器人,并且可以接受文本、图像和语音输入。它还可以回答问题并生成图像或文本。该芯片还在设备上运行着之前高通在今年早些时候演示的AI图像生成器Stable Diffusion。这次,公司表示可以在不到一秒的时间内生成一张图像——之前的技术需要大约15秒的时间,这仍然比配备良好的笔记本电脑还要快几分钟。


所有这些功能都集成在高通所称的AI引擎中,利用了该公司的Hexagon神经处理器。同时,感知中心使用了OpenAI的Whisper进行语音识别。感知中心还向AI引擎提供有关用户的信息,包括位置,以提供更个性化的回应。它甚至会传达你喜欢的活动、年龄和"健康水平"。


生成式AI在骁龙8 Gen 3的新图像处理功能中也发挥着重要作用。它将支持图像扩展的生成式填充,因此可以在设备上进行缩放和重新裁剪照片。视频功能更为出色:有一个用于视频的对象擦除功能——只需轻点,不需要的主体就会消失!此外,它还支持设备上的夜间模式录制,最高可达4K/30p。谷歌宣布其夜视视频功能将在不久的将来引入Pixel 8 Pro,但它将在云端运行。


还有一个名为Vlogger's View的功能,可以将自拍和后置摄像头的视频层叠在一个视图中。这不是画中画的效果,该功能使用改进的图像分割技术,从自拍视频中删除背景,使它看起来像你站在后置摄像头所看到的地方。


为了解决工具可能被滥用的问题,高通正在与一家名为Truepic的公司合作。它使用的技术符合Coalition for Content Provenance and Authenticity的开放标准,类似于用于保证照片或视频真实性的元数据。它通过密码学将身份验证与数字资产(如照片或视频)绑定在一起,以便不像EXIF数据那样容易被篡改。


尽管骁龙8 Gen 3不完全是围绕AI的,但高通声称,由于Kryo CPU和Adreno GPU的效率提高,节能效果相比于8 Gen 2提高了10%。它支持Dolby的HDR照片格式,呼应了苹果和谷歌在其最新设备中推动的高动态范围图像捕捉。它配备X75调制解调器-RF,更多支持5G载波聚合,GPU支持改进的基于硬件的光线追踪,以获得移动游戏中更逼真的光线反射效果。该系统将在兼容的外部显示器上支持高达240Hz的刷新率。


此外,还有一个名为Snapdragon Seamless的新系统,旨在方便设备跨制造商和操作系统平台进行配对。高通表示,这将实现设备之间更轻松的切换,例如从手机切换到PC进行视频通话,然后再切换回手机播放音乐。


这似乎主要是为了使Android和Windows设备在初始阶段更容易相互交流。高通表示,这是一个任何人都可以加入的开放平台,尽管最初技术将主要由高通的原始设备制造商和操作系统合作伙伴使用。

文章来源:https://www.theverge.com/2023/10/24/23928867/qualcomm-snapdragon-8-gen-3-on-device-ai-meta-llama-2
欢迎关注ATYUN官方公众号
商务合作及内容投稿请联系邮箱:bd@atyun.com
评论 登录
写评论取消
回复取消