高通公司推出专为物联网边缘计算而设计的视觉智能系统芯片
2018年04月12日 由 nanan 发表
390009
0
高通公司周三推出智能系统芯片QCS605和QCS603,其结合了图像信号处理器、AI、CPU和GPU技术,以支持各种相机应用、机器人和智能显示器。
高通物联网产品管理副总裁Seshu Madhavapeddy表示,新系统芯片是专为物联网边缘计算设计的,在设备上尽可能多地进行处理,从而最大限度地减少向远程基础设施传输数据。具体而言,QCS603和QCS605适用于视觉智能。这项技术的应用包括安全摄像头、运动相机、可穿戴相机、虚拟现实相机、机器人和智能显示器。
Madhavapeddy先生进一步介绍了物联网相机与智能手机的区别。物联网相机必须在非常低的光线条件下运行,亮度低至1 Lux(照明单位)。它们也有非常不同的图像稳定应用程序。在物联网领域,它不是模糊不清的快照,而是在运动场景中从安装在头盔上的相机拍摄视频,或者在主人执行任务时从无人机照相机拍摄视频。
QCS603和QCS605可以对这些低光和图像稳定的要求进行处理。他们还通过将图像处理与AI相结合来处理机器人应用中常见的避障要求。
高通公司的AI引擎包括Snapdragon神经处理引擎(NPE)软件框架,该框架可以适应包括Tensorflow、Caffe和Caffe2在内的主要深度学习库创建的模型,Android神经网络API和高通公司自己的Hexagon神经网络库。
这些模型可以通过使用特定源平台的软件开发工具包(SDK),将其移植到高通的AI引擎上。高通的AI引擎可以优化推理,即根据部署到设备的机器学习模型对图像数据进行评分。
QCS603和QCS605是低功耗产品,被设计在电池供电的设备上运行。
图像不仅仅意味着静止图像,它还包含视频。QCS603和QCS605是视频怪兽,QCS605可以同时处理4K(超高清)和1080p(全高清)数据,每个数据速率为60 fps(每秒帧数),且还可以以更低的分辨率处理更多的同步数据流。QCS603可以同时处理4K(超高清)和720p(全高清)数据,每个数据速率为30 fps(每秒帧数)。
总的来说,QCS603和QCS605是同类产品,但QCS603的功耗更低,占用空间更小,规格更低,可以实现这一切。例如QCS605有8个CPU内核和2x2 802.11ac Wi-Fi功能,而QCS603则是四核产品,带有1x1 802.11ac Wi-Fi功能。
高通公司的视觉智能平台musters 2.1 top *(每秒钟的tera操作,类似于TFLOPS,但不涉及浮点运算),用于深度神经网络推理的计算性能。支持双14位Spectra 270图像信号处理器与双1600万像素传感器。
正如20世纪80年代的PC消除了所有高价值计算必须发生在大型主机、智能物联网设备以及支持它们的芯片组这样的观念,现在向我们展示了AI计算可以在边缘,而不只是在云端。它的原理是一样的:客户端设备不必是愚笨的,只要你不以这种方式构建它们。
为硬件的进步做好准备,如本文中所说的,将AI技术推向前进。我们越早把AI从数据中心(无论如何,它的唯一位置)排除,它越早越容易被普通终端用户和开发者所接受。