AI系统DeepRay实时处理视频,重建模糊的镜头
2018年12月06日 由 浅浅 发表
741218
0
雨,烟雾,污垢等往往会干扰到摄影师,导致拍摄的景象失真。研发公司Cambridge Consultants的研究人员表示,他们利用
AI可以实时重建镜头中受损或模糊的帧。在一次关于机场的视频测试中,它能够准确地再现跑道上的飞机。
该系统名为DeepRay,将在2019年1月的消费电子展上推出。它让人想起Adobe针对前置智能手机相机的失真校正系统,以及一种能够修复包含破损图像的Nvidia技术。但与大多数AI不同,DeepRay能够处理实时视频。
Cambridge Consultants AI商业总监Tim Ensor表示,“从未有过一种新技术使机器能够以人类的方式解释现实世界的场景,而DeepRay可能会超越人眼。在不断变化的雨,烟雾场景中,视频构建清晰的景象能力是极具变革性的。”
DeepRay利用GAN,在尝试消除失真时有效地重建视频场景。在DeepRay的案例中,共有六个网络,一组发电机和鉴别器。
近年来,
GAN的研究突飞猛进,特别是在机器视觉领域。如DeepMind在10月推出了一个基于GAN的系统,可以用完整的布料创建逼真的食物,风景,肖像和动物照片。
Ensor认为,在过去两年中大规模地使用多网络GAN,很大程度上要归功于谷歌的Tensor Processing Units(TPU)等专用AI芯片的进步。
Ensor表示,“我们很高兴能够处于AI发展的前沿。DeepRay向我们展示了可能的艺术飞跃,提供突破性创新,对我们客户的业务产生重大影响,这将我们带入了一个新的图像传感时代,并将推动许多行业的应用,包括汽车,农业和医疗保健等。”
在CES上,DeepRay团队将演示在Nvidia的DGX-1平台上训练的神经网络,该平台在标准游戏笔记本电脑上运行,可以消除由不透明玻璃板引起的失真。该数据集由100,000个静止图像组成,但Ensor表示该团队还没有使用更大的样本量来测试系统的性能。
他解释道,“与所有AI模型一样,它需要通过训练不断改进。”