Raspberry Pi与索尼携手发布了一款定价为70美元的新型AI相机模块,旨在简化边缘AI视觉数据处理解决方案的开发。这款Raspberry Pi AI相机集成了索尼的IMX500图像传感器和板载AI加速器,使用户能够直接在设备上运行神经网络模型,无需额外的硬件如GPU或外部加速器。
该AI相机以索尼IMX500智能视觉传感器为核心,配备Raspberry Pi的RP2040微控制器,用于神经网络和固件管理。这一组合实现了实时图像处理和推理,从而释放了Raspberry Pi处理器以执行其他任务。
AI相机的主要规格包括:
AI相机的一个显著特点是与Raspberry Pi现有软件栈的无缝集成。该设备采用libcamera框架,使开发者能够轻松获取同步图像帧和神经网络输出。这种集成简化了构建对象检测、姿态估计等应用的过程,减少了大量编码工作。例如,使用Picamera2等库,开发者可以仅用少量代码运行常见的MobileNet SSD对象检测模型或PoseNet姿态估计模型。
此外,AI相机还支持将TensorFlow或PyTorch等流行框架中的现有神经网络模型转换为可在设备上高效运行的格式。索尼提供的AI工具套件促进了这一转换过程,并为希望快速入门的用户提供了包含优化模型的模型库。
虽然AI相机提供了显著优势,但Raspberry Pi还推出了功能更强大的AI套件(于6月发布),其运算能力可达每秒13万亿次操作。然而,AI套件仅与Raspberry Pi 5兼容,且需要单独的相机模块。选择AI相机还是AI套件,取决于项目的具体需求,如性能要求和硬件兼容性。
AI相机的推出为对边缘AI应用感兴趣的开发者开辟了新的可能性。潜在应用场景包括监测交通流量的智能城市传感器和工业质量保证系统。该设备体积小巧(尺寸为25×24×11.9毫米),且与所有Raspberry Pi型号兼容,使其成为业余爱好者和专业人士的通用工具。
Raspberry Pi已发布了一份入门指南,包含硬件安装、软件设置以及从模型库中运行示例模型的说明,供有兴趣探索AI相机功能的用户参考。
目前,Raspberry Pi AI相机已上市销售,公司承诺至少将其生产至2028年1月。