索尼上周展示了新型嵌入式人工智能相机传感器,而微软亦承诺为其提供 Azure“云脑”支持。据悉,为采用 1230 万像素 COMS 传感器的索尼 IMX500 专门定制的 AI 处理器,能够为对象和模式识别、人物追踪等特性铺平道路。通常情况下,这种处理方式需要为影像处理器(ISP)配备单独的芯片,但索尼决定将之结合到一起,以提升效率和降低整体成本。
索尼瞄准了包括安防和工业摄像头在内的细分市场,便于制造商将自己的 AI 方案加载到 IMX500 的内存中,此外微软也提供了一套 Azure 云端 AI 选项。
双方合作将 Azure AI 嵌入到了 IMX500 中,且索尼将打造一款基于 Azure IoT 认知服务(Cognitive Services)的智能相机管理应用程序,支持在云端对视频进行分析。
对于制造商来说,这有助于他们为现有的产品补充高级功能。比如结合了索尼芯片和微软 Azure AI 的智能摄像头可追踪货架何时需要补货、了解客户的购物习惯、以及监测潜在的工业危害等。
除了新功能,索尼和微软还希望该平台能够做到更容易扩展、实惠和高效率。比如 IMX500 可以权衡计算负载,智能地将工作转移到云端进行。客户还能够对特定任务进行编程,以满足安全规程。
预计新方案可吸引计算机视觉和视频分析系统的独立软件供应商,以及希望为自家产品添加新功能的摄像头制造商。同时企业客户能够通过 AI 模型对视频进行分析,从而更好地利用现有的硬件资源。
最后,索尼 IMX500 不仅可拍摄 1230 万像素的静态图像,还能够拍摄4K@ 60fps / 1080p @ 240fps 的视频。不过在全面运行 AI 处理的时候,视频帧率会降至 30fps 。
索尼计划 4 月开始提供裸片、并于 6 月其提供封装芯片样品,预计首批使用 IMX500 的商用产品会在 2021 年一季度投放市场。