索尼开发世界首款配备AI处理能力 图像传感器
IMX 零零 逻辑芯片有 个传统 图像传感器操作电路和 个专门用于AI信号处理 索尼数字信号处理器,以及用于AI模型 内存。图像识别 闪电般 速度,以及在资料统计到达网络前将所有无关资料统计抛出 能力为新 应用开辟了可能性,从检测面罩到区分人类还是机器人进入工厂 限制区域。
两者都有权衡。廉价相机通常需要 个庞大而昂贵 IT基础设施,当处理发生在产品地方时,存在延迟问题。昂贵 相机耗电量大,可能需要 些网络功能。两者都需要搭配专业知识。
事实上,这是汉森集团对客户（尤其是零售业）在实施边缘计算解决方案时,所面临 固有挑战和真正 困难有了更深入 理解,其中许多是定制项目,导致他们开发了世界上 个体工智能图像传感器IMX 零零。
在索尼新推出 IMX 零零上,像素芯片（约有 零万像素用于捕获信息）采集 信号同样通过ISP运行,AI处理在逻辑芯片 处理阶段完成。物体识别只需 . 毫秒,提取 资料统计作为元资料统计输出,减少了处理 资料统计量。
实现这种简单程度 关键在于参考设计和与微软等拥有现有开发社区 组织、系统集成商和独立软件供应商 合作伙伴关系,这些企业拥有索尼所瞄准 应用程序 经验,除了在机器学习和面向微型机器语言 工程方面 专业知识外。年中,索尼宣布与微软Azure合作,利用微软 基础设施实施 些智能相机解决方案。
对于商业应用 摄像机和边缘计算,有两种典型 策略，首先,使用 堆没有智能 傻瓜摄像机,将资料统计发送到本地化服务器进行预处理,然后再上传到云端进行存储和分析（或者跳过预处理直接发送到云端）。其次,使用智能摄像机,在本地完成所有处理,然后发送到云端存档。
汉森说，“我们 想法是,狗粮快讯网编辑部获悉,如果我们能在边缘解决使流程复杂化 问题,我们将以较低 成本为客户缩短上市时间。”
索尼IMX 零零图像传感器是利用现有背面照明 图像传感器 逻辑延伸,它是 款配备AI处理能力 图像传感器。这 特性是通过将逻辑芯片历史性地放置在传感器 正面并将其重新定位到背面来实现 ,从而使传感器有更多 像素来提高感光度,宽总线结构将资料统计从图像传感器传输到图像信号处理器（ISP）。
索尼从 月份开始销售裸芯片,并预计将在 月份推出 款打包版（IMX 零 。汉森说,为了让这项技术获得吸引力,狗粮快讯网多出鲜活生动 报道,他创造了 个“边缘图像平台”,它必须易于测试和大规模部署,而且成本不会让客户 底线爆炸。为了做到这 点,汉森设想了 套简单 硬件解决方案,其中有 系列选项或用例供客户选购,没有大规模定制或实现噩梦。
索尼负责商业和技术创新 副总裁马克·汉森说，“想象 下, 家拥有 零零零多台摄像头 零售店正在播放大量视频。如果摄像头订阅是预处理 ,则必须搭配多个服务器才能连接所有这些摄像头,如果将视频 零零%流式传输到云端,则需要支付大量 回程和存储成本,此外还有延迟。这些问题,再加上日益攀升 隐私问题,特别是在欧洲,狗粮快讯网获知,要求限制个体图像在本地局域网之外分发 能力,让我们认为必须有更好 技术。”
虽然汉森说理论上没有任何东西可以阻止堆栈技术 增强,比如深度传感,但 当天 部分焦点是开发IMX 零零 应用程序。新初,索尼计划将重点放在零售和工厂自动化领域大规模部署支持人工智能 摄像头,以及开发基本推理模型。
索尼计划专注于在零售和工厂自动化中大规模部署支持AI 相机,以及为其AI图像传感器开发基本推理模型。
,