几年前索尼创建了一个带有片上RAM的第一款图像传感器，这使能在非常高的帧速率下使慢动作视频捕获。现在公司已经创建了具有车载AI硬件的第一个传感器，可以进行高速图像识别。
IMX500智能视觉传感器IMX500具有堆叠设计，包括像素芯片（1 / 2.3“，12.3MP分辨率，1.55μm像素）和逻辑芯片，具有索尼开发的DSP和AI型号的内存。
传感器可以在60fps捕获4K视频，但更重要的是，它仅需要3.1毫秒来分析图像（使用Google的MobileNet V1模型）。它甚至不需要输出图像，它可以发送要处理的元数据。
正如索尼所说，这是一个福林，因为图像数据永远不会离开芯片（并且当然不需要在互联网上发送到云）。而且，由于AI模型可以是CONPD，因此可以使用相同的硬件来用于各种任务。
一个简单的例子是将IMX500放在汽车中并将其指向驱动程序。如果传感器检测到驾驶员分散注意力或睡着，则可以向汽车发出警告。即使外部处理器可以执行相同的任务，只使用图像传感器更简单（更可靠）和更便宜。
商店可以使用智能视觉传感器进行许多任务。例如，人们可以在门口，计算有多少人进去了。另一个人可以留在架子上，在股票运行低时发送通知。另一个可以确定大多数人去的地区以及他们拿起的产品。
该传感器在收银机上有可能的应用
IMX500不太可能在智能手机中找到它的方式。但它可以作为智能扬声器的一部分进入您的家 - 例如，它可以看到谁在提出问题，这将有助于系统提供更相关的答案。而且，再次，由于图像传感器可以输出“汤姆正在说”，因此隐私问题降低，而不是捕获照片并发送处理。
它不仅仅是隐私，使用该传感器的设计将具有更低的延迟，需要很少的带宽，它会降低电源使用来启动。
3.1毫秒分析图像比传统方法快得多，使需要需要闪电快速反应时间（例如工业机器人）。此外，与4K / 60FPS相比，元数据与4K / 60FPS相比它是基于的，因此数百个摄像机可以共享相对较慢的数据连接。
IMX500（只需传感器）和IMX501（LGA包中的传感器）将很快抽取，索尼认为第一个使用它们将于明年出来。目前，这两项分别为10,000日元，分别为20,000日元（即94美元和187美元）。
