最新相機文章

Image credit:

Sony 的新感光元件将内建 AI 机能

取决于存入的 AI 模型,可以进行物体辨识等简单的工作。

Andy Yang
2020 年 5 月 14 日, 傍晚 07:00


多年来,感光元件都在朝着缩小体积和强化讯号处理的方向前进,但在今天发表的 IMX500 和 IMX501 两颗 12.3MP 感光元件上 Sony 另辟蹊径,主打的是内建的简易 AI 与机器学习机能。Sony 在这里提出的概念,是直接将 AI 处理的逻辑芯片与感光器元件封装在一起,因此感光元件除了输出画面之外,还能输出将画面经过 AI 处理后的结果。举例来说,如果在芯片中置入物体辨识的机器学习模型的话,这颗芯片就能在看到画面中出现狗狗时,输出文字的「狗」,而不一定要是影像了。


和现有的常见 AI 模式 —— 感光元件撷取画面,交由通用处理器上传,云端进行机器学习模型的比对与操作,再将结果回传到通用处理器 —— 相比,Sony 的新芯片省去了中间几乎所有的步骤,因此不仅不需要烦恼如何与云端连线的问题,还能维护用户的隐私。举例来说,如果这个感光器用在家中的监视录影器上时,如果目的只是要在有狗狗进入到画面中时推送通知的话,感光器可以直接只送出文字的「狗」给处理器,不仅完全没有画面上传,连送出画面到处理器都可以省却了。

可以搭载不同的模型,也意味着同样的硬件可以视需求用在许多种不同的地方。Sony 举的例子是在卖场中时,位于门口的监视录影机可以搭载数人头的模型、在店内的摄影机则可以自动估算货架上商品的存量,或是在辨识到有人进入到画面时才开始录影,节省电力和储存空间的使用。当然,这不会完全取代云端式的 AI 运算,也应该没有足够的马力进行机器学习模型的建立,但却能大幅强化简单摄影机的功能呢。

IMX500(无封装的版本)已经出货给 Sony 的合作伙伴,而 IMX501(封装版)则是会在 6 月出货。搭载的装置大约今年底到明年间会上市,但应该会是以监视录影机之类的为主,而非手机吧。