全球第一款具有AI處理功能的圖像傳感器，它實(shí)現(xiàn)了高速邊緣AI處理。像素芯片是背照式的，邏輯芯片除了具有傳統(tǒng)的圖像傳感器運(yùn)算電路外，還具有許多功能，例如索尼最初的DSP（數(shù)字信號(hào)處理器）和用于存儲(chǔ)用戶選擇的AI模型的存儲(chǔ)器。這種配置允許單個(gè)圖像傳感器在沒(méi)有高性能處理器和外部存儲(chǔ)器的情況下處理從圖像捕獲到AI處理的所有事情。

它們的優(yōu)點(diǎn)和用途

僅提取必要的數(shù)據(jù)可以減少數(shù)據(jù)傳輸延遲和相機(jī)功耗，并解決使用云服務(wù)時(shí)的隱私問(wèn)題。這些圖像傳感器減少的數(shù)據(jù)使用量也將有助于降低云服務(wù)器的功耗?？梢允褂米钚碌腁I模型重寫(xiě)和更新AI模型，以匹配各種系統(tǒng)環(huán)境和條件。這些圖像傳感器除了可以開(kāi)發(fā)具有AI功能的微型相機(jī)外，還有望實(shí)現(xiàn)零售和工業(yè)設(shè)備行業(yè)的各種應(yīng)用，并與云計(jì)算相結(jié)合，將有助于實(shí)現(xiàn)最佳系統(tǒng)。

?

為什么會(huì)開(kāi)發(fā)一款A(yù)I處理功能的圖像傳感器？

最大的原因是，當(dāng)開(kāi)始計(jì)劃時(shí)，索尼已經(jīng)為開(kāi)發(fā)奠定了基礎(chǔ)。除了開(kāi)發(fā)系統(tǒng)LSI的專業(yè)知識(shí)外，Sony還擁有其他必要的技術(shù)，例如背照式CMOS圖像傳感器，堆疊式CMOS圖像傳感器和Cu-Cu直接鍵合，可實(shí)現(xiàn)高質(zhì)量的圖像捕獲和多種同時(shí)功能。以色列索尼半導(dǎo)體的一個(gè)團(tuán)隊(duì)也正在研究專門用于AI的處理器的核心技術(shù)，目前的DSP最初計(jì)劃是在2017年制定的。但是，當(dāng)時(shí)很少使用AI的產(chǎn)品，目前尚不清楚預(yù)期有哪些功能。此外，對(duì)AI模型的研究也在飛速發(fā)展，因此有必要采用AI處理規(guī)范，該規(guī)范將在商業(yè)化后的幾年中繼續(xù)發(fā)揮作用。在能夠完成智能圖像傳感器之前，不得不一遍又一遍地修改原始的DSP計(jì)劃。

來(lái)源于互聯(lián)網(wǎng)，僅供分享，如侵刪。