人工智能時(shí)代,計(jì)算機(jī)視覺加速全局快門傳感器的應(yīng)用
計(jì)算機(jī)視覺作為一種人工智能的基礎(chǔ)技術(shù)應(yīng)用,使用場景多樣,市場潛力巨大。而計(jì)算機(jī)視覺又與傳感器密切相關(guān),只有經(jīng)過傳感器對環(huán)境信息的采集,才能進(jìn)而實(shí)現(xiàn)數(shù)據(jù)的存儲(chǔ)、處理以及后續(xù)的推理判斷與執(zhí)行。近日,意法半導(dǎo)體(ST)舉辦線上媒體溝通會(huì),與會(huì)嘉賓在對人工智能時(shí)代傳感器的技術(shù)發(fā)展與市場應(yīng)用進(jìn)行介紹時(shí)指出,計(jì)算機(jī)視覺將加速全局快門傳感器的應(yīng)用。
計(jì)算機(jī)視覺應(yīng)用于四大場景
計(jì)算機(jī)視覺是人工智能領(lǐng)域的一個(gè)重要分支,其可以讓計(jì)算機(jī)等智能設(shè)備從圖像、視頻以及其他視覺輸入的數(shù)據(jù)庫中提取有意義的信息,并對這些數(shù)據(jù)進(jìn)行處理,進(jìn)而采取行動(dòng)。目前,計(jì)算機(jī)視覺在生產(chǎn)生活當(dāng)中已有了很多實(shí)際應(yīng)用,比如智能手機(jī)中的面部識(shí)別技術(shù)就已經(jīng)被廣泛應(yīng)用于屏幕解鎖和電子支付等方面。
根據(jù)意法半導(dǎo)體亞太區(qū)影像事業(yè)部技術(shù)市場經(jīng)理林國志的介紹,計(jì)算機(jī)視覺的應(yīng)用場景大致可以歸納為四大類:首先是深度感應(yīng),主要用于面容識(shí)別、3D掃描等場景。這類應(yīng)用場景大致通過兩個(gè)全局快門傳感器搭建一組雙目攝像頭系統(tǒng),或者使用一個(gè)全局快門傳感器搭建結(jié)構(gòu)光攝像頭系統(tǒng)。
其次是生物識(shí)別,主要是采集人體各個(gè)部位的信息并用于身份識(shí)別,除人臉識(shí)別之外,還包括手勢檢測、指紋識(shí)別、虹膜識(shí)別等。
再次是增強(qiáng)現(xiàn)實(shí)、虛擬現(xiàn)實(shí)和混合現(xiàn)實(shí)等應(yīng)用場景,包括6DoF(六個(gè)自由度追蹤)和SLAM(同步定位與地圖構(gòu)建)。6DoF主要針對頭部行為,當(dāng)用戶戴上VR頭顯設(shè)備后就會(huì)得到6D感知能力,頭部可以做出左右、上下、前后六個(gè)角度的動(dòng)作。當(dāng)用戶需要掌握自己所處房間狀況時(shí),則可以通過SLAM發(fā)揮作用。此外,使用VR/AR設(shè)備還可以進(jìn)行生物識(shí)別,比如手勢檢測或者手勢追蹤。
最后一類應(yīng)用場景是機(jī)器人與工業(yè)控制,如無人機(jī)和掃地機(jī)器人等。這些設(shè)備在使用過程中要避免相互碰撞,就需要具有物體檢測和場景分析能力。而在這些應(yīng)用場景中,傳感器都可以發(fā)揮關(guān)鍵作用。
全局快門與卷簾快門各具優(yōu)勢
由于計(jì)算機(jī)視覺的應(yīng)用場景與一般用途的攝像頭不同,并不注重靜態(tài)圖像的捕捉與色彩渲染,因此智能手機(jī)與監(jiān)控?cái)z像頭等設(shè)備中日常搭配使用的卷簾快門傳感器并不適用。林國志介紹,從拍攝角度劃分,圖像傳感器可以分為全局快門與卷簾快門兩大類型。
人們?nèi)粘=佑|的多數(shù)攝像頭,大都采用卷簾快門傳感器,比如智能手機(jī)的主攝像頭和自拍攝像頭、樓宇中安裝的監(jiān)控?cái)z像頭以及數(shù)碼相機(jī)中大都采用卷簾快門技術(shù)。因?yàn)檫@些應(yīng)用場景都需要捕捉彩色圖像,需要相當(dāng)高的分辨率。卷簾快門的設(shè)計(jì)目的正是為了捕捉靜態(tài)圖像和視頻拍攝,需要非常高的分辨率和顏色處理能力。
問題在于,計(jì)算機(jī)視覺當(dāng)中采用卷簾快門傳感器都是逐行拍攝圖像的,整個(gè)圖像只有一幀。如果拍攝對象是車輛這樣的快速移動(dòng)物體,圖像就有可能發(fā)生扭曲,無法顯示拍攝對象原始形態(tài),使得機(jī)器無法判斷不同圖像中的車輛是不是同一輛車,也就無法用于計(jì)算機(jī)視覺的處理。
全局快門的原理則不同,其拍攝時(shí)間非常短,只要拍攝對象不是快速移動(dòng)的物體,成像效果就非常準(zhǔn)確,因此更加適用于計(jì)算機(jī)視覺。隨著計(jì)算機(jī)視覺在人工智能領(lǐng)域的應(yīng)用快速鋪開,也將促進(jìn)全局快門傳感器的發(fā)展。
意法半導(dǎo)體亞太區(qū)影像事業(yè)部技術(shù)市場高級(jí)經(jīng)理張程怡表示,目前全局快門傳感器在消費(fèi)性電子和汽車領(lǐng)域的應(yīng)用勢頭非常猛。消費(fèi)性電子上應(yīng)用最典型的就是人臉識(shí)別,無論智能門鎖、門禁管制,還是電子支付,都已開始采用。汽車領(lǐng)域的主要應(yīng)用場景是駕駛者的監(jiān)控和對乘客監(jiān)控。此外,全局快門傳感器在機(jī)器人、繪制地圖、AR/VR等領(lǐng)域的發(fā)展勢頭也不錯(cuò)。
在談到全局快門是不是會(huì)全面取代卷簾快門傳感器時(shí),張程怡認(rèn)為,兩者各有優(yōu)勢。在拍攝靜態(tài)照片或視頻時(shí),卷簾快門的像素更小、解析度更高,在用于手機(jī)主攝像頭等設(shè)備中更具優(yōu)勢,但全局快門在計(jì)算機(jī)視覺這類識(shí)別動(dòng)態(tài)影象方面更有優(yōu)勢。卷簾快門的畫點(diǎn)大概在1.1微米以下,而全局快門通常在2.2微米以上,單僅畫點(diǎn)尺寸上,兩者就代表了不同的應(yīng)用領(lǐng)域?;诖?,也可看出全局快門傳感器的技術(shù)發(fā)展趨勢像素尺寸持續(xù)縮小,畫點(diǎn)持續(xù)變多,功耗優(yōu)化。
目前,意法半導(dǎo)體消費(fèi)和工業(yè)用全局快門圖像傳感器已推出VD55G0 40萬像素和VD56G3 150萬像素兩款產(chǎn)品。這些產(chǎn)品在940nm處具有最高的量子效率,拍攝性能穩(wěn)健;正方形傳感器的分辨率與鏡頭最佳匹配,適合旋轉(zhuǎn)拍攝使用場景;拍攝時(shí)間很短,降低系統(tǒng)功耗,能夠在確保準(zhǔn)確成像的同時(shí)降低系統(tǒng)功耗。
標(biāo)簽: 計(jì)算機(jī)視覺 人工智能 卷簾快門傳感器 意法半導(dǎo)體亞太區(qū)影像事業(yè)部
相關(guān)閱讀
-
破除隱性門檻!云南出臺(tái)49條措施降低制...
10月21日,省政府公布《關(guān)于進(jìn)一步優(yōu)化營商環(huán)境降低市場主體制度性... -
好消息!昆明首次申領(lǐng)居民身份證“跨省...
太方便了,節(jié)省了回去辦證的時(shí)間和往返交通費(fèi),證件照片還很漂亮,... -
“千鄉(xiāng)萬村氣象科普行 氣象科技下鄉(xiāng)”...
23日,在全國科技活動(dòng)周到來之際,由中國氣象局、科學(xué)技術(shù)部、中國... -
廣西北海“一站式”自助服務(wù)區(qū):讓居民...
在廣西北海,企業(yè)開辦審批需耗時(shí)多久?我們來看一組對比數(shù)據(jù):2017年... -
策馬揚(yáng)鞭!寧波社會(huì)治理“一件事”應(yīng)用...
群租房安全隱患整治、僵尸車管理、車棚車庫綜合管理、餐飲油煙管控... -
福建首個(gè)智能氣象站在建寧試運(yùn)行 為首...
記者從省氣象局獲悉,全省首個(gè)智能氣象站近日在建寧縣試運(yùn)行。據(jù)了...