TI如何在低照視頻采集突破的?
—— ——解析TI的低照圖像處理

照片:左側是市面上一款以低照度著(zhù)稱(chēng)的相機。照度是0.02,已是人眼不能識別的亮度(照片來(lái)源:TI)。
在2012年底的中國國際公共安全博覽會(huì ) (CPSE) 上,TI(德州儀器)推出了達芬奇 DM385視頻處理器,可通過(guò)使用獨特的低照技術(shù),提供高質(zhì)量視頻解決方案[1]。
業(yè)界通常做法
TI視頻系統應用部工程總監Peter Labaziewicz說(shuō),為了在非常暗光線(xiàn)下采集到更清楚、更清晰的圖像,很多客戶(hù)采用這些辦法實(shí)現:
1.加紅外補光的方式,這主要會(huì )增加成本;
2.增加光圈,但這會(huì )使鏡頭的尺寸變大,光圈大于1.4以后就不可能再繼續做了,會(huì )增加很多系統性成本;
3.增加曝光時(shí)間,缺點(diǎn)是運動(dòng)時(shí)會(huì )有拖影;
4.增強從傳感器來(lái)的光學(xué)信號強度可以提高增益。增加傳感器的增益缺點(diǎn)是噪聲也會(huì )被一起放大,所以圖像上有很多噪點(diǎn),原來(lái)的圖像就變得不是那么清晰了。另外,噪聲變大以后,后面的編碼會(huì )變得非常困難,因為分不清是圖像的細節還是噪聲,所以它會(huì )把一些噪聲當成圖像來(lái)做編碼。在這種情況下,關(guān)鍵是如何把有用的信息增強,把噪聲減少。但是做到這一點(diǎn)確實(shí)很難,因為要區分噪聲和真正的圖像,在去掉噪聲的同時(shí)要能保證圖像的清晰度很高。

照片 TI視頻系統應用部工程總監Peter Labaziewicz
業(yè)界通常做法
TI視頻系統應用部工程總監Peter Labaziewicz說(shuō),為了在非常暗光線(xiàn)下采集到更清楚、更清晰的圖像,很多客戶(hù)采用這些辦法實(shí)現:
1.加紅外補光的方式,這主要會(huì )增加成本;
2.增加光圈,但這會(huì )使鏡頭的尺寸變大,光圈大于1.4以后就不可能再繼續做了,會(huì )增加很多系統性成本;
3.增加曝光時(shí)間,缺點(diǎn)是運動(dòng)時(shí)會(huì )有拖影;
4.增強從傳感器來(lái)的光學(xué)信號強度可以提高增益。增加傳感器的增益缺點(diǎn)是噪聲也會(huì )被一起放大,所以圖像上有很多噪點(diǎn),原來(lái)的圖像就變得不是那么清晰了。另外,噪聲變大以后,后面的編碼會(huì )變得非常困難,因為分不清是圖像的細節還是噪聲,所以它會(huì )把一些噪聲當成圖像來(lái)做編碼。在這種情況下,關(guān)鍵是如何把有用的信息增強,把噪聲減少。但是做到這一點(diǎn)確實(shí)很難,因為要區分噪聲和真正的圖像,在去掉噪聲的同時(shí)要能保證圖像的清晰度很高。

照片 TI視頻系統應用部工程總監Peter Labaziewicz
“TI的技術(shù)在現有芯片方案基礎上,可以擁有比目前市場(chǎng)上最好的低照度相機還要好的性能。”Peter自豪地說(shuō),TI做了很好的降噪濾波器,能夠把噪聲減少,可以在完全沒(méi)有信息的地方把原始圖像顯示出來(lái)。
TI降噪方法
TI方案的降噪分為兩個(gè)部分,空間單個(gè)一幀圖像的降噪處理稱(chēng)為2D降噪,這些噪聲在每一幀里其實(shí)都是一致的,這是空間域的噪聲。另一種噪聲在每一幅圖像里都會(huì )有變化,這叫時(shí)間域的噪聲。空間域是2D降噪處理,加上時(shí)間域就是3D的降噪處理。這項技術(shù)可以用到所有IP攝像機的解決方案里面。
這項技術(shù)采用軟硬件結合的方法。TI芯片上有硬件加速器和處理器可以實(shí)現這種算法,軟件上也結合硬件來(lái)處理。
在實(shí)現中,TI做降噪處理需要很多的數據,因此TI做了硬件降噪的濾波器,可以迅速地處理大量數據。盡管在硬件上大量處理數據,但數據都是機械地處理,在軟件上還需要智能判斷,在大量的數據中,哪些是噪聲,哪些是圖像的細節。“在做降噪圖像處理的時(shí)候,很多競爭對手也說(shuō)有3D降噪的性能,但圖像的細節也隨著(zhù)噪聲被去掉了,所以這是在判斷哪些是細節,哪些是噪聲時(shí)面臨的挑戰。”
在動(dòng)態(tài)時(shí),每一幅圖都會(huì )發(fā)生變化,TI主要強調的是做運動(dòng)的補償。
TI降噪方法
TI方案的降噪分為兩個(gè)部分,空間單個(gè)一幀圖像的降噪處理稱(chēng)為2D降噪,這些噪聲在每一幀里其實(shí)都是一致的,這是空間域的噪聲。另一種噪聲在每一幅圖像里都會(huì )有變化,這叫時(shí)間域的噪聲。空間域是2D降噪處理,加上時(shí)間域就是3D的降噪處理。這項技術(shù)可以用到所有IP攝像機的解決方案里面。
這項技術(shù)采用軟硬件結合的方法。TI芯片上有硬件加速器和處理器可以實(shí)現這種算法,軟件上也結合硬件來(lái)處理。
在實(shí)現中,TI做降噪處理需要很多的數據,因此TI做了硬件降噪的濾波器,可以迅速地處理大量數據。盡管在硬件上大量處理數據,但數據都是機械地處理,在軟件上還需要智能判斷,在大量的數據中,哪些是噪聲,哪些是圖像的細節。“在做降噪圖像處理的時(shí)候,很多競爭對手也說(shuō)有3D降噪的性能,但圖像的細節也隨著(zhù)噪聲被去掉了,所以這是在判斷哪些是細節,哪些是噪聲時(shí)面臨的挑戰。”
在動(dòng)態(tài)時(shí),每一幅圖都會(huì )發(fā)生變化,TI主要強調的是做運動(dòng)的補償。
低照度的應用效果
“DM385芯片最大的特點(diǎn)是低照度的性能。”TI視頻安全業(yè)務(wù)部市場(chǎng)營(yíng)銷(xiāo)經(jīng)理Sean Murphy說(shuō),假設這個(gè)技術(shù)在現場(chǎng)應用時(shí),場(chǎng)景在地下停車(chē)場(chǎng),一個(gè)犯罪分子開(kāi)車(chē),在不好的方案里可能車(chē)牌就看不到,在我們的方案里可以看到車(chē)牌。如果犯罪分子身上有一些明顯的特征,比如紋身,在噪聲很大的時(shí)候很難識別,在我們的圖像里可以很清楚地把它捕捉到。在TI真實(shí)的Demo(演示)里會(huì )看得非常明確。如果字符區域是人的臉,需要很多細節的情況下,用DM385技術(shù)可以把原來(lái)看不清的圖像看清。

照片 TI視頻安全業(yè)務(wù)部市場(chǎng)營(yíng)銷(xiāo)經(jīng)理Sean Murphy
參考文章:
[1]TI DaVinci視頻處理器在低照下實(shí)現逼真影像.(2012-12-4).http://dyxdggzs.com/article/139697.htm
評論