企業(yè)發(fā)布
首頁 > 企業(yè)發(fā)布 > 詳細內(nèi)容
黑芝麻智能NeuralIQ ISP技術(shù)讓汽車明察秋毫
2023/6/26 17:52:16 來源:中國企業(yè)新聞網(wǎng)
導言:近日,黑芝麻智能發(fā)布了武當系列智能汽車跨域計算平臺及其首款芯片C1200。C1200的特色之一在于搭載了黑芝麻智能新一代自研NeuralIQ ISP模塊,為圖形計算提供更精準的數(shù)據(jù)
近日,黑芝麻智能發(fā)布了武當系列智能汽車跨域計算平臺及其首款芯片C1200。C1200的特色之一在于搭載了黑芝麻智能新一代自研NeuralIQ ISP模塊,為圖形計算提供更精準的數(shù)據(jù)。在由黑芝麻智能主辦的"2023智能汽車芯片高峰論壇"上,公司圖像科學總監(jiān)王超發(fā)表主題為"黑芝麻智能NerualIQ ISP技術(shù)讓汽車洞察秋毫"的演講,全面解析這一技術(shù)。
通常情況下,ISP有很多常見的處理模塊,比如白平衡、自動曝光控制、自動對焦等。黑芝麻智能的NeuralIQ ISP在安防、手機、汽車三大場景具有全平臺的處理能力。三種場景對ISP的要求不盡相同。王超介紹,針對車載應用,黑芝麻智能對ISP進行了三大方面的優(yōu)化。
算法優(yōu)化
算法層面的優(yōu)化涉及到無幀延時的多幀降噪、夜晚去運動模糊、高亮高飽和區(qū)域色彩和細節(jié)保持、不同光譜sensor的色彩一致性四個方面。
黑芝麻智能設(shè)計了無幀延時的多幀降噪,去噪的同時保持多幀圖像的特征。在ISP里盡量保留多幀圖像共有的信息,使得對外界環(huán)境的可讀性得到提升。
運動模糊的寬度取決于在曝光時間內(nèi)運動物體投影在像素平面上的寬度,針對夜晚環(huán)境下的運動模糊情況,黑芝麻智能采用了減曝光+增增益+多幀降噪的方案,使得夜晚運動模糊時的圖像質(zhì)量得到更進一步提高。
交通環(huán)節(jié)有很多重要信息都是比較高亮、高飽和的信息,黑芝麻智能通過算法改進實現(xiàn)了顏色矯正、細節(jié)保持,從而為后端的感知算法提供更加準確的數(shù)據(jù)。
有效的色彩管理手段(AWB/CCM/3DLut等)不只使得常見光譜種類的sensor的輸出圖像的色彩一致,針對不同光譜種類sensor的數(shù)據(jù)也可以做到色彩一致化。黑芝麻智能通過RGBIr的色彩處理和恢復,在即使有紅外影響的情況下,也可以得到和人類感知比較一致的顏色,為后端感知算法提供更加一致的輸入。
IP設(shè)計優(yōu)化
算法上優(yōu)化之外,黑芝麻智能在ISP的IP設(shè)計上也進行了優(yōu)化。比如,車載環(huán)境下需要應用的相機越來越多,黑芝麻智能通過IP設(shè)計手段,使用可以共享的邏輯來處理多個數(shù)據(jù),讓一系列的計算邏輯可以被復用,以此方式減少芯片面積。
同時,黑芝麻智能的NeuralIQ ISP支持在線處理模式,可以用來減少車載圖像的處理數(shù)據(jù)延時。簡單而言,從第一個數(shù)據(jù)輸入到ISP輸出第一個數(shù)據(jù),在線處理模式的延時一般小于2毫秒。
全面的ISP IQ調(diào)試流程
對于ISP的調(diào)試工作,黑芝麻智能為NeuralIQ ISP模塊設(shè)置了模組性能檢查,模組參數(shù)標定和調(diào)優(yōu),并配備調(diào)試工具。
模組性能檢查涉及模組缺陷、MTF、DOF、炫光、紅外、漏光等。模組參數(shù)標定和調(diào)優(yōu)包括鏡頭暗角標定(LSC)、色彩校正矩陣標定(CCM)、白平衡標定(AWB)、噪聲標定和調(diào)試。
在此基礎(chǔ)上,黑芝麻智能會對NeuralIQ ISP進行客觀和主觀的測試工作?陀^從鏡頭亮度陰影、鏡頭色度陰影、色彩準確性、白平衡準確性和灰階測試幾方面展開。主觀測試則是在車載的主觀場景下進行,例如白天、黑夜、日落等光照環(huán)境,隧道、車庫出入口、交通信號燈、車道線、十字路口等特殊環(huán)境,以及顛簸路面、反光路面、極暗光照等極端環(huán)境。
NeuralIQ ISP是黑芝麻智能兩大核心自研IP之一,適用于智能駕駛環(huán)視感知、前視感知、駕駛監(jiān)控等應用場景。王超表示:"希望我們的ISP能夠使接入的車載相機得到更合理的圖像效果,提供給后端感知算法使用,幫助自動駕駛能夠更順利地向前一步。"
免責聲明:
※ 以上所展示的信息來自媒體轉(zhuǎn)載或由企業(yè)自行提供,其原創(chuàng)性以及文中陳述文字和內(nèi)容未經(jīng)本網(wǎng)站證實,對本文以及其中全部或者部分內(nèi)容、文字的真實性、完整性、及時性本網(wǎng)站不作任何保證或承諾,請讀者僅作參考,并請自行核實相關(guān)內(nèi)容。如果以上內(nèi)容侵犯您的版權(quán)或者非授權(quán)發(fā)布和其它問題需要同本網(wǎng)聯(lián)系的,請在30日內(nèi)進行。
※ 有關(guān)作品版權(quán)事宜請聯(lián)系中國企業(yè)新聞網(wǎng):020-34333079 郵箱:cenn_gd@126.com 我們將在24小時內(nèi)審核并處理。
標簽 :
相關(guān)網(wǎng)文
一周新聞資訊點擊排行
關(guān)于我們 | CENN服務 | 對外合作 | 刊登廣告 | 法律聲明 | 聯(lián)系我們 | 手機版
客戶服務熱線:020-34333079、34333137 舉報電話:020-34333002 投稿郵箱:cenn_gd@126.com
版權(quán)所有:中國企業(yè)新聞網(wǎng) 運營商:廣州至高點網(wǎng)絡科技投資有限公司 地址:廣州市海珠區(qū)江燕路353號保利紅棉48棟1004