[發(fā)明專利]用于調(diào)整圖像管線設(shè)置的方法和系統(tǒng)

有效

• 申請(qǐng)?zhí)枺?/td>: 201911289306.2
• 申請(qǐng)日: 2019-12-13
• 公開(kāi)（公告）號(hào): CN111355882B
• 公開(kāi)（公告）日: 2022-08-09
• 發(fā)明（設(shè)計(jì)）人: 邁克爾·埃韋哈馬爾;安德里亞斯·約翰遜;米卡埃爾·斯塔維克;斯蒂芬·埃肯貝格;亞當(dāng)·希爾·科爾貝里;亨里克·費(fèi)斯特;芒努斯·莫滕松;馬丁·桑特松
• 申請(qǐng)（專利權(quán)）人: 安訊士有限公司
• 主分類號(hào): H04N5/232
• 分類號(hào): H04N5/232;H04N5/217;H04N5/235;H04N9/73
• 代理公司: 北京德琦知識(shí)產(chǎn)權(quán)代理有限公司 11018
• 代理人: 嚴(yán)芬;宋志強(qiáng)

本發(fā)明涉及用于調(diào)整圖像管線設(shè)置的方法和系統(tǒng)。公開(kāi)了一種確定圖像管線設(shè)置的調(diào)整的方法。該方法包括：由控制器(2)確定圖像管線(1)中的用于圖像數(shù)據(jù)處理的一個(gè)或多個(gè)設(shè)置；將所述一個(gè)或多個(gè)設(shè)置與標(biāo)簽相關(guān)聯(lián)；將所述一個(gè)或多個(gè)設(shè)置傳輸?shù)綀D像管線(1)，其中所述標(biāo)簽與所述一個(gè)或多個(gè)設(shè)置相關(guān)聯(lián)地被傳輸；將關(guān)于利用所述一個(gè)或多個(gè)設(shè)置處理的圖像數(shù)據(jù)的反饋從圖像管線(1)傳輸?shù)娇刂破?2)，其中所述標(biāo)簽與所述反饋相關(guān)聯(lián)地被傳輸；以及基于接收到的反饋以及與所述標(biāo)簽相關(guān)聯(lián)的所述一個(gè)或多個(gè)設(shè)置，確定所述圖像管線設(shè)置的調(diào)整。還公開(kāi)了一種相對(duì)應(yīng)的系統(tǒng)。

技術(shù)領(lǐng)域

本發(fā)明涉及調(diào)整圖像管線設(shè)置的領(lǐng)域，并且尤其涉及如何以有效且可靠的方式確定圖像管線設(shè)置的調(diào)整的領(lǐng)域。

背景技術(shù)

視頻捕獲技術(shù)包括獲取和處理數(shù)字圖像數(shù)據(jù)以生成數(shù)字視頻流，從而例如進(jìn)行分析或顯示給用戶。獲取和處理由所謂的圖像管線進(jìn)行，該圖像管線是任何攝像機(jī)系統(tǒng)的組成部分。對(duì)于當(dāng)今的許多攝像機(jī)系統(tǒng)，圖像管線是由自動(dòng)過(guò)程控制的，這些自動(dòng)過(guò)程調(diào)整圖像管線中的用于處置圖像數(shù)據(jù)的設(shè)置。

圖像管線可以被視為包括不同的組件或塊，每個(gè)組件或塊都處置管線中的特定部分。能夠以這種方式控制的部分的非限制性示例是增益、曝光(快門)、白平衡(WB)和編碼。可以將關(guān)于由圖像管線的這些組件中的許多組件處理或處理過(guò)的圖像數(shù)據(jù)的信息從該組件發(fā)送到某種控制器。信息例如能夠是一般或特定的顏色信息或不同形式的像素值分布。基于該信息，控制器能夠確定需要調(diào)整組件的設(shè)置以便改進(jìn)捕獲或處理。例如，如果控制器接收到指示經(jīng)過(guò)處理的圖像幀太暗的信息，例如低于某個(gè)閾值的像素值的數(shù)量超過(guò)限制，則該控制器可以決定增加曝光時(shí)間組件的曝光時(shí)間設(shè)置。基于接下來(lái)接收到的相同類型的圖像信息，控制器可以確定進(jìn)一步的調(diào)整。由此形成用于確定圖像管線設(shè)置的調(diào)整的基于反饋的過(guò)程。

然而，該過(guò)程可能難以實(shí)現(xiàn)令人滿意的結(jié)果。一方面，根據(jù)當(dāng)前的處理負(fù)載，很難預(yù)測(cè)直到在圖像管線中應(yīng)用設(shè)置為止花費(fèi)多少時(shí)間，并且因此，在大多數(shù)情況下，必須等待很長(zhǎng)的不必要的時(shí)間才能確保設(shè)置生效。另一方面，沒(méi)有等待足夠長(zhǎng)的時(shí)間可能導(dǎo)致基于關(guān)于圖像數(shù)據(jù)的未利用設(shè)置處理的圖像數(shù)據(jù)來(lái)確定設(shè)置調(diào)整。這會(huì)導(dǎo)致圖像特性(例如顏色、曝光、增益等)發(fā)生不期望的變化。因此，必須考慮在等待時(shí)間和變化風(fēng)險(xiǎn)之間的動(dòng)態(tài)設(shè)置的平衡，隨著時(shí)間的推移該動(dòng)態(tài)設(shè)置的平衡很難實(shí)現(xiàn)令人滿意的結(jié)果。

控制器可以同時(shí)確定幾個(gè)設(shè)置調(diào)整使得問(wèn)題更加復(fù)雜。這些設(shè)置可能與圖像管線中的不同組件相關(guān)。如US 8 605 169 B2中所討論的，該過(guò)程引入了同步問(wèn)題，但是也使得上述討論的平衡更加難以實(shí)現(xiàn)。為了使所有設(shè)置生效，必須考慮更長(zhǎng)的等待時(shí)間，這會(huì)使反饋過(guò)程變慢。

因此，在該領(lǐng)域內(nèi)需要改進(jìn)。

發(fā)明內(nèi)容

本發(fā)明的目的是提供一種確定圖像管線設(shè)置的調(diào)整的方法，該方法能夠變得更省時(shí)或更可靠，優(yōu)選兩者兼而有之。

根據(jù)第一方面，通過(guò)確定圖像管線設(shè)置的調(diào)整的方法全部或至少部分地實(shí)現(xiàn)了這些和其他目的，該方法包括：

·由控制器確定圖像管線中的用于圖像數(shù)據(jù)處理的一個(gè)或多個(gè)設(shè)置，

·將一個(gè)或多個(gè)設(shè)置與標(biāo)簽相關(guān)聯(lián)，

·將一個(gè)或多個(gè)設(shè)置傳輸?shù)綀D像管線，其中標(biāo)簽與一個(gè)或多個(gè)設(shè)置相關(guān)聯(lián)地被傳輸，

·將關(guān)于利用一個(gè)或多個(gè)設(shè)置處理的圖像數(shù)據(jù)的反饋從圖像管線傳輸?shù)娇刂破鳎渲袠?biāo)簽與反饋相關(guān)聯(lián)地被傳輸，以及

·基于接收到的反饋以及與標(biāo)簽相關(guān)聯(lián)的一個(gè)或多個(gè)設(shè)置，確定圖像管線設(shè)置的調(diào)整。