[發(fā)明專(zhuān)利]智能攝像機(jī)、圖像處理裝置以及數(shù)據(jù)通信方法

有效

• 申請(qǐng)?zhí)枺?/td>: 201880037256.6
• 申請(qǐng)日: 2018-08-22
• 公開(kāi)（公告）號(hào): CN110710199B
• 公開(kāi)（公告）日: 2021-03-02
• 發(fā)明（設(shè)計(jì)）人: 高崎大輔;安波真悟;栗原伸一
• 申請(qǐng)（專(zhuān)利權(quán)）人: 株式會(huì)社東芝;東芝基礎(chǔ)設(shè)施系統(tǒng)株式會(huì)社
• 主分類(lèi)號(hào): H04N7/18
• 分類(lèi)號(hào): H04N7/18;H04N21/235;G08G1/017
• 代理公司: 中國(guó)貿(mào)促會(huì)專(zhuān)利商標(biāo)事務(wù)所有限公司 11038
• 代理人: 李今子

能夠使影像信號(hào)與特征數(shù)據(jù)同步地傳送。根據(jù)實(shí)施方式，智能攝像機(jī)具備圖像傳感器、特征數(shù)據(jù)生成部、編碼部、同步處理部、復(fù)用部以及發(fā)送部。圖像傳感器輸出影像信號(hào)。特征數(shù)據(jù)生成部生成影像信號(hào)的特征數(shù)據(jù)。編碼部對(duì)影像信號(hào)進(jìn)行編碼而生成影像數(shù)據(jù)。同步處理部使生成的特征數(shù)據(jù)與影像數(shù)據(jù)同步。復(fù)用部將影像數(shù)據(jù)和與該影像數(shù)據(jù)同步的特征數(shù)據(jù)復(fù)用到傳輸流。發(fā)送部將傳輸流發(fā)送到通信網(wǎng)絡(luò)。

技術(shù)領(lǐng)域

本發(fā)明的實(shí)施方式涉及關(guān)于智能攝像機(jī)的技術(shù)。

背景技術(shù)

智能攝像機(jī)被關(guān)注。智能攝像機(jī)具備圖像傳感器、處理器以及通信功能。用于使多個(gè)智能攝像機(jī)與云計(jì)算系統(tǒng)(以下，簡(jiǎn)稱(chēng)為云端)協(xié)作，將影像數(shù)據(jù)活用作大數(shù)據(jù)的平臺(tái)也正在配備。例如，研究使用影像數(shù)據(jù)來(lái)實(shí)施用于防災(zāi)的定點(diǎn)觀測(cè)、交通的監(jiān)視、道路、橋梁等基礎(chǔ)設(shè)施的監(jiān)視、人物檢索、人物追蹤、可疑人物的追緝等。為了實(shí)現(xiàn)這樣的解決方案，重要的是通過(guò)各種算法來(lái)分析影像信號(hào)或者影像數(shù)據(jù)并得到圖像分析信息。

為了分析影像信號(hào)，不僅利用影像信號(hào)，還利用影像信號(hào)所附帶的元數(shù)據(jù)(例如攝影日期時(shí)間、分辨率、攝像機(jī)位置、攝像機(jī)指向方向等)。有時(shí)還使用圖像分析信息和元數(shù)據(jù)計(jì)算新的圖像分析信息。將分析影像信號(hào)而得到的圖像分析信息和影像信號(hào)所附帶的元數(shù)據(jù)總稱(chēng)為特征數(shù)據(jù)。也就是說(shuō)，特征數(shù)據(jù)包括圖像分析信息和元數(shù)據(jù)中的至少任意一方。另外，影像數(shù)據(jù)能夠理解為對(duì)影像信號(hào)進(jìn)行編碼而得到的數(shù)字?jǐn)?shù)據(jù)。

在現(xiàn)有技術(shù)中，為了傳送特征數(shù)據(jù)，需要構(gòu)建與影像數(shù)據(jù)的收集系統(tǒng)分開(kāi)的系統(tǒng)，效率低。特別是，其課題在于無(wú)法取得影像信號(hào)與特征數(shù)據(jù)的同步，難以在云端側(cè)進(jìn)行將兩方的數(shù)據(jù)進(jìn)行組合的分析。在利用影像數(shù)據(jù)側(cè)，期望能夠獲取與影像信號(hào)同步的特征數(shù)據(jù)。

另外，近年來(lái)由于傳感器設(shè)備的小型化及低價(jià)格化，還銷(xiāo)售搭載有多個(gè)攝像機(jī)的智能手機(jī)、車(chē)載攝像機(jī)等。還研究使用了復(fù)眼攝像機(jī)的立體圖像的生成、具有距離信息的圖像(距離圖像)的生成等。還已知將多個(gè)攝像機(jī)設(shè)備排列成陣列狀的陣列攝像機(jī)。進(jìn)而，還已知將可見(jiàn)光攝像機(jī)、近紅外線攝像機(jī)以及遠(yuǎn)紅外線攝像機(jī)安裝于共同的框體的多光譜攝像機(jī)(還被稱(chēng)為混合攝像機(jī))。這些下一代攝像機(jī)期待經(jīng)由有線網(wǎng)絡(luò)、無(wú)線網(wǎng)絡(luò)連接于中心裝置，應(yīng)用于遠(yuǎn)程監(jiān)視系統(tǒng)等。

將陣列攝像機(jī)的所有的攝像機(jī)的影像數(shù)據(jù)發(fā)送到中心裝置的情形少，切換輸出任意的攝像機(jī)的圖像的情形較多。例如為了進(jìn)行人物探測(cè)，進(jìn)行如下運(yùn)用，即，在白天用可見(jiàn)光攝像機(jī)進(jìn)行定點(diǎn)觀測(cè)，而在夜間切換為紅外線攝像機(jī)。這樣，將包含影像的流的傳送所需的占用帶寬抑制到最小限度。

然而，當(dāng)切換影像時(shí)，有時(shí)接收傳輸流側(cè)的處理來(lái)不及，時(shí)間序列的圖像分析數(shù)據(jù)缺失一部分。在技術(shù)上，將這種情況稱(chēng)為“在圖像處理中產(chǎn)生不連續(xù)”。例如，當(dāng)彩色影像突然切換為單色影像時(shí)，盡管接受此的中心裝置獲取到相同的視野的影像，但難以繼續(xù)進(jìn)行圖像處理。攝像機(jī)間的色調(diào)的不同、波長(zhǎng)的不同、對(duì)比度的不同、焦點(diǎn)的偏離、畫(huà)面尺寸的不同、視角的不同等帶來(lái)不連續(xù)的因素有各種各樣。當(dāng)不連續(xù)變得嚴(yán)重時(shí)，圖像處理有可能會(huì)被復(fù)位。

這樣，在該技術(shù)領(lǐng)域，存在難以保持影像的切換(幀切換)前后的、圖像處理的連續(xù)性這樣的技術(shù)課題。在用多個(gè)單眼攝像機(jī)觀察共同的視野的方式的系統(tǒng)中，情況也是相同的。

現(xiàn)有技術(shù)文獻(xiàn)

專(zhuān)利文獻(xiàn)

專(zhuān)利文獻(xiàn)1：日本特開(kāi)2005-328479號(hào)公報(bào)

非專(zhuān)利文獻(xiàn)

非專(zhuān)利文獻(xiàn)1：服部寬著，“從動(dòng)態(tài)的背景之中僅檢測(cè)人物的圖像辨別技術(shù)(日文：動(dòng)的な背景の中から人物だけを検出する畫(huà)像認(rèn)識(shí)技術(shù))”，東芝評(píng)論Vol.65No.6(2010)，p60～61

非專(zhuān)利文獻(xiàn)2：“數(shù)字廣播中的影像編碼、聲音編碼以及復(fù)用方式(日文：デジタル放送における映像符號(hào)化、音聲符號(hào)化及び多重化方式)”，ARIB標(biāo)準(zhǔn)規(guī)格ARIB STD－B323.1版(平成26年12月16日修改)