[發(fā)明專利]一種在移動終端預(yù)覽、拍攝模式下的數(shù)據(jù)增強(qiáng)方法及裝置

在審

• 申請?zhí)枺?/td>: 201710871235.1
• 申請日: 2017-09-24
• 公開（公告）號: CN107705259A
• 公開（公告）日: 2018-02-16
• 發(fā)明（設(shè)計）人: 周曉;朱才志
• 申請（專利權(quán)）人: 合肥麟圖信息科技有限公司
• 主分類號: G06T5/00
• 分類號: G06T5/00;G06F17/30
• 代理公司: 合肥天明專利事務(wù)所(普通合伙)34115
• 代理人: 金凱

1.一種在移動終端預(yù)覽、拍攝模式下的數(shù)據(jù)增強(qiáng)方法，其特征在于，包括：

S1、離線建立數(shù)據(jù)庫，具體為：

S11、構(gòu)建目標(biāo)圖像數(shù)據(jù)庫，并采集網(wǎng)絡(luò)、標(biāo)準(zhǔn)圖像庫以及自建圖像數(shù)據(jù)庫中的圖像存儲至目標(biāo)圖像數(shù)據(jù)庫；

S12、構(gòu)建目標(biāo)信息數(shù)據(jù)庫，并將目標(biāo)圖像數(shù)據(jù)庫中的圖像的標(biāo)注信息存儲至目標(biāo)信息數(shù)據(jù)庫；

S13、構(gòu)建目標(biāo)特征數(shù)據(jù)庫，利用基于深度學(xué)習(xí)的物體檢測模型對目標(biāo)圖像數(shù)據(jù)庫中的圖像進(jìn)行目標(biāo)檢測，對檢測出的目標(biāo)進(jìn)行特征提取并存儲至目標(biāo)特征數(shù)據(jù)庫；

S2、對輸入的真實場景圖像進(jìn)行在線增強(qiáng)數(shù)據(jù)圖像；

S21、移動終端在預(yù)覽或者拍攝模式下獲得真實場景圖像；

S22、利用所述基于深度學(xué)習(xí)的物體檢測模型對輸入的真實場景圖像進(jìn)行目標(biāo)檢測，得到真實場景圖像中所有顯著性目標(biāo)，并對所有顯著性目標(biāo)進(jìn)行特征提取；

S23、將真實場景圖像中每個目標(biāo)特征與目標(biāo)特征數(shù)據(jù)庫中目標(biāo)特征進(jìn)行比對，得到目標(biāo)圖像排序結(jié)果；

S24、根據(jù)所述目標(biāo)圖像排序結(jié)果，基于圖像數(shù)據(jù)存取分布式文件系統(tǒng)及相似性檢索引擎，在目標(biāo)圖像數(shù)據(jù)庫中檢索出至少一張目標(biāo)圖像的原始數(shù)據(jù)以及從目標(biāo)信息數(shù)據(jù)庫中提取與至少一張目標(biāo)圖像對應(yīng)的目標(biāo)標(biāo)注信息；

S25、將檢索出的至少一張目標(biāo)圖像的數(shù)據(jù)、與目標(biāo)圖像對應(yīng)的目標(biāo)標(biāo)注信息、以及顯著性物體同時疊加在該顯著性物體的場景位置處，并顯示疊加后的融合圖像。

2.如權(quán)利要求1所述的方法，其特征在于，所述基于深度學(xué)習(xí)的物體檢測模型具體為：

針對感興趣目標(biāo)數(shù)據(jù)，設(shè)計基于深度學(xué)習(xí)的物體檢測模型并利用感興趣目標(biāo)對基于深度學(xué)習(xí)的物體檢測模型進(jìn)行訓(xùn)練得到；

其中，感興趣目標(biāo)數(shù)據(jù)包括外部數(shù)據(jù)或者通過手工標(biāo)注所述目標(biāo)圖像數(shù)據(jù)庫中部分/全部目標(biāo)圖像中的感興趣目標(biāo)數(shù)據(jù)。

3.如權(quán)利要求2所述的方法，其特征在于，在所述的步驟S21之前，還包括：

對所述真實場景的圖像進(jìn)行降噪處理，得到處理后的真實場景圖像。

4.如權(quán)利要求2所述的方法，其特征在于，還包括：

基于特征提取方法，對所述利用基于深度學(xué)習(xí)的物體檢測模型檢測出的目標(biāo)進(jìn)行特征提取。

5.如權(quán)利要求2所述的方法，其特征在于，所述的步驟S23，具體包括：

將所述真實場景圖像中目標(biāo)特征與目標(biāo)特征數(shù)據(jù)庫中所有目標(biāo)特征進(jìn)行比對計算，并將計算出的相似性分?jǐn)?shù)由高到低排序；

按照相似性分?jǐn)?shù)的高低順序，返回目標(biāo)圖像數(shù)據(jù)庫中與所述用于排序的特征對應(yīng)的目標(biāo)圖像，得到所述目標(biāo)圖像結(jié)果。

6.如權(quán)利要求2所述的方法，其特征在于，還包括：

對檢索結(jié)果進(jìn)行分析，并根據(jù)分析結(jié)果對所述的物體檢測模型進(jìn)行優(yōu)化。