[發(fā)明專利]圖像處理方法、裝置、存儲介質(zhì)及電子設備

有效

• 申請?zhí)枺?/td>: 202110351397.9
• 申請日: 2021-03-31
• 公開（公告）號: CN113033579B
• 公開（公告）日: 2023-03-21
• 發(fā)明（設計）人: 吳昊;陳嘉誠;王長虎
• 申請（專利權(quán)）人: 北京有竹居網(wǎng)絡技術有限公司
• 主分類號: G06V10/77
• 分類號: G06V10/77;G06V10/764
• 代理公司: 北京英創(chuàng)嘉友知識產(chǎn)權(quán)代理事務所(普通合伙) 11447
• 代理人: 魏云鹿

1.一種圖像處理方法，其特征在于，所述方法包括：

獲取待處理的目標圖像；

將所述目標圖像輸入圖像處理模型，以得到對應的圖像處理結(jié)果；

其中，所述圖像處理模型用于提取所述目標圖像的圖像特征，根據(jù)預訓練的池化向量對所述目標圖像的圖像特征進行池化處理，根據(jù)池化處理后的所述圖像特征輸出所述圖像處理結(jié)果，其中，所述池化向量是作為所述圖像處理模型的參數(shù)、通過對所述圖像處理模型進行訓練而得到的；

所述根據(jù)預訓練的池化向量對所述目標圖像的圖像特征進行池化處理，包括：對預訓練的所述池化向量進行插值處理，并對插值處理后的所述池化向量進行歸一化處理，以得到目標池化向量；根據(jù)所述目標池化向量對所述目標圖像的圖像特征進行池化處理；

所述對預訓練的所述池化向量進行插值處理，包括：對預訓練的所述池化向量進行分段處理；針對分段處理后不包括所述池化向量中最大向量值和最小向量值的向量分段進行插值處理。

2.根據(jù)權(quán)利要求1所述的方法，其特征在于，所述根據(jù)預訓練的池化向量對所述目標圖像的圖像特征進行池化處理，包括：

基于所述圖像特征對應的特征向量的數(shù)值，對所述圖像特征進行排序，以得到目標圖像特征；

將預訓練的池化向量與所述目標圖像特征進行點乘，以得到池化處理后的所述圖像特征。

3.根據(jù)權(quán)利要求1-2任一項所述的方法，其特征在于，所述池化向量的訓練步驟包括：

確定初始池化向量，并對所述初始池化向量進行歸一化處理，以得到歸一池化向量；

根據(jù)所述歸一池化向量對用于訓練所述圖像處理模型的樣本圖像所對應的樣本圖像特征進行池化處理，以得到所述圖像處理模型根據(jù)池化處理后的所述樣本圖像特征輸出的樣本圖像處理結(jié)果；

根據(jù)所述樣本圖像處理結(jié)果和對所述樣本圖像預先標注的圖像處理結(jié)果，計算損失函數(shù)，并根據(jù)所述損失函數(shù)的計算結(jié)果調(diào)整所述初始池化向量。

4.根據(jù)權(quán)利要求3所述的方法，其特征在于，所述對所述初始池化向量進行歸一化處理，包括：

針對所述初始池化向量中每一池化向量值，將所述向量值除以所述初始池化向量中各池化向量值之和，以得到所述池化向量值的歸一化處理結(jié)果。

5.根據(jù)權(quán)利要求4所述的方法，其特征在于，所述圖像處理模型包括圖文匹配模型，所述根據(jù)所述損失函數(shù)的計算結(jié)果調(diào)整所述初始池化向量，包括：

調(diào)整所述初始池化向量，以使池化處理后的所述樣本圖像特征與具有關聯(lián)的樣本文本特征之間特征向量的距離最小，且使池化處理后的所述樣本圖像特征與不具有關聯(lián)的樣本文本特征之間特征向量的距離最大。

6.一種圖像處理裝置，其特征在于，所述裝置包括：

獲取模塊，用于獲取待處理的目標圖像；

處理模塊，用于將所述目標圖像輸入圖像處理模型，以得到對應的圖像處理結(jié)果；其中，所述處理模塊包括：提取子模塊，用于通過所述圖像處理模型提取所述目標圖像的圖像特征；池化子模塊，用于根據(jù)預訓練的池化向量對所述目標圖像的圖像特征進行池化處理，所述池化向量是作為所述圖像處理模型的參數(shù)、通過對所述圖像處理模型進行訓練而得到的；輸出子模塊，用于根據(jù)池化處理后的所述圖像特征輸出所述圖像處理結(jié)果；

所述池化子模塊用于：

對預訓練的所述池化向量進行插值處理，并對插值處理后的所述池化向量進行歸一化處理，以得到目標池化向量；根據(jù)所述目標池化向量對所述目標圖像的圖像特征進行池化處理；

所述池化子模塊還用于：對預訓練的所述池化向量進行分段處理；針對分段處理后不包括所述池化向量中最大向量值和最小向量值的向量分段進行插值處理。

7.一種計算機可讀介質(zhì)，其上存儲有計算機程序，其特征在于，該程序被處理裝置執(zhí)行時實現(xiàn)權(quán)利要求1-5中任一項所述方法的步驟。

8.一種電子設備，其特征在于，包括：

存儲裝置，其上存儲有計算機程序；

處理裝置，用于執(zhí)行所述存儲裝置中的所述計算機程序，以實現(xiàn)權(quán)利要求1-5中任一項所述方法的步驟。