[發明專利]一種圖片描述信息的獲取方法及裝置

有效

• 申請號: 201910631671.0
• 申請日: 2019-07-12
• 公開（公告）號: CN110413820B
• 公開（公告）日: 2022-03-29
• 發明（設計）人: 陳海波
• 申請（專利權）人: 深蘭科技（上海）有限公司
• 主分類號: G06F16/58
• 分類號: G06F16/58;G06F16/55;G06N3/04
• 代理公司: 北京同達信恒知識產權代理有限公司 11291
• 代理人: 郭潤湘

1.一種圖片描述信息的獲取方法，其特征在于，所述方法包括：

對獲取的待描述圖片，采用預設圖像處理算法，獲取所述待描述圖片中的至少一個對象和所述至少一個對象的對象信息；其中，所述對象信息包括對象標識、屬性信息以及所述至少一個對象中對象間的關聯關系，所述對象間的關聯關系包括所述對象間的位置特征信息；

采用預設詞處理算法，對所述待描述圖片對應的原始圖片描述信息進行分詞與詞分類處理，得到至少一個第一詞和所述至少一個第一詞的詞類型；

采用預設神經網絡算法，將所述至少一個第一詞、所述至少一個第一詞的詞類型與所述至少一個對象的對象信息進行匹配運算，獲取所述至少一個對象的對象信息對應的目標詞；

將所述對象信息對應的目標詞按照預設圖片描述結構進行存儲，得到新的圖片描述信息。

2.如權利要求1所述的方法，其特征在于，對獲取的待描述圖片，采用預設圖像處理算法，獲取所述待描述圖片中的至少一個對象和所述至少一個對象的對象信息，包括：

根據預設對象檢測算法，對所述待描述圖片進行對象檢測，獲取至少一個對象和相應對象標識；

根據預設特征提取算法，對所述至少一個對象進行特征提取，得到所述至少一個對象的屬性信息；

根據預設坐標算法和所述待描述圖片的像素值，對所述至少一個對象進行位置運算，得到所述至少一個對象的位置信息；

基于所述至少一個對象的位置信息，采用預設空間推理算法，得到表示對象間位置關系的位置特征信息，以獲取所述對象間的關聯關系。

3.如權利要求2所述的方法，其特征在于，所述對象間的關聯關系還包括所述對象間的行為特征信息；

得到所述至少一個對象中對象間的位置信息之后，所述方法還包括：

根據所述至少一個對象的位置信息和所述屬性信息中的對象狀態，采用預設邏輯推理算法，得到表示對象間對象狀態的行為特征信息，以獲取所述對象間的關聯關系。

4.如權利要求1所述的方法，其特征在于，采用預設詞處理算法，對所述待描述圖片對應的原始圖片描述信息進行運算，得到至少一個第一詞和所述至少一個第一詞的詞類型，包括：

采用預設分詞算法，對所述原始圖片描述信息進行分詞運算，得到至少一個待分類詞；

采用預設詞嵌入的距離算法，對所述至少一個待分類詞進行分類，得到至少一個第一詞和所述至少一個第一詞的詞類型。

5.如權利要求1所述的方法，其特征在于，得到新的圖片描述信息之后，所述方法還包括：

根據所述至少一個對象中每個對象的屬性信息，獲取描述所述對象的擴展詞，所述擴展詞包括描述所述對象的同義詞、多義詞和擬聲詞中的至少一種；

將所述擴展詞添加入所述新的圖片描述信息。

6.如權利要求1所述的方法，其特征在于，得到新的圖片描述信息之后，所述方法還包括：

獲取所述待描述圖片的屬性信息，所述屬性信息包括待描述圖片的拍攝時間、拍攝位置和拍攝環境；

將所述待描述圖片的屬性信息添加入所述新的圖片描述信息。

7.一種圖片描述信息的獲取裝置，其特征在于，所述裝置包括：獲取單元、運算單元和存儲單元；

所述獲取單元，用于對獲取的待描述圖片，采用預設圖像處理算法，獲取所述待描述圖片中的至少一個對象和所述至少一個對象的對象信息；其中，所述對象信息包括對象標識、屬性信息以及所述至少一個對象中對象間的關聯關系，所述對象間的關聯關系包括所述對象間的位置特征信息；

所述運算單元，用于采用預設詞處理算法，對所述待描述圖片對應的原始圖片描述信息進行分詞與詞分類處理，得到至少一個第一詞和所述至少一個第一詞的詞類型；

采用預設神經網絡算法，將所述至少一個第一詞、所述至少一個第一詞的詞類型與所述至少一個對象的對象信息進行匹配運算，獲取所述至少一個對象的對象信息對應的目標詞；

所述存儲單元，用于將所述對象信息對應的目標詞按照預設圖片描述結構進行存儲，得到新的圖片描述信息。