[發明專利]生成腳踏車騎手用安全衣服圖案的方法及裝置

有效

• 申請號: 202010066983.4
• 申請日: 2020-01-20
• 公開（公告）號: CN111508042B
• 公開（公告）日: 2023-08-18
• 發明（設計）人: 金桂賢;金镕重;金鶴京;南云鉉;夫碩焄;成明哲;申東洙;呂東勛;柳宇宙;李明春;李炯樹;張泰雄;鄭景中;諸泓模;趙浩辰
• 申請（專利權）人: 斯特拉德視覺公司
• 主分類號: G06T11/00
• 分類號: G06T11/00;G06T11/40;G06T7/10;G06T5/50;G06N3/0455;G06N3/0475;G06N3/084;G06N3/094
• 代理公司: 北京東方億思知識產權代理有限責任公司 11258
• 代理人: 楊佳婧

1.一種用于生成用于類人形體的至少一個安全衣服圖案的方法，包括：

步驟a：在獲取到所述類人形體的至少一個圖像的情況下，安全衣服圖案生成裝置執行生成具有初始值的至少一個特定衣服圖案的過程及將所述特定衣服圖案和所述類人形體的所述圖像輸入到衣服合成網絡的過程，使得所述衣服合成網絡將所述類人形體的所述圖像上的所述類人形體的衣服和所述特定衣服圖案合成，從而生成與所述類人形體的所述圖像對應的至少一個合成圖像；

步驟b：所述安全衣服圖案生成裝置執行以下過程：將所述合成圖像輸入到圖像轉換網絡，從而使所述圖像轉換網絡轉換所述合成圖像上的周邊環境并生成至少一個轉換圖像；以及將所述轉換圖像輸入到客體檢測器而使所述客體檢測器輸出表示在所述轉換圖像上檢測到的所述類人形體的關于所述類人形體的檢測信息；以及

步驟c：所述安全衣服圖案生成裝置執行以下過程：使第一損失層以關于所述類人形體的所述檢測信息和與所述類人形體的所述圖像對應的至少一個真實值GT為參考來算出至少一個損失；以及利用所述損失來更新所述特定衣服圖案的所述初始值，從而使所述損失最小化。

2.根據權利要求1所述的方法，其中，

在所述步驟a中，所述安全衣服圖案生成裝置執行將所述特定衣服圖案和所述類人形體的所述圖像輸入到所述衣服合成網絡的過程，從而使所述衣服合成網絡執行以下過程來生成所述合成圖像：i)通過分割網絡來分割所述類人形體的所述圖像上的所述衣服和通過姿勢推斷網絡來獲取所述類人形體的所述圖像上的所述類人形體的至少一個關節部位；ii)獲取通過遮蔽層參考所述關節部位而利用所述特定衣服圖案遮蔽所述衣服而生成的至少一個遮蔽圖像；iii)連接所述遮蔽圖像和所述類人形體的所述圖像來生成至少一個連接圖像；以及iv)通過編碼器對所述連接圖像應用至少一次卷積運算和通過解碼器對所述編碼器的輸出應用至少一次去卷積運算。

3.根據權利要求2所述的方法，其中，

所述衣服合成網絡處于由學習裝置以利用所述特定衣服圖案和所述類人形體的所述圖像來生成所述合成圖像的方式學習的狀態，

所述學習裝置通過反復執行以下過程來學習所述衣服合成網絡：i)將所述類人形體的至少一個獲取到的訓練圖像輸入到所述分割網絡而使所述分割網絡分割所述類人形體的所述訓練圖像上的至少一個學習用衣服和將所述類人形體的所述訓練圖像輸入到所述姿勢推斷網絡而使所述姿勢推斷網絡獲取所述類人形體的所述訓練圖像上的至少一個學習用類人形體的至少一個學習用關節部位；ii)將所述學習用關節部位、所述學習用衣服及至少一個獲取到的學習用衣服圖案輸入到所述遮蔽層，從而使所述遮蔽層以所述學習用關節部位為參考而利用所述學習用衣服圖案來遮蔽所述學習用衣服以生成至少一個學習用遮蔽圖像；iii)連接所述學習用遮蔽圖像和所述類人形體的所述訓練圖像以生成至少一個學習用連接圖像；iv)將所述學習用連接圖像輸入到所述編碼器而使所述編碼器對所述學習用連接圖像應用至少一次卷積運算；和將所述編碼器的所述輸出輸入到所述解碼器而使所述解碼器對所述編碼器的所述輸出應用至少一次去卷積運算而生成學習用合成圖像；以及v)使第二損失層以v-1)所述學習用合成圖像和v-2)至少一個真實值GT圖像為參考算出至少一個感知損失，其中，所述至少一個真實值GT圖像被生成為與所述類人形體的所述訓練圖像及所述學習用衣服圖案對應；和通過參考所述感知損失的反向傳播來調整所述解碼器、所述編碼器及所述遮蔽層中的至少一個參數以使所述感知損失最小化。

4.根據權利要求3所述的方法，其中，

通過利用所述學習用衣服圖案遮蔽所述類人形體的所述訓練圖像上的所述學習用衣服來生成所述真實值GT圖像。

5.根據權利要求1所述的方法，其中，

所述真實值GT為i)通過標記所述類人形體的所述圖像而生成的與所述類人形體對應的信息及ii)從輸入到所述客體檢測器或其他客體檢測器的所述類人形體的所述圖像檢測到的與所述類人形體對應的信息中的一者。