[發(fā)明專利]一種基于視覺顯著性和美學(xué)分?jǐn)?shù)的圖像裁切裝置及方法在審
| 申請?zhí)枺?/td> | 202010858270.1 | 申請日： | 2020-08-24 |
| 公開（公告）號(hào)： | CN112017193A | 公開（公告）日： | 2020-12-01 |
| 發(fā)明（設(shè)計(jì)）人： | 呂亞奇;熊永春;李云夕 | 申請（專利權(quán)）人： | 杭州趣維科技有限公司 |
| 主分類號(hào)： | G06T7/11 | 分類號(hào)： | G06T7/11;G06K9/46;G06K9/34;G06K9/32 |
| 代理公司： | 杭州天昊專利代理事務(wù)所(特殊普通合伙) 33283 | 代理人： | 董世博 |
| 地址： | 310012 浙江省杭州市西湖*** | 國省代碼： | 浙江;33 |
| 權(quán)利要求書： | 查看更多 | 說明書： | 查看更多 |
| 摘要： | |||
| 搜索關(guān)鍵詞： | 一種 基于 視覺 顯著 和美 學(xué)分 圖像 裝置 方法 | ||
1.一種基于視覺顯著性和美學(xué)分?jǐn)?shù)的圖像裁切裝置，其特征在于，包括操作模塊、顯著性檢測模塊、裁切處理模塊、美學(xué)質(zhì)量評(píng)價(jià)模塊以及展示模塊；操作模塊與顯著性檢測模塊、裁切處理模塊以及展示模塊電性連接，操作模塊將初始圖像信息通過連接線路傳輸?shù)斤@著性檢測模塊，將操作指令通過連接線路傳輸?shù)讲们刑幚砟K；顯著性模塊對(duì)圖像的顯著性區(qū)域進(jìn)行識(shí)別，顯著性區(qū)域表示包含顯著目標(biāo)的最小框圖區(qū)域；裁切處理模塊根據(jù)圖像的顯著性區(qū)域以及操作指令對(duì)圖像進(jìn)行裁切框劃分，完成裁切框劃分的圖像通過連接線路發(fā)送到美學(xué)質(zhì)量評(píng)價(jià)模塊；美學(xué)質(zhì)量評(píng)價(jià)模塊經(jīng)過訓(xùn)練后能夠?qū)Σ们锌騼?nèi)的圖像進(jìn)行評(píng)分；美學(xué)質(zhì)量評(píng)分最高的圖像會(huì)根據(jù)裁切框進(jìn)行裁切，得到的裁切圖像作為最終裁切圖像發(fā)送到展示模塊；展示模塊能夠展示最終裁切圖像。
2.根據(jù)權(quán)利要求1所述的一種基于視覺顯著性和美學(xué)分?jǐn)?shù)的圖像裁切裝置，其特征在于，所述展示模塊同時(shí)展示操作模塊傳輸?shù)某跏紙D像以及美學(xué)質(zhì)量評(píng)價(jià)模塊傳輸?shù)淖罱K裁切圖像；所述操作模塊接收操作人員輸入的待裁切的初始圖像以及操作指令，操作指令包括裁切的寬高比。
3.根據(jù)權(quán)利要求1所述的一種基于視覺顯著性和美學(xué)分?jǐn)?shù)的圖像裁切裝置，其特征在于，所述顯著性檢測模塊以及美學(xué)質(zhì)量評(píng)價(jià)模塊為深度卷積神經(jīng)網(wǎng)絡(luò)。
4.一種基于視覺顯著性和美學(xué)分?jǐn)?shù)的圖像裁切方法，其特征在于，包括如下步驟：
步驟S1：操作模塊接收初始圖像和裁切的寬高比，并將初始圖像發(fā)送至顯著性檢測模塊，將裁切的寬高比發(fā)送至裁切處理模塊；
步驟S2：顯著性檢測模塊接收初始圖像進(jìn)行顯著性區(qū)域檢測，得到帶有顯著目標(biāo)框的初始圖像，并將帶有顯著目標(biāo)框的初始圖像發(fā)送至裁切處理模塊；
步驟S3：裁切處理模塊根據(jù)顯著目標(biāo)框以及裁切的寬高比得到帶有初始裁切框的初始圖像，并基于初始裁切框生成帶有一組候選裁切框的初始圖像；一組候選裁切框中至少包含一個(gè)候選裁切框；將每個(gè)候選裁切框與初始圖像進(jìn)行結(jié)合，并根據(jù)候選裁切框進(jìn)行裁切，得到一組候選裁切圖像；將候選裁切圖像發(fā)送至美學(xué)質(zhì)量評(píng)價(jià)模塊；
步驟S4：美學(xué)質(zhì)量評(píng)價(jià)模塊對(duì)每張候選裁切圖像進(jìn)行美學(xué)質(zhì)量分?jǐn)?shù)的評(píng)估，將美學(xué)質(zhì)量分?jǐn)?shù)最高的候選裁切圖像作為最終裁切圖像發(fā)送至展示模塊；
步驟S5：展示模塊接收美學(xué)質(zhì)量評(píng)價(jià)模塊發(fā)送的最終裁切圖像，并與初始圖像同時(shí)進(jìn)行展示；
其中顯著性檢測模塊以及美學(xué)質(zhì)量評(píng)價(jià)模塊需要先經(jīng)過訓(xùn)練。
5.根據(jù)權(quán)利要求4所述的一種基于視覺顯著性和美學(xué)分?jǐn)?shù)的圖像裁切方法，其特征在于，所述步驟S2中顯著目標(biāo)框標(biāo)記為bsalient，顯著目標(biāo)框根據(jù)式(1)得出：
bsalient＝S(Iinput) (1)
其中Iinput表示初始圖像的三維矩陣表現(xiàn)形式；S為顯著性檢測模塊經(jīng)過訓(xùn)練后得到的算子。
6.根據(jù)權(quán)利要求4所述的一種基于視覺顯著性和美學(xué)分?jǐn)?shù)的圖像裁切方法，其特征在于，所述步驟S3生成候選裁切框，并根據(jù)候選裁切框進(jìn)行裁切的步驟包括：
S31：確定裁切的寬高比rw/h以及顯著目標(biāo)框bsalient；
S32：以顯著目標(biāo)框的中心為原點(diǎn)，結(jié)合裁切的寬高比rw/h，得到包含顯著目標(biāo)框圖像范圍的初始裁切框binit；
S33：根據(jù)得到的初始裁切框binit，生成一組候選裁切框；
S34：將每個(gè)候選裁切框與初始圖像進(jìn)行匹配，并進(jìn)行裁切，得到候選裁切圖像。
該專利技術(shù)資料僅供研究查看技術(shù)是否侵權(quán)等信息，商用須獲得專利權(quán)人授權(quán)。該專利全部權(quán)利屬于杭州趣維科技有限公司，未經(jīng)杭州趣維科技有限公司許可，擅自商用是侵權(quán)行為。如果您想購買此專利、獲得商業(yè)授權(quán)和技術(shù)合作，請聯(lián)系【客服】
本文鏈接：http://www.szxzyx.cn/pat/books/202010858270.1/1.html，轉(zhuǎn)載請聲明來源鉆瓜專利網(wǎng)。
