[發明專利]一種交互方法、裝置及電子設備、計算機存儲介質在審
| 申請號: | 202010899228.4 | 申請日: | 2020-08-31 |
| 公開(公告)號: | CN112068698A | 公開(公告)日: | 2020-12-11 |
| 發明(設計)人: | 徐持衡;周舒巖;謝符寶;黃攀;王琳;楊松;陳彬;劉昕 | 申請(專利權)人: | 北京市商湯科技開發有限公司 |
| 主分類號: | G06F3/01 | 分類號: | G06F3/01;G06K9/00;G06F3/0488 |
| 代理公司: | 北京派特恩知識產權代理有限公司 11270 | 代理人: | 馬麗;張穎玲 |
| 地址: | 100080 北京市海淀區北*** | 國省代碼: | 北京;11 |
| 權利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關鍵詞: | 一種 交互 方法 裝置 電子設備 計算機 存儲 介質 | ||
本公開實施例公開了一種交互方法、裝置及電子設備、計算機存儲介質。所述方法包括:獲得包含有目標對象的圖像,確定所述圖像中的操作區域;識別所述圖像中所述目標對象的手部在所述操作區域的位置以及所述手部的狀態;基于所述手部在所述操作區域中的位置,確定顯示界面中與所述手部對應的操作點的操作位置,以及根據所述手部的狀態確定所述操作點的狀態;基于所述操作點在所述操作位置的狀態,執行響應操作。
技術領域
本公開涉及計算機視覺技術領域,具體涉及一種交互方法、裝置及電子設備、計算機存儲介質。
背景技術
近些年來,觸摸交互方式在手機、平板電腦等移動終端中有大量應用和交互設計,交互體驗有極大的提升。然而觸摸交互方式需要滿足不超過手臂長度的距離,且在一些無法直接觸摸或者不方便觸摸的場景下,無法使用觸摸交互方式。
發明內容
為解決現有存在的技術問題,本申請實施例提供一種交互方法、裝置及電子設備、計算機存儲介質,實現用手勢進行隔空觸摸。
為達到上述目的,本申請實施例的技術方案是這樣實現的:
本申請實施例提供了一種交互方法,所述方法包括:
獲得包含有目標對象的圖像,確定所述圖像中的操作區域;
識別所述圖像中所述目標對象的手部在所述操作區域的位置以及所述手部的狀態;
基于所述手部在所述操作區域中的位置,確定顯示界面中與所述手部對應的操作點的操作位置,以及根據所述手部的狀態確定所述操作點的狀態;
基于所述操作點在所述操作位置的狀態,執行響應操作。
在本申請的一些可選實施例中,所述確定所述圖像中的操作區域,包括:
識別所述圖像中所述目標對象的至少部分肢體對應的第一區域;所述至少部分肢體至少包括頭部;
基于所述第一區域確定所述操作區域。
在本申請的一些可選實施例中,所述基于所述第一區域確定所述操作區域,包括:基于所述第一區域占所述圖像所在區域的比例,對所述第一區域進行縮小或放大處理,得到所述操作區域;或者,將所述第一區域作為所述操作區域。
在本申請的一些可選實施例中,所述基于所述手部在所述操作區域中的位置,確定顯示界面中與所述手部對應的操作點的操作位置,包括:
確定所述手部在所述操作區域中的第一相對位置關系;所述第一相對位置關系表示第一坐標系下所述手部在所述操作區域中的相對位置;
基于所述第一相對位置關系,確定所述顯示界面中與所述手部對應的操作點的操作位置。
在本申請的一些可選實施例中,所述操作位置在所述顯示界面所在區域內的相對位置關系與所述第一相對位置關系之間具有設定匹配關系。
在本申請的一些可選實施例中,所述確定所述手部在所述操作區域中的第一相對位置關系,包括:確定所述手部的特定關鍵點在所述操作區域對應的所述第一坐標系中的第一坐標位置;
所述基于所述第一相對位置關系,確定所述顯示界面中與所述手部對應的操作點的操作位置,包括:基于變換關系確定所述顯示界面對應的第二坐標系中與所述第一坐標位置對應的第二坐標位置,將所述第二坐標位置作為所述操作點的操作位置;其中,所述變換關系為所述第一坐標系與所述第二坐標系之間的變換關系。
在本申請的一些可選實施例中,所述根據所述手部的狀態確定所述操作點的狀態,包括:基于預先獲得的映射集合確定所述手部的狀態對應的所述操作點的狀態;其中,所述映射集合中包括多組手部的狀態分別與操作點的狀態的映射關系。
該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于北京市商湯科技開發有限公司,未經北京市商湯科技開發有限公司許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作,請聯系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/202010899228.4/2.html,轉載請聲明來源鉆瓜專利網。





