[發明專利]交互控制方法和裝置、存儲介質及電子裝置

有效

• 申請號: 201911061436.0
• 申請日: 2019-11-01
• 公開（公告）號: CN110825228B
• 公開（公告）日: 2023-06-23
• 發明（設計）人: 喬奇
• 申請（專利權）人: 騰訊科技（深圳）有限公司
• 主分類號: G06F3/01
• 分類號: G06F3/01
• 代理公司: 北京德琦知識產權代理有限公司 11018
• 代理人: 陳世華;王琦

1.一種交互控制方法，其特征在于，應用于人機交互設備，所述人機交互設備包括人機交互屏幕、處理器和存儲器，所述人機交互設備中運行有視頻播放客戶端，所述方法包括：

所述處理器確定目標對象，識別圖像采集裝置采集到的所述目標對象的人臉圖像集，將識別出來的每幀人臉圖像以像素坐標的形式記錄，從所述人臉圖像集中提取所述目標對象的眼球數據；根據所述眼球數據，確定每幀人臉圖像中所述目標對象的瞳孔所在的像素坐標位置；

所述處理器確定所述目標對象的瞳孔的像素坐標位置的移動方向和移動距離，根據移動方向和移動距離，確定眼球變化狀態；調用所述存儲器中存儲的眼球變化狀態與交互控制指令的映射關系，確定待執行的交互控制指令，并按照所述待執行的交互控制指令執行交互動作，具體包括：

確定瞳孔對應播放畫面的第一位置是在播放指令位置；

當識別到瞳孔發生偏移，且偏移距離大于預設的距離閾值時，確定所述眼球變化狀態為切換狀態，并根據偏移角度與距離，確定發生偏移后瞳孔的第二位置為暫停指令位置；

當識別到瞳孔維持相對的靜止狀態達到預定時間，且上眼皮與下眼皮共同執行眨眼動作的次數達到預定次數時，確定所述眼球變化狀態為執行狀態，并執行與所述暫停指令位置對應的暫停指令；其中，當瞳孔的半徑達到或大于預設的距離閾值時，則確定眼球為開；當瞳孔的半徑小于預設的距離閾值時，則確定眼球為關；若確定眼球為開、眼球為關在預定時長內分別執行一次，則確定為眨眼動作；

所述人機交互屏幕通過人機交互接口獲取所述待執行的交互控制指令，并呈現執行交互動作后的結果。

2.一種交互控制裝置，其特征在于，包括人機交互屏幕、處理器和存儲器，所述交互控制裝置中運行有視頻播放客戶端，其中，

所述處理器包括：

第一獲取單元，用于確定目標對象，識別圖像采集裝置采集到的所述目標對象的人臉圖像集，將識別出來的每幀人臉圖像以像素坐標的形式記錄；

提取單元，用于從所述人臉圖像集中提取所述目標對象的眼球數據；

生成單元，用于根據所述眼球數據，確定每幀人臉圖像中所述目標對象的瞳孔所在的像素坐標位置；確定所述目標對象的瞳孔的像素坐標位置的移動方向和移動距離，根據移動方向和移動距離，確定眼球變化狀態；調用所述存儲器中存儲的眼球變化狀態與交互控制指令的映射關系，確定待執行的交互控制指令，具體包括：確定瞳孔對應播放畫面的第一位置是在播放指令位置；當識別到瞳孔發生偏移，且偏移距離大于預設的距離閾值時，確定所述眼球變化狀態為切換狀態，并根據偏移角度與距離，確定發生偏移后瞳孔的第二位置為暫停指令位置；當識別到瞳孔維持相對的靜止狀態達到預定時間，且上眼皮與下眼皮共同執行眨眼動作的次數達到預定次數時，確定所述眼球變化狀態為執行狀態；其中，當瞳孔的半徑達到或大于預設的距離閾值時，則確定眼球為開；當瞳孔的半徑小于預設的距離閾值時，則確定眼球為關；若確定眼球為開、眼球為關在預定時長內分別執行一次，則確定為眨眼動作；

執行單元，用于執行與所述暫停指令位置對應的暫停指令；

所述人機交互屏幕用于，通過人機交互接口獲取所述待執行的交互控制指令，并呈現執行交互動作后的結果。

3.一種計算機可讀的存儲介質，所述計算機可讀的存儲介質包括存儲的程序，其中，所述程序運行時執行權利要求1所述的方法。

4.一種電子裝置，包括存儲器和處理器，其特征在于，所述存儲器中存儲有計算機程序，所述處理器被設置為通過所述計算機程序執行權利要求1所述的方法。