[發(fā)明專利]界面互動方法及計算機可讀存儲介質(zhì)

在審

• 申請?zhí)枺?/td>: 201811208706.1
• 申請日: 2018-10-17
• 公開（公告）號: CN109407838A
• 公開（公告）日: 2019-03-01
• 發(fā)明（設(shè)計）人: 馮皓;方鴻亮;林鎏娟
• 申請（專利權(quán)）人: 福建星網(wǎng)視易信息系統(tǒng)有限公司
• 主分類號: G06F3/01
• 分類號: G06F3/01;G06K9/00;G06T7/20;G10H1/36
• 代理公司: 福州市博深專利事務(wù)所(普通合伙) 35214
• 代理人: 林志崢

1.一種界面互動方法，其特征在于，包括：

獲取攝像頭畫面或預(yù)設(shè)的視頻流，并將所述攝像頭畫面或視頻流實時顯示在屏幕上；

實時獲取所述攝像頭畫面或視頻流中的人臉和/或人體的關(guān)鍵點位置；

將所述屏幕中對應(yīng)所述關(guān)鍵點位置的區(qū)域標(biāo)記為關(guān)鍵顯示區(qū)域；

對所述關(guān)鍵顯示區(qū)域和預(yù)設(shè)的互動顯示對象進(jìn)行碰撞檢測；

當(dāng)檢測到碰撞時，控制所述互動顯示對象按照預(yù)設(shè)的反饋規(guī)則進(jìn)行運動。

2.根據(jù)權(quán)利要求1所述的界面互動方法，其特征在于，所述將所述屏幕中對應(yīng)所述關(guān)鍵點位置的區(qū)域標(biāo)記為關(guān)鍵顯示區(qū)域具體為：

在屏幕上創(chuàng)建第一顯示層，所述第一顯示層透明疊加在所述屏幕上；

將所述關(guān)鍵點位置實時映射到所述第一顯示層，并將所述第一顯示層中對應(yīng)所述關(guān)鍵點位置的區(qū)域標(biāo)記為關(guān)鍵顯示區(qū)域。

3.根據(jù)權(quán)利要求2所述的界面互動方法，其特征在于，所述獲取攝像頭畫面或預(yù)設(shè)的視頻流，并將所述攝像頭畫面或視頻流實時顯示在屏幕上具體為：

在屏幕上創(chuàng)建第二顯示層，所述第二顯示層設(shè)置在所述第一顯示層之下；

獲取攝像頭畫面或預(yù)設(shè)的視頻流，并將所述攝像頭畫面或視頻流實時顯示在所述第二顯示層上。

4.根據(jù)權(quán)利要求1所述的界面互動方法，其特征在于，所述對所述關(guān)鍵顯示區(qū)域和預(yù)設(shè)的互動顯示對象進(jìn)行碰撞檢測具體為：

通過物理引擎將所述關(guān)鍵顯示區(qū)域設(shè)置為剛體顯示對象；

根據(jù)預(yù)設(shè)的觸發(fā)條件，控制預(yù)設(shè)的互動顯示對象在所述第一顯示層上按照預(yù)設(shè)的運動規(guī)則進(jìn)行運動，所述互動顯示對象為剛體顯示對象；

通過物理引擎對所述關(guān)鍵顯示區(qū)域和互動顯示對象進(jìn)行碰撞檢測。

5.根據(jù)權(quán)利要求4所述的界面互動方法，其特征在于，所述預(yù)設(shè)的觸發(fā)條件包括外部輸入的互動命令；

所述根據(jù)預(yù)設(shè)的觸發(fā)條件，控制預(yù)設(shè)的互動顯示對象在所述第一顯示層上按照預(yù)設(shè)的運動規(guī)則進(jìn)行運動具體為：

當(dāng)接收到互動命令時，在所述第一顯示層上顯示預(yù)設(shè)的互動顯示對象，并控制所述互動顯示對象按照預(yù)設(shè)的運動規(guī)則進(jìn)行運動。

6.根據(jù)權(quán)利要求4所述的界面互動方法，其特征在于，所述預(yù)設(shè)的觸發(fā)條件包括外部輸入的互動信息，所述互動信息包括文字、圖片和視頻中的至少一種；

所述根據(jù)預(yù)設(shè)的觸發(fā)條件，控制預(yù)設(shè)的互動顯示對象在所述第一顯示層上按照預(yù)設(shè)的運動規(guī)則進(jìn)行運動具體為：

接收互動信息，并根據(jù)所述互動信息生成互動顯示對象；

通過物理引擎將所述互動顯示對象設(shè)置為剛體顯示對象；

控制所述互動顯示對象在所述第一顯示層中按照預(yù)設(shè)的運動軌跡和運動速度進(jìn)行運動。

7.根據(jù)權(quán)利要求1所述的界面互動方法，其特征在于，所述當(dāng)檢測到碰撞時，控制所述互動顯示對象按照預(yù)設(shè)的反饋規(guī)則進(jìn)行運動具體為：

當(dāng)檢測到所述互動顯示對象與所述關(guān)鍵顯示區(qū)域發(fā)生碰撞時，根據(jù)所述關(guān)鍵顯示區(qū)域的移動速度、所述互動顯示對象的運動速度以及碰撞角度，計算得到所述互動顯示對象的反彈方向和反彈速度；

控制所述互動顯示對象按照所述反彈反向和反彈速度進(jìn)行運動。

8.根據(jù)權(quán)利要求1所述的界面互動方法，其特征在于，所述關(guān)鍵點位置包括眼睛關(guān)鍵點位置或嘴巴關(guān)鍵點位置；

所述實時獲取所述攝像頭畫面或視頻流中的人臉和/或人體的關(guān)鍵點位置之后，進(jìn)一步包括：

根據(jù)眼睛關(guān)鍵點位置，確定眼睛關(guān)鍵點的形狀，并根據(jù)所述眼睛關(guān)鍵點的形狀，確定睜眼狀態(tài)或閉眼狀態(tài)；

或根據(jù)嘴巴關(guān)鍵點位置，確定嘴巴關(guān)鍵點的形狀，并根據(jù)所述嘴巴關(guān)鍵點的形狀，確定張嘴狀態(tài)或閉嘴狀態(tài)。

9.根據(jù)權(quán)利要求8所述的界面互動方法，其特征在于，所述當(dāng)檢測到碰撞時，控制所述互動顯示對象按照預(yù)設(shè)的反饋規(guī)則進(jìn)行運動具體為：

當(dāng)檢測到所述互動顯示對象與所述關(guān)鍵顯示區(qū)域發(fā)生碰撞時，根據(jù)所述關(guān)鍵顯示區(qū)域?qū)?yīng)的人體器官行為特征的變化，控制所述互動顯示對象淡化消失。