[發明專利]一種基于曲面電容實現非金屬平面的互動方法和系統

在審

• 申請號: 202111101775.4
• 申請日: 2021-09-18
• 公開（公告）號: CN114020192A
• 公開（公告）日: 2022-02-08
• 發明（設計）人: 張立華
• 申請（專利權）人: 特斯聯科技集團有限公司
• 主分類號: G06F3/0484
• 分類號: G06F3/0484;G06F3/04845;G06F3/0485;G06F3/04883;G06F9/451;G06F3/041;G06F3/044
• 代理公司: 北京辰權知識產權代理有限公司 11619
• 代理人: 劉廣達

1.一種基于曲面電容實現非金屬平面的互動方法，其特征在于，包括：

在互動設備的非金屬平面層上進行觸摸、滑動、和/或點擊操作，所述互動設備包括曲面電容觸控面板及安裝并貼合在所述曲面電容觸控面板上的非金屬平面層；

所述互動設備接收并發送所述操作的信號給云端控制器；

在所述互動設備上方設有至少一個攝像頭，實時拍攝所述操作過程，獲得監控圖像數據，并發送給云端控制器；

解析所述監控圖像數據，通過AI算法計算得到所述操作的類型；

提取所述互動設備接收的所述操作的信號和通過AI算法得到的所述操作的類型，輸入訓練好的卷積神經網絡里，從而對所述操作進行識別，獲得指令信息；

根據所述指令信息控制所述曲面電容觸控面板展示圖像、視頻和/或聲音，完成互動。

2.根據權利要求1所述的方法，其特征在于，

所述曲面電容觸控面板包括：均呈曲面狀的曲面面板、導電膜及曲面液晶顯示面板，所述曲面面板的一面通過第一膠體連接所述導電膜的第一面，所述導電膜的第二面通過第二膠體連接所述曲面液晶顯示面板的一面。

3.根據權利要求1所述的方法，其特征在于，

所述實時拍攝所述操作過程，獲得監控圖像數據，并發送給云端控制器包括：

提取所述監控圖像數據的實時特征流，并將所述實時特征流發送給云端服務器。

4.根據權利要求3所述的方法，其特征在于，

在提取所述監控圖像數據的實時特征流之前還包括：對所述監控圖像數據中的圖像進行目標定位，截取檢測到的目標并分別提取特征，得到目標特征；對比所述目標特征與例外特征的差異度；若差異度小于閾值，則將此圖像的幀剔除，不進行后續步驟；若差異度大于閾值，進行后續步驟。

5.根據權利要求1所述的方法，其特征在于，

所述解析所述監控圖像數據，通過AI算法計算得到所述操作的類型，包括：

采集標準操作數據，訓練出標準動作模型；

采集待比對操作數據；

將待比對操作數據輸入標準動作模型，分別提取標準操作數據和待比對操作數據中的肢體關鍵點數據；

根據標準操作數據和待比對操作數據中的肢體關鍵點數據計算待比對操作與標準操作之間的偏差，并對待比對操作進行打分。

6.根據權利要求1－5任意一項所述的方法，其特征在于，

所述提取所述互動設備接收的所述操作的信號和通過AI算法得到的所述操作的類型，輸入訓練好的卷積神經網絡里，從而對所述操作進行識別，獲得指令信息，包括：

將大批量已知互動設備接收的操作信號和通過AI算法得到的操作類型導入到卷積神經網絡，得到各個互動設備的指令信息；將所述已知互動設備接收的操作信號和通過AI算法得到的操作類型構成的特征向量作為訓練樣本，構建訓練樣本集；

用訓練樣本集訓練由基于全連接神經網絡的自動編碼器模型和K－means模型構成的AKC模型；

將待分類互動設備接收的所述操作的信號和通過AI算法得到的所述操作的類型輸入訓練好的AKC模型中，得到該操作的指令信息。

7.根據權利要求1－5任意一項所述的方法，其特征在于，

所述云端控制器通過聲音播放裝置播放操作指導，糾正不規范的操作動作。