[發明專利]屏幕交互方法以及屏幕交互裝置

在審

• 申請號: 201811280399.8
• 申請日: 2018-10-30
• 公開（公告）號: CN109407845A
• 公開（公告）日: 2019-03-01
• 發明（設計）人: 黃臻;黃德波;余熙平;蘇迎;陳弈丞;胡文波
• 申請（專利權）人: 盯盯拍（深圳）云技術有限公司
• 主分類號: G06F3/01
• 分類號: G06F3/01;G06N3/08;G06K9/00;B60R11/02
• 代理公司: 深圳市隆天聯鼎知識產權代理有限公司 44232
• 代理人: 劉抗美

本申請提供種屏幕交互方法以及屏幕交互裝置，方法包括：通過深度學習算法訓練神經網絡模型，其中，神經網絡模型可識別用戶的視線方向；采集包含用戶臉部的圖像，并通過神經網絡模型識別用戶的視線方向；根據用戶的視線方向控制視線方向對應的顯示屏幕運行。本申請能夠根據用戶的視線方向控制相應的顯示屏幕進行工作，避免用戶被不需要觀看的屏幕分散注意力而引發安全事故。

技術領域

本申請涉及交互領域，尤其涉及屏幕交互方法以及屏幕交互裝置。

背景技術

現有技術中，車載屏幕是越來越多的。用戶因為操作的需要會經常注意屏幕的內容，如果屏幕同時顯示內容的話，則可能會導致用戶的注意力分散，用戶在駕駛過程中則可能會存在一定的安全隱患。

發明內容

本申請提供一種屏幕交互方法及屏幕交互裝置，能夠免去現有技術中用戶在駕駛車輛因為多個屏幕同時工作會分散用戶的注意力可能會導致出現安全事故從而危及用戶生命安全的問題。

根據本申請的第一方面，本申請提供一種屏幕交互方法，方法包括：通過深度學習算法訓練神經網絡模型，其中，神經網絡模型可識別用戶的視線方向；采集包含用戶臉部的圖像，并通過神經網絡模型識別用戶的視線方向；根據用戶的視線方向控制視線方向對應的顯示屏幕運行。

優選地，在通過深度學習算法訓練神經網絡模型的步驟中，包括：將包含人物的頭部朝向和人物眼球朝向的圖像畫面以及眼球方向信息通過深度學習算法訓練出神經網絡模型，其中，包含人物眼球的圖像畫面為神經網絡模型的輸入，眼球方向信息為神經網絡模型的輸出。

優選地，在根據用戶的視線方向控制視線方向對應的顯示屏幕運行的步驟之前，包括：預設用戶的視線方向所對應的顯示屏幕。

優選地，在通過深度學習算法訓練神經網絡模型的步驟之前，還包括步驟：預設用戶的視線方向與高級輔助駕駛系統的預設方向的預警強度關系；在根據用戶的視線方向以及對應關系運行對應的顯示屏幕的步驟之后，還包括步驟：根據用戶的視線方向以及預警強度關系調整高級輔助駕駛系統在預設方向的預警強度。

根據申請的第二方面，本申請提供一種屏幕交互裝置，裝置包括：訓練模塊，用于通過深度學習算法訓練神經網絡模型，其中，神經網絡模型可識別用戶的視線方向；采集模塊，用于采集包含用戶臉部的圖像，并通過神經網絡模型識別用戶的視線方向；控制模塊，用于根據用戶的視線方向控制視線方向對應的顯示屏幕運行。

優選地，訓練模塊還用于：將包含人物的頭部朝向和人物眼球朝向的圖像畫面以及眼球方向信息通過深度學習算法訓練出神經網絡模型，其中，包含人物眼球的圖像畫面為神經網絡模型的輸入，眼球方向信息為神經網絡模型的輸出。

優選地，屏幕交互裝置還包括：預設模塊，用于預設用戶的視線方向所對應的顯示屏幕。

優選地，屏幕交互裝置還包括還包括：強度設置模塊，用于預設用戶的視線方向與高級輔助駕駛系統的預設方向的預警強度關系；預警模塊，用于根據用戶的視線方向以及預警強度關系調整高級輔助駕駛系統在預設方向的預警強度。

本申請的有益效果在于：通過深度學習算法訓練可識別所述用戶的視線方向的神經網絡模型，采集包含用戶臉部的圖像后，并通過所述神經網絡模型識別所述用戶的視線方向，再根據所述用戶的視線方向控制所述視線方向對應的顯示屏幕運行，這樣就能夠根據用戶的視線方向控制相應的顯示屏幕進行工作，避免用戶被不需要觀看的屏幕分散注意力而引發安全事故。

附圖說明

圖1是本申請一實施例的屏幕交互方法方法的流程圖；

圖2是本申請另一實施例的屏幕交互裝置的原理圖。

具體實施方式