[發明專利]電子設備的用戶交互方法、系統、電子設備及計算機介質

在審

• 申請號: 201711498692.7
• 申請日: 2017-12-29
• 公開（公告）號: CN109992177A
• 公開（公告）日: 2019-07-09
• 發明（設計）人: 吳雙熔;李建樹
• 申請（專利權）人: 北京京東尚科信息技術有限公司;北京京東世紀貿易有限公司
• 主分類號: G06F3/0484
• 分類號: G06F3/0484;G06F3/0481;G06F3/0488;G06F3/16;G06F9/451
• 代理公司: 中科專利商標代理有限責任公司 11021
• 代理人: 呂雁葭

本公開提供了一種電子設備的用戶交互方法，包括：根據用戶操作確定所述電子設備的用戶界面上展示的元素；獲取與所述元素相關的信息，所述與所述元素相關的信息包括以下任意一項或多項：所述元素的描述信息、所述元素的功能信息、所述元素的內容信息、或所述元素在所述用戶界面的位置信息；以及根據獲取的與所述元素相關的信息生成用于描述所述元素的第一語音信息。

技術領域

本公開涉及互聯網技術領域，更具體地，涉及一種電子設備的用戶交互方法、系統、電子設備及計算機介質。

背景技術

觸控屏方式的普及對于視力正常的用戶而言，大大化簡了操作步驟，提升了手機、平板電腦、筆記本電腦等電子設備的使用體驗。但是對于盲人和有視力障礙的用戶，在大量取消物理實體按鍵之后，則讓他們找不到定位感和觸摸感，光是一塊沒有凹凸感的觸控屏反而給他們實際使用帶來不便。針對這種情況，現有技術的解決方案是利用一種基于手勢的屏幕閱讀器(蘋果手機中的VoiceOver)對用戶在電子設備的觸摸屏展示的用戶界面上的操作進行語音提示，例如，用戶在用戶界面上點擊圖片或者應用程序時，該屏幕閱讀器響應用戶操作，并對用戶所點擊的元素進行播放：“圖片”或者“微信”以提示用戶。

在實現本發明構思的過程中，發明人發現現有技術中至少存在如下問題：在響應用戶操作，對用戶界面展示的元素進行播放時，只能播放該元素的名稱而沒有其他信息，致使用戶獲得的關于其點擊的元素的信息非常有限。

發明內容

有鑒于此，本公開提供了一種種電子設備的用戶交互方法、系統、電子設備及計算機介質。

本公開的一個方面提供了一種電子設備的用戶交互方法，包括：根據用戶操作確定所述電子設備的用戶界面上展示的元素；獲取與所述元素相關的信息，所述與所述元素相關的信息包括以下任意一項或多項：所述元素的描述信息、所述元素的功能信息、所述元素的內容信息、或所述元素在所述用戶界面的位置信息；以及根據獲取的與所述元素相關的信息生成用于描述所述元素的第一語音信息。

根據本公開的實施例，根據獲取的與所述元素相關的信息生成用于描述所述元素的第一語音信息包括：基于所述元素的描述信息和/或功能信息生成第一信息，所述第一信息包括所述元素的名稱和/或對所述元素操作的結果；以及根據所述第一信息生成用于描述所述元素的第一語音信息。

根據本公開的實施例，所述與所述元素相關的信息還包括所述元素的外觀信息；以及根據獲取的與所述元素相關的信息生成用于描述所述元素的第一語音信息包括：根據所述元素的外觀信息和/或所述元素在所述用戶界面的位置信息生成用于描述所述元素的第一語音信息。

根據本公開的實施例，所述元素的外觀信息包括所述元素的形狀和/或大小；以及根據獲取的與所述元素相關的信息生成用于描述所述元素的第一語音信息包括：根據所述元素的形狀和/或大小、所述元素的名稱、對所述元素操作的結果、所述元素的內容信息和所述元素在所述用戶界面的位置信息生成用于描述所述元素的第一語音信息。

根據本公開的實施例，所述元素包括以下任意一個：應用程序、控件、圖像文件、視頻文件、音頻文件、或文檔。

本公開的另一個方面提供了一種電子設備的用戶交互方法，包括：確定模塊，用于根據用戶操作，確定所述電子設備的用戶界面上展示的元素；獲取模塊，用于獲取與所述元素相關的信息，所述與所述元素相關的信息包括以下任意一項或多項：所述元素的描述信息、所述元素的功能信息、所述元素的內容信息、或述元素在所述用戶界面的位置信息；以及生成模塊，用于根據獲取的與所述元素相關的信息生成用于描述所述元素的第一語音信息。

根據本公開的實施例，所述生成模塊包括：第一生成模塊，用于基于所述元素的描述信息和/或功能信息生成第一信息，所述第一信息包括所述元素的名稱和/或對所述元素操作的結果；以及第二生成模塊，用于根據所述第一信息生成用于描述所述元素的第一語音信息。