[發明專利]通過頭戴式設備管理多媒體日志的方法、裝置和系統

有效

• 申請號: 201310535180.9
• 申請日: 2013-11-01
• 公開（公告）號: CN103559256B
• 公開（公告）日: 2017-10-31
• 發明（設計）人: 吳先超
• 申請（專利權）人: 百度在線網絡技術（北京）有限公司
• 主分類號: G06F17/30
• 分類號: G06F17/30;G06F3/01
• 代理公司: 北京清亦華知識產權代理事務所(普通合伙)11201
• 代理人: 張大威

1.一種通過頭戴式設備管理多媒體日志的方法，其特征在于，包括以下步驟：

獲取用戶的眼球動作；

當所述眼球動作與預設眼球動作一致時，從用戶所在周邊場景采集多媒體信息，并記錄相應的采集時間，其中，所述多媒體信息包括音頻信息、圖像信息和視頻信息，所述預設眼球動作為多個，分別用于控制采集所述音頻信息、圖像信息和視頻信息；

獲取所述多媒體信息的描述性信息，所述描述性信息是對所述音頻信息、圖像信息和視頻信息識別后的文字信息；以及

根據所述采集時間、所述多媒體信息和所述描述性信息生成多媒體日志，其中將所述描述性信息附著在對應的多媒體信息上，按照所述采集時間的先后順序組織所述多媒體信息，并根據所述描述性信息使用自動摘要算法自動生成一天多媒體日志的每日摘要，得到最終的多媒體日志。

2.如權利要求1所述的方法，其特征在于，還包括：

將所述多媒體日志上傳至云端服務器，以使所述用戶通過終端設備登錄所述云端服務器查詢所述多媒體日志。

3.如權利要求2所述的方法，其特征在于，還包括：

通過所述終端設備對所述多媒體日志進行編輯。

4.如權利要求1-3任一項所述的方法，其特征在于，通過眼球跟蹤設備獲取所述眼球動作，其中，所述眼球跟蹤設備包括紅外光源和眼球跟蹤攝像頭。

5.如權利要求1所述的方法，其特征在于，所述頭戴式設備具有圖像獲取單元和音頻輸入單元，其中，

所述音頻輸入單元用于獲取所述音頻信息；以及

所述圖像獲取單元用于獲取所述圖像信息和所述視頻信息。

6.如權利要求5所述的方法，其特征在于所述獲取描述所述多媒體信息的描述性信息的步驟進一步包括：

對所述音頻信息進行語音識別，以獲取所述音頻信息的描述性信息；

對所述圖像信息進行圖像識別，以獲取所述圖像信息的描述性信息；以及

對所述視頻信息進行視頻識別，以獲取所述視頻信息的描述性信息。

7.一種多媒體日志管理裝置，其特征在于，包括：

眼球跟蹤模塊，用于獲取用戶的眼球動作；

采集模塊，用于在所述眼球動作與預設眼球動作一致時，從用戶所在周邊場景采集多媒體信息，其中，所述多媒體信息包括音頻信息、圖像信息和視頻信息，所述預設眼球動作為多個，分別用于控制采集所述音頻信息、圖像信息和視頻信息；

記錄模塊，用于記錄相應的采集時間；

獲取模塊，用于獲取所述多媒體信息的描述性信息，所述描述性信息是對所述音頻信息、圖像信息和視頻信息識別后的文字信息；以及

生成模塊，用于根據所述采集時間、所述多媒體信息和所述描述性信息生成多媒體日志，其中將所述描述性信息附著在對應的多媒體信息上，按照所述采集時間的先后順序組織所述多媒體信息，并根據所述描述性信息使用自動摘要算法自動生成一天多媒體日志的每日摘要，得到最終的多媒體日志。

8.如權利要求7所述的裝置，其特征在于，還包括：

上傳模塊，用于將所述多媒體日志上傳至云端服務器，以使所述用戶通過終端設備登錄所述云端服務器查詢所述多媒體日志。

9.如權利要求7或8所述的裝置，其特征在于，所述眼球跟蹤模塊包括紅外光源和眼球跟蹤攝像頭。

10.如權利要求7所述的裝置，其特征在于，所述采集模塊具有圖像獲取單元和音頻輸入單元，其中，

音頻輸入單元，用于獲取所述音頻信息；以及

圖像獲取單元，用于獲取所述圖像信息和所述視頻信息。

11.如權利要求10所述的裝置，其特征在于，所述獲取模塊具體包括：

語音識別模塊，用于對所述音頻信息進行語音識別，以獲取所述音頻信息的描述性信息；

圖像識別模塊，用于對所述圖像信息進行圖像識別，以獲取所述圖像信息的描述性信息；以及

視頻識別模塊，用于對所述視頻信息進行視頻識別，以獲取所述視頻信息的描述性信息。

12.一種多媒體日志管理系統，其特征在于，包括：

如權利要求7-11任一項所述的多媒體日志管理裝置；以及

云端服務器，用于接收所述裝置發送的多媒體日志，以使用戶通過終端設備登錄所述云端服務器查詢所述多媒體日志，以及接收所述用戶通過終端設備對所述多媒體日志進行編輯操作。