[發明專利]基于三維模型的交互方法、裝置、系統、電子設備和存儲介質

有效

• 申請號: 202010698810.4
• 申請日: 2020-07-20
• 公開（公告）號: CN111885398B
• 公開（公告）日: 2021-12-07
• 發明（設計）人: 鄭深圳;白杰;張蕾
• 申請（專利權）人: 貝殼找房(北京)科技有限公司
• 主分類號: H04N21/239
• 分類號: H04N21/239;H04N21/422;H04N21/439;H04N21/485;H04N21/658;G06T17/00
• 代理公司: 北京思源智匯知識產權代理有限公司 11657
• 代理人: 毛麗琴

1.一種基于三維模型的交互方法，應用于第一用戶終端，其特征在于，所述第一用戶終端呈現有用戶頁面，所述方法包括：

響應于檢測到用戶針對所述用戶頁面的目標交互操作，向為所述用戶頁面提供頁面數據的服務器發送針對所述目標交互操作的交互請求，其中，所述用戶頁面用于呈現三維模型，所述三維模型與第二用戶終端登錄的用戶賬號預先建立關聯關系；

接收所述服務器從所述第二用戶終端獲取的流媒體視頻；

在所述用戶界面上呈現所述流媒體視頻和所述三維模型。

2.根據權利要求1所述的方法，其特征在于，所述接收所述服務器從所述第二用戶終端獲取的流媒體視頻，包括：

響應于所述服務器接收到所述第二用戶終端針對所述交互請求發送的交互確認信息，接收所述服務器從所述第二用戶終端獲取的流媒體視頻。

3.根據權利要求1所述的方法，其特征在于，所述方法還包括：

響應于所述第一用戶終端的當前網速值小于或等于預設網速閾值，基于所述流媒體視頻中的各幀語音，對目標用戶圖像進行調整，生成新視頻，其中，所述新視頻表征所述目標用戶圖像指示的用戶執行所述各幀語音指示的動作；

采用所述新視頻替代所述流媒體視頻進行呈現。

4.根據權利要求3所述的方法，其特征在于，所述方法還包括：

基于所述流媒體視頻中的圖像，生成目標用戶圖像；或者

將與所述用戶賬號相關聯的用戶圖像確定為目標用戶圖像。

5.根據權利要求3所述的方法，其特征在于，所述方法還包括：

響應于所述用戶頁面呈現有所述新視頻，向所述服務器發送攝像頭關閉確認信息，其中，所述攝像頭關閉確認信息用于確定所述第二用戶終端是否關閉攝像頭。

6.根據權利要求1-5之一所述的方法，其特征在于，所述接收所述服務器從所述第二用戶終端獲取的流媒體視頻，包括：

將所述第一用戶終端的當前網速值發送至所述服務器；

接收所述服務器發送的分辨率與所述當前網速值相匹配的、所述第二用戶終端獲取的流媒體視頻。

7.根據權利要求1-5之一所述的方法，其特征在于，所述方法還包括：

接收所述服務器發送的模型調整信息，其中，所述模型調整信息指示使用所述第二用戶終端的用戶對呈現于所述第二用戶終端的所述三維模型的調整操作，所述調整操作包括以下至少一項：縮放、旋轉、移動、視點切換；

按照所述模型調整信息指示的調整操作，對所述用戶界面上呈現的所述三維模型進行相同調整操作。

8.根據權利要求1-5之一所述的方法，其特征在于，所述三維模型包括多個子空間場景的三維子模型，所述多個子空間場景中的子空間場景與預先確定的關鍵詞集合中的關鍵詞相對應；以及

所述方法還包括：

對所述流媒體視頻中的語音進行語音識別，得到語音識別結果；

響應于確定所述語音識別結果包含所述關鍵詞集合中的關鍵詞，在所述用戶界面上呈現與所述語音識別結果包含的關鍵詞相對應的子空間場景的三維子模型。

9.根據權利要求1-5之一所述的方法，其特征在于，所述方法還包括：

獲取用戶針對所述流媒體視頻的反饋信息；

將所述反饋信息發送至所述服務器，其中，所述服務器用于將所述反饋信息與所述用戶賬號建立關聯關系。

10.一種基于三維模型的交互方法，應用于第二用戶終端，其特征在于，所述第二用戶終端登錄的用戶賬號與三維模型預先建立關聯關系，所述方法包括：

響應于接收到服務器發送的交互請求，獲取流媒體視頻，其中，所述交互請求指示第一用戶終端檢測到用戶針對所述第一用戶終端呈現的用戶頁面的目標交互操作，所述用戶頁面用于呈現所述三維模型；

向所述服務器發送所述流媒體視頻，其中，所述服務器用于將所述流媒體視頻發送至所述第一用戶終端，以使所述第一用戶終端在所述用戶界面上呈現所述流媒體視頻和所述三維模型。