[發明專利]圖像實時傳輸方法、發送端及接收端

有效

• 申請號: 202011506940.X
• 申請日: 2020-12-18
• 公開（公告）號: CN112637609B
• 公開（公告）日: 2023-03-17
• 發明（設計）人: 請求不公布姓名
• 申請（專利權）人: 上海壁仞智能科技有限公司
• 主分類號: H04N19/70
• 分類號: H04N19/70;H04N19/85
• 代理公司: 北京路浩知識產權代理有限公司 11002
• 代理人: 鄭朝然

1.一種圖像實時傳輸方法，其特征在于，包括：

對待傳輸圖像的降采樣圖像進行圖像重建，得到第一重建圖像；

對所述待傳輸圖像和所述第一重建圖像進行減法運算，得到殘差圖像；

對所述殘差圖像進行分塊，得到多個殘差圖塊；

將所述降采樣圖像，以及部分或者全部殘差圖塊發送至接收端，以供所述接收端基于接收到的所述降采樣圖像和所述部分或者全部殘差圖塊復原所述待傳輸圖像；

還包括：

接收所述接收端返回的包括目標區域的區域圖塊請求；所述目標區域是用戶從第二重建圖像中選取到的，所述第二重建圖像是所述接收端對所述降采樣圖像進行圖像重建得到的；

將所述目標區域對應的殘差圖塊發送至所述接收端，以供所述接收端基于所述目標區域對應的殘差圖塊復原所述目標區域在所述待傳輸圖像中對應的圖塊。

2.根據權利要求1所述的圖像實時傳輸方法，其特征在于，所述對待傳輸圖像的降采樣圖像進行圖像重建，得到第一重建圖像，包括：

將所述降采樣圖像輸入至第一圖像重建模型，得到所述第一圖像重建模型輸出的所述降采樣圖像的第一重建圖像；

所述第一圖像重建模型是基于樣本圖像及其對應的樣本降采樣圖像訓練得到的。

3.根據權利要求1所述的圖像實時傳輸方法，其特征在于，所述將所述降采樣圖像，以及部分或者全部殘差圖塊發送至接收端，包括：

將所述降采樣圖像以及預設區域對應的殘差圖塊發送至所述接收端。

4.根據權利要求1-3任一項所述的圖像實時傳輸方法，其特征在于，所述對所述殘差圖像進行分塊，得到多個殘差圖塊，之后還包括：

基于每一殘差圖塊的像素灰度分布或各個顏色通道的數值分布，降低每一殘差圖塊的量化位數，并采用新的量化位數重新編碼每一殘差圖塊的像素數值。

5.一種圖像實時傳輸方法，其特征在于，包括：

接收發送端發送的降采樣圖像和若干個殘差圖塊；

基于所述降采樣圖像和所述若干個殘差圖塊，進行圖像復原；

其中，所述若干個殘差圖塊為對殘差圖像分塊所得的多個殘差圖塊的部分或全部，所述殘差圖像是基于待傳輸圖像和第一重建圖像進行減法運算得到的，所述第一重建圖像是所述發送端對所述降采樣圖像進行圖像重建得到的；

還包括：

確定目標區域；所述目標區域是用戶從第二重建圖像中選取到的，所述第二重建圖像是所述接收端對所述降采樣圖像進行圖像重建得到的；

將包含所述目標區域的區域圖塊請求發送至所述發送端，以供所述發送端基于所述區域圖塊請求選取并發送所述目標區域對應的殘差圖塊；

接收所述發送端發送的所述目標區域對應的殘差圖塊，并基于所述目標區域對應的殘差圖塊復原所述目標區域在所述待傳輸圖像中對應的圖塊。

6.根據權利要求5所述的圖像實時傳輸方法，其特征在于，所述基于所述降采樣圖像和所述若干個殘差圖塊，進行圖像復原，包括：

對所述降采樣圖像進行圖像重建，得到第二重建圖像；

基于所述若干個殘差圖塊，對所述第二重建圖像進行分塊，得到與所述若干個殘差圖塊對應的若干個初始重建圖塊；

基于每一殘差圖塊及其對應的初始重建圖塊進行圖像重建，得到所述若干個初始重建圖塊對應的若干個最終重建圖塊。

7.根據權利要求6所述的圖像實時傳輸方法，其特征在于，所述基于每一殘差圖塊及其對應的初始重建圖塊進行圖像重建，得到所述若干個初始重建圖塊對應的若干個最終重建圖塊，包括：

將每一殘差圖塊及其對應的初始重建圖塊輸入至第二圖像重建模型，得到所述第二圖像重建模型輸出的若干個最終重建圖塊；

所述第二圖像重建模型是基于樣本圖塊及其對應樣本初始重建圖塊和樣本殘差圖塊訓練得到的。