[發明專利]一種基于D3D同一畫布渲染多路視頻的方法

有效

• 申請號: 202010782147.6
• 申請日: 2020-08-06
• 公開（公告）號: CN111787397B
• 公開（公告）日: 2023-04-07
• 發明（設計）人: 任玉寶;王丹;王小虎;劉其峰;師少飛;王繼能
• 申請（專利權）人: 上海熙菱信息技術有限公司
• 主分類號: H04N21/44
• 分類號: H04N21/44;G06F3/0484
• 代理公司: 上海旭誠知識產權代理有限公司 31220
• 代理人: 鄭立

1.一種基于D3D同一畫布渲染多路視頻的方法，其特征在于，所述方法包括以下步驟：

步驟1、渲染模塊初始化：

1.1)創建1個D3D對象；

1.2)獲取顯示器設備；

1.3)創建1個D3D設備；

1.4)創建原始視頻離屏表面；

1.5)創建非原始視頻離屏表面；

步驟2、數據準備：

2.1)接受原始視頻YUV數據；

2.2)檢測所述原始視頻YUV視頻數據尺寸，判斷是否跟所述原始視頻離屏表面尺寸一致，如果不一致則銷毀所述原始視頻離屏表面，并執行所述步驟1.4；

2.3)鎖定所述原始視頻離屏表面；

2.4)拷貝所述原始視頻YUV數據至所述原始視頻離屏表面；

2.5)解鎖所述原始視頻離屏表面；

2.6)鎖定所述非原始視頻離屏表面；

2.7)換算非原始視頻YUV數據，將換算出的所述非原始視頻YUV數據拷貝至所述非原始視頻離屏表面；

2.8)解鎖所述非原始視頻離屏表面；

步驟3、畫面渲染：

3.1)清理所述D3D設備；

3.2)打開舞臺場景；

3.3)將所述原始視頻離屏表面線性拉伸至視頻窗口尺寸并放入所述D3D設備；

3.4)將所述非原始視頻離屏表面線性拉伸至所述非原始視頻顯示區域尺寸并放入所述D3D設備；

3.5)關閉所述舞臺場景；

3.6)呈現D3D設備舞臺場景畫面，完成所述原始視頻和所述非原始視頻畫面渲染；

步驟4、資源銷毀，退出；

所述方法的具體應用步驟為：

應用步驟1、用戶通過操作OCX開啟數字放大功能；

應用步驟2、所述OCX將預覽窗口句柄以及原始視頻窗口句柄通過TVSDK傳遞給播放組件；

應用步驟3、用戶通過框選工具選擇需要放大的視頻畫面區域，所述框選工具的繪制在所述渲染模塊進行實現，將數字放大功能封裝在所述播放組件之內，使用時只需要傳遞播放句柄；

應用步驟4、所述播放組件通過收流、解碼將一幀數據裁剪轉換為用戶選中部分畫面的YUV；

應用步驟5、采用基于D3D同一畫布渲染多路視頻的方法分別將完整一幀畫面的YUV和所述用戶選中部分畫面的YUV進行渲染和顯示。

2.如權利要求1所述的基于D3D同一畫布渲染多路視頻的方法，其特征在于，所述方法可應用在數字放大功能中，在所述應用中，所述非原始視頻為數字放大后視頻。

3.如權利要求2所述的基于D3D同一畫布渲染多路視頻的方法，其特征在于，在步驟2.7中，換算方法為根據用戶選擇區域換算出YUV數據用戶選擇部分。

4.如權利要求3所述的基于D3D同一畫布渲染多路視頻的方法，其特征在于，在應用步驟3中，所述框選工具的屬性更新流程為：

應用步驟3.1、通路渲染模塊初始化時，接管視頻預覽窗口的窗口過程；

應用步驟3.2、在所述窗口過程中捕獲到用戶鼠標按下事件進行行為分析；

應用步驟3.3、如果拖動位置在框選工具的四角則表示拉伸矩形區域，否則移動矩形區域；

應用步驟3.4、停止數字放大或者釋放所述渲染模塊則還原窗口過程。

5.如權利要求3所述的基于D3D同一畫布渲染多路視頻的方法，其特征在于，在應用步驟3中，所述框選工具是使用GDI繪制，且是在YUV顯示之后顯示。

6.如權利要求3所述的基于D3D同一畫布渲染多路視頻的方法，其特征在于，在應用步驟4中，采用H264碼流解碼。

7.如權利要求6所述的基于D3D同一畫布渲染多路視頻的方法，其特征在于，在應用步驟4中，所述H264碼流解碼后，存儲在一個AVFrame結構里面；在轉換為YUV時，根據用戶選擇的區域計算出寬度、高度的起始和結束位置，對所述AVFrame進行選擇性轉換，生成選定區域的YUV數據。

8.如權利要求1所述的基于D3D同一畫布渲染多路視頻的方法，其特征在于，在步驟3.3中，線性拉伸方法具體為將畫布按照線性插值策略進行拉伸至窗口尺寸。