[發(fā)明專利]一種基于視頻流的屏幕顯示方法、裝置和系統(tǒng)

在審

• 申請?zhí)枺?/td>: 201811413865.5
• 申請日: 2018-11-26
• 公開（公告）號: CN111225275A
• 公開（公告）日: 2020-06-02
• 發(fā)明（設(shè)計）人: 梁曉靜;李珂;黃威
• 申請（專利權(quán)）人: 北京奇虎科技有限公司
• 主分類號: H04N21/44
• 分類號: H04N21/44;H04N19/42;H04N21/414;H04N21/431
• 代理公司: 北京智匯東方知識產(chǎn)權(quán)代理事務(wù)所(普通合伙) 11391
• 代理人: 康正德;陳智勇

本發(fā)明提供了一種基于視頻流的屏幕顯示方法、裝置和系統(tǒng)。該系統(tǒng)包括：移動設(shè)備端，用于采集本終端屏幕的視頻流數(shù)據(jù)，并將所述視頻流數(shù)據(jù)發(fā)送給傳送端；所述傳送端，用于接收所述視頻流數(shù)據(jù)，對所述視頻流數(shù)據(jù)進(jìn)行解析，并將解析后的視頻流數(shù)據(jù)發(fā)送給顯示端；以及所述顯示端，用于接收所述解析后的視頻流數(shù)據(jù)，并播放所接收到的視頻流數(shù)據(jù)。本發(fā)明采用視頻流的方式來替代minicap圖片采集的方式，解決了現(xiàn)有技術(shù)中采用minicap進(jìn)行屏幕拷貝時嚴(yán)格依賴于移動設(shè)備的Android版本和與該Android版本相應(yīng)的minicap開源項目更新、并且不支持屏幕顯示過程中旋轉(zhuǎn)移動設(shè)備的問題，特別適用于當(dāng)通過遠(yuǎn)程真機(jī)租用平臺進(jìn)行移動測試時顯示手機(jī)端的屏幕信息的場景。

技術(shù)領(lǐng)域

本發(fā)明涉及遠(yuǎn)程真機(jī)測試技術(shù)領(lǐng)域，特別是一種基于視頻流的屏幕顯示方法、裝置和系統(tǒng)、以及計算機(jī)存儲介質(zhì)和計算設(shè)備。

背景技術(shù)

遠(yuǎn)程真機(jī)租用平臺是一種遠(yuǎn)程控制手機(jī)使用的平臺，具有安裝、截圖、shell、文件傳輸?shù)裙δ堋?/p>

現(xiàn)有技術(shù)中，通過遠(yuǎn)程真機(jī)租用平臺進(jìn)行移動測試時，手機(jī)屏幕信息傳輸?shù)膶?shí)現(xiàn)方案采用的是開源工具minicap。minicap是開源項目STF(Smartphone Test Farm)中的一個工具，負(fù)責(zé)屏幕顯示。minicap工具是用NDK(Nginx Development Kit)開發(fā)的，屬于Android的底層開發(fā)，所以該工具在手機(jī)上的使用嚴(yán)格依賴于手機(jī)的Android版本。因此，使用minicap工具進(jìn)行手機(jī)屏幕顯示時，會面臨以下問題：當(dāng)手機(jī)的Android版本更新時，必須確保minicap發(fā)布者已經(jīng)發(fā)布該更新后的Android版本對應(yīng)的文件工具，才可使用minicap工具。例如，當(dāng)Android9發(fā)布后，由于手機(jī)屏幕圖像顯示依賴的minicap文件還未及時跟上發(fā)布，將會導(dǎo)致Android9版本的云真機(jī)未能及時上線該真機(jī)租用系統(tǒng)。

另外，minicap本身還存在以下問題：minicap的實(shí)現(xiàn)方式采用了Android的私有API(Application Programming Interface，應(yīng)用程序編程接口)，那么，若將來Google限制該API的訪問，minicap將會無法使用。而且，minicap工具不支持手機(jī)旋轉(zhuǎn)，當(dāng)手機(jī)旋轉(zhuǎn)后，minicap無法正確傳遞出旋轉(zhuǎn)后的手機(jī)屏幕圖片。

因此，亟需一種無需與Android版本進(jìn)行適配、不依賴于minicap開源項目更新、并且屏幕圖像傳輸性能更優(yōu)的屏幕顯示技術(shù)。

發(fā)明內(nèi)容

鑒于上述問題，提出了本發(fā)明以便提供一種克服上述問題或者至少部分地解決上述問題的基于視頻流的屏幕顯示方法、裝置和系統(tǒng)、以及計算機(jī)存儲介質(zhì)和計算設(shè)備。

根據(jù)本發(fā)明實(shí)施例的一方面，提供了一種基于視頻流的屏幕顯示系統(tǒng)，包括：

移動設(shè)備端，用于采集本終端屏幕的視頻流數(shù)據(jù)，并將所述視頻流數(shù)據(jù)發(fā)送給傳送端；

所述傳送端，用于接收所述視頻流數(shù)據(jù)，對所述視頻流數(shù)據(jù)進(jìn)行解析，并將解析后的視頻流數(shù)據(jù)發(fā)送給顯示端；以及

所述顯示端，用于接收所述解析后的視頻流數(shù)據(jù)，并播放所接收到的視頻流數(shù)據(jù)。

可選地，所述屏幕顯示系統(tǒng)應(yīng)用于當(dāng)通過遠(yuǎn)程真機(jī)租用平臺進(jìn)行移動測試時顯示所述移動設(shè)備端的屏幕信息的場景。

可選地，所述傳送端包括服務(wù)器或個人計算機(jī)；

所述顯示端包括顯示器。

可選地，所述移動設(shè)備端還用于：

通過在本終端內(nèi)部啟動scrcpy工具來采集本終端屏幕的視頻流數(shù)據(jù)。

可選地，所述移動設(shè)備端還用于：

在啟動所述scrcpy工具后，調(diào)用MediaCodec接口來采集本終端屏幕的視頻流數(shù)據(jù)。