[發(fā)明專利]一種基于弱網(wǎng)的音視頻處理方法及系統(tǒng)

在審

• 申請?zhí)枺?/td>: 202011051309.5
• 申請日: 2020-09-29
• 公開（公告）號: CN112135172A
• 公開（公告）日: 2020-12-25
• 發(fā)明（設(shè)計）人: 楊思亭;楊柱豪
• 申請（專利權(quán)）人: 廣州云智通訊科技有限公司
• 主分類號: H04N21/262
• 分類號: H04N21/262;H04N21/2662;H04N21/238
• 代理公司: 暫無信息
• 代理人: 暫無信息

本發(fā)明實施例提供一種基于弱網(wǎng)的音視頻處理方法及系統(tǒng)，通過傳輸質(zhì)量識別的方式抽取各音視頻傳輸信息集合的傳輸質(zhì)量特征，并基于傳輸質(zhì)量標簽區(qū)間確定各所述音視頻傳輸節(jié)點對應(yīng)所屬傳輸協(xié)議層的傳輸記錄畫像，從而將各傳輸控制策略轉(zhuǎn)化為有效的協(xié)調(diào)調(diào)度參考，由此根據(jù)各所述音視頻傳輸節(jié)點對應(yīng)所屬傳輸協(xié)議層的傳輸記錄畫像，確定每個傳輸協(xié)議層對應(yīng)的傳輸頻道分布信息，并生成所述音視頻傳輸信息對應(yīng)的音視頻傳輸線程的線程特征信息后切換到對應(yīng)的目標音視頻傳輸服務(wù)器執(zhí)行所述音視頻傳輸服務(wù)器的音視頻傳輸任務(wù)，從而能夠有效結(jié)合傳輸協(xié)議層的具體類型進行協(xié)調(diào)調(diào)度切換，進而提高切換后的音視頻傳輸服務(wù)器的適用性。

技術(shù)領(lǐng)域

本發(fā)明涉及音視頻傳輸技術(shù)領(lǐng)域，具體而言，涉及一種基于弱網(wǎng)的音視頻處理方法及系統(tǒng)。

背景技術(shù)

目前，在音視頻傳輸服務(wù)器的音視頻傳輸過程中，當突然處于弱網(wǎng)環(huán)境時，會對正常的音視頻傳輸業(yè)務(wù)造成很大的影響，因此需要進行相應(yīng)的協(xié)調(diào)調(diào)度處理。然而，傳統(tǒng)的調(diào)度切換方案，并未考慮到傳輸協(xié)議層的具體類型進行協(xié)調(diào)調(diào)度切換，導(dǎo)致切換后的音視頻傳輸服務(wù)器的適用性不高。

發(fā)明內(nèi)容

為了至少克服現(xiàn)有技術(shù)中的上述不足，本發(fā)明的目的在于提供一種基于弱網(wǎng)的音視頻處理方法及系統(tǒng)，能夠有效結(jié)合傳輸協(xié)議層的具體類型進行協(xié)調(diào)調(diào)度切換，進而提高切換后的音視頻傳輸服務(wù)器的適用性。

第一方面，本發(fā)明提供一種基于弱網(wǎng)的音視頻處理方法，應(yīng)用于調(diào)度服務(wù)器，所述調(diào)度服務(wù)器與多個音視頻傳輸服務(wù)器通信連接，所述方法包括：

從所述音視頻傳輸服務(wù)器在弱網(wǎng)環(huán)境下的音視頻傳輸信息中獲取至少一個音視頻傳輸信息集合，每個所述音視頻傳輸信息集合中各音視頻傳輸節(jié)點屬于同一傳輸協(xié)議層，每個所述音視頻傳輸節(jié)點對應(yīng)于所屬傳輸協(xié)議層下的傳輸控制策略；

基于所屬傳輸協(xié)議層下各傳輸控制策略對所述音視頻傳輸信息集合進行傳輸質(zhì)量識別，得到各音視頻傳輸信息集合的傳輸質(zhì)量特征和對應(yīng)的傳輸質(zhì)量標簽區(qū)間；

根據(jù)所述傳輸質(zhì)量特征和對應(yīng)的傳輸質(zhì)量標簽區(qū)間，確定各所述音視頻傳輸節(jié)點對應(yīng)所屬傳輸協(xié)議層的傳輸記錄畫像；

根據(jù)各所述音視頻傳輸節(jié)點對應(yīng)所屬傳輸協(xié)議層的傳輸記錄畫像，確定每個傳輸協(xié)議層對應(yīng)的傳輸頻道分布信息，并根據(jù)每個傳輸協(xié)議層對應(yīng)的傳輸頻道分布信息生成所述音視頻傳輸信息對應(yīng)的音視頻傳輸線程的線程特征信息，并根據(jù)所述音視頻傳輸線程的線程特征信息切換到對應(yīng)的目標音視頻傳輸服務(wù)器執(zhí)行所述音視頻傳輸服務(wù)器的音視頻傳輸任務(wù)。

在第一方面的一種可能的實現(xiàn)方式中，所述從所述音視頻傳輸服務(wù)器在弱網(wǎng)環(huán)境下的音視頻傳輸信息中獲取至少一個音視頻傳輸信息集合的步驟，包括：

從所述音視頻傳輸服務(wù)器在弱網(wǎng)環(huán)境下的音視頻傳輸信息中獲取傳輸協(xié)議層屬于同一傳輸協(xié)議層的音視頻傳輸節(jié)點，并將屬于每個傳輸協(xié)議層的音視頻傳輸節(jié)點確定為對應(yīng)的音視頻傳輸信息集合。

在第一方面的一種可能的實現(xiàn)方式中，所述基于所屬傳輸協(xié)議層下各傳輸控制策略對所述音視頻傳輸信息集合進行傳輸質(zhì)量識別，得到各音視頻傳輸信息集合的傳輸質(zhì)量特征和對應(yīng)的傳輸質(zhì)量標簽區(qū)間的步驟，包括：

對每個音視頻傳輸信息集合，遍歷所述音視頻傳輸信息集合中的音視頻傳輸節(jié)點，從所述音視頻傳輸節(jié)點中提取聚類該音視頻傳輸信息集合所屬傳輸協(xié)議層下各傳輸控制策略的網(wǎng)絡(luò)推流特征向量，根據(jù)提取的網(wǎng)絡(luò)推流特征向量確定與所述音視頻傳輸信息集合對應(yīng)的網(wǎng)絡(luò)推流元素信息；

剔除所述網(wǎng)絡(luò)推流元素信息中各網(wǎng)絡(luò)推流特征向量包含的設(shè)定噪聲特征向量，對剔除設(shè)定噪聲特征向量的網(wǎng)絡(luò)推流特征向量進行網(wǎng)絡(luò)推流元素拆分，獲得第一網(wǎng)絡(luò)推流元素信息，根據(jù)所述網(wǎng)絡(luò)推流元素在所述第一網(wǎng)絡(luò)推流元素信息所包含的網(wǎng)絡(luò)推流特征向量中的占用區(qū)域，確定各網(wǎng)絡(luò)推流元素的碼率變化程度；