[發明專利]一種基于直播調度河長制巡河及問題處理方法

在審

• 申請號: 202110017498.2
• 申請日: 2021-01-07
• 公開（公告）號: CN112804544A
• 公開（公告）日: 2021-05-14
• 發明（設計）人: 常仁凱;沈振華;方祥俊;張超群;諸曾平;陸兵
• 申請（專利權）人: 中水三立（北京）技術服務有限公司
• 主分類號: H04N21/2187
• 分類號: H04N21/2187;H04N21/422;H04N21/4223;H04N21/4415;H04N21/475;H04N21/4788;H04N21/482;H04N21/488;H04L29/06
• 代理公司: 合肥律眾知識產權代理有限公司 34147
• 代理人: 趙娟

1.一種基于直播調度河長制巡河及問題處理方法，其特征在于，包括以下步驟：

步驟一：在手機端和PC端生成直播間，并獲取直播間列表，同時創建直播間，獲取密鑰，為手機端請求創造條件；

步驟二：對攝像頭與麥克風采集的音頻與視頻進行處理，處理后的音頻與視頻在播放器中進行播放；

步驟三：通過手機端進行直播巡河作業，并對巡河過程中的影像信息進處理自動生成一條巡河問題發送給管理人員處理；

步驟四：在視頻直播巡河過程中，當直播間用戶發起“問題上報”指令時，系統通過語音識別接受到該任務，并動生成一條巡河問題發送給管理人員處理；

步驟五：在視頻直播巡河過程中，系統采用圖片識別、重力監測、語音識別等進行安全預警。

2.根據權利要求1所述的一種基于直播調度河長制巡河及問題處理方法，其特征在于：所述步驟一的具體生成過程如下：手機設備和PC端分別通過不同通道請求，手機端請求形成推流給推拉流服務器，由推拉流服務器一邊拉流給手機設備，一邊拉流給web請求，然后獲取直播間列表，獲取直播間詳情給后端服務端，即聊天服務器，它既可在DB上存儲，還可創建直播間，獲取密鑰，為手機端請求創造條件。

3.根據權利要求1所述的一種基于直播調度河長制巡河及問題處理方法，其特征在于：所述步驟二的具體出過程如下：攝像頭與麥克風采集的音頻與視，通過音視頻編碼、音視頻打包、RTMP數據流傳遞至服務端，服務端傳遞給RTMP數據流，并進行音視頻解碼，最終在播放器中進行播放，該視頻直播支持觀看直播和互動聊天，首先輸入文本，采用WebSocket雙向通訊協議到服務端，服務端發出展示文本命令，進行視頻直播發送彈幕互動。

4.根據權利要求1所述的一種基于直播調度河長制巡河及問題處理方法，其特征在于：所述步驟三的具體過程如下：在視頻直播巡河過程中，系統會自動進行圖片識別，當識別到岸邊垃圾、水面漂浮物、岸線污水流出、河岸裸露時系統截取當前時間前后預設時長的視頻，并獲取當前巡河人員、經緯度、所屬社區、所屬河流等字段自動生成一條巡河問題交于相關人員處理；

所述識別岸邊垃圾、水面漂浮物、岸線污水流出、河岸裸露的具體過程如下：

步驟一：數據庫中預存了垃圾影像Qi與漂浮物影像信息Pi；

步驟二：把獲取到的當前時間前后預設時長的視頻提取出，將其標記為Mi；

步驟三：再將視頻Mi提取出，并同時提取出預存的垃圾影像Qi與漂浮物影像信息Pi，將視頻Mi與垃圾影像Qi進行相似度比對，當視頻Mi與垃圾影像Qi的相似度超過預設值時即生成垃圾影像提示信息，將視頻Mi與漂浮物影像信息Pi進行相似度比對，當視頻Mi與漂浮物影像信息Pi的相似度超過預設值時即生成漂浮物影像提示信息；

步驟四：當視頻Mi中無法判斷出是否存在垃圾影像與漂浮物影像，即進行人工識別，通過人工識別判斷出垃圾影像提示信息、漂浮物影像提示信息、岸線污水流出提示信息與河岸裸露提示信息。

5.根據權利要求1所述的一種基于直播調度河長制巡河及問題處理方法，其特征在于：所述步驟四的具體過程如下：在視頻直播巡河過程中，當直播間用戶發起“問題上報”指令時，系統通過語音識別接受到該任務，系統自動截取接受到指令后預設時長的視頻，并獲取當前巡河人員、經緯度、所屬社區、所屬河流等字段自動生成一條巡河問題交于相關人員處理。

6.根據權利要求1所述的一種基于直播調度河長制巡河及問題處理方法，其特征在于：所述步驟五的具體過程如下：當直播視頻經過圖片識別發現距離水面過近或已經在水里，系統發出警報，并把前后20s視頻截取并獲取前巡河人員、經緯度自動生成報警信息發送給預警人員；

在巡河過程中，監測到重力傳感器出現快速下滑情況，即加速度大于預設速度時，系統發出警報，并把前后20s視頻截取并獲取前巡河人員、經緯度自動生成報警信息發送給預警人員；

在巡河過程中，系統對外界聲音進行識別，系統監測到“報警”、“救命”、”求助“等字，系統會截取當前前后20s視頻，并獲取前巡河人員、經緯度自動生成報警信息發送給預警人員。

7.根據權利要求6所述的一種基于直播調度河長制巡河及問題處理方法，其特征在于：所述直播視頻經過圖片識別發現距離水面過近或已經在水里的具體處理過程如下：提取出直播視頻的正常清晰度，將其標記為K，當正常清晰度K小于預設清晰度時，即表明直播設備在水中，即生成警報，提取出直播設備與水面的距離，當在預設時長內水的影像在直播影像中放大超過預設范圍時，也生成警報信息。