[發明專利]視頻業務處理方法、裝置及電子設備有效
| 申請號: | 201910241011.1 | 申請日: | 2019-03-27 |
| 公開(公告)號: | CN109951739B | 公開(公告)日: | 2021-06-08 |
| 發明(設計)人: | 張家斌;張婷;栗陽力;紀軍 | 申請(專利權)人: | 北京市博匯科技股份有限公司 |
| 主分類號: | H04N21/442 | 分類號: | H04N21/442;H04N21/24;H04N21/258;H04N17/00;G06F16/17 |
| 代理公司: | 北京超凡志成知識產權代理事務所(普通合伙) 11371 | 代理人: | 蔣姍 |
| 地址: | 100000 北京市海*** | 國省代碼: | 北京;11 |
| 權利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關鍵詞: | 視頻 業務 處理 方法 裝置 電子設備 | ||
1.一種視頻業務處理方法,其特征在于,所述方法包括:
根據預先獲取的爬蟲任務、賬戶、進程,創建表征每個第一爬蟲任務與一個第一賬號相關聯的第一關聯關系、不需要重復登錄賬號的第二爬蟲任務與至少一個第二賬號相關聯的第二關聯關系,以及表征每個所述第一賬號與一個第一進程相關聯、所述第二賬號與預設的第二進程相關聯的第三關聯關系;
基于所述第一關聯關系、所述第二關聯關系及所述第三關聯關系創建配置文件;
基于預設的視頻業務獲取與所述視頻業務對應的爬蟲任務集及所述配置文件;
基于所述配置文件為所述爬蟲任務集中的爬蟲任務分配賬號和進程,所述配置文件記錄所述爬蟲任務集中的每個爬蟲任務對應的賬號和進程,其中,所述爬蟲任務集中的不同的第一爬蟲任務對應的第一賬號不相同,所述第一爬蟲任務為需要重復登錄賬號的任務,每個所述第一賬號與一個爬蟲任務對應,且與所述第一賬號對應的爬蟲任務為所述第一爬蟲任務;
根據為所述爬蟲任務集中的爬蟲任務分配的賬號和進程執行所述爬蟲任務集中的爬蟲任務。
2.根據權利要求1所述的方法,其特征在于,基于所述配置文件為所述爬蟲任務集中的爬蟲任務分配賬號和進程,包括:
判斷所述爬蟲任務集中是否存在所述第一爬蟲任務或第二爬蟲任務;
在所述爬蟲任務集中存在所述第一爬蟲任務時,基于所述配置文件將每個所述第一爬蟲任務分配至一個所述第一進程,一個所述第一進程與一個所述第一賬號相對應,且一個所述第一賬號與一個所述第一爬蟲任務相對應;
在所述爬蟲任務集中存在所述第二爬蟲任務時,基于所述配置文件將所有所述第二爬蟲任務分配至至少一個所述第二進程,一個所述第二進程與一個預設的第二賬號相對應,一個所述第二賬號與至少一個所述第二爬蟲任務相對應。
3.根據權利要求2所述的方法,其特征在于,將所有所述第二爬蟲任務分配至至少一個第二進程,包括:
將每個所述第二爬蟲任務分配至一個所述第二進程,其中,不同的所述第二爬蟲任務所分配的所述第二進程不相同。
4.根據權利要求2所述的方法,其特征在于,所述配置文件中攜帶有第一預設標識和/或第二預設標識,所述第一預設標識用于確定所述爬蟲任務在執行過程中需要重復登錄賬號;所述第二預設標識用于確定所述爬蟲任務在執行過程中不需要重復登錄賬號;
判斷所述爬蟲任務集中是否存在需要重復登錄賬號的所述第一爬蟲任務或不需要重復登錄賬號的第二爬蟲任務,包括:
在所述爬蟲任務集中的所述爬蟲任務攜帶的標識為所述第一預設標識時,確定所述爬蟲任務集中存在所述第一爬蟲任務;
在所述爬蟲任務集中的所述爬蟲任務攜帶的標識為所述第二預設標識時,確定所述爬蟲任務集中存在所述第二爬蟲任務。
5.一種視頻業務處理的裝置,其特征在于,所述裝置包括:
關聯模塊,用于根據預先獲取的爬蟲任務、賬戶、進程,創建表征每個第一爬蟲任務與一個第一賬號相關聯的第一關聯關系、不需要重復登錄賬號的第二爬蟲任務與至少一個第二賬號相關聯的第二關聯關系,以及表征每個所述第一賬號與一個第一進程相關聯、所述第二賬號與預設的第二進程相關聯的第三關聯關系;
配置生成模塊,用于基于所述第一關聯關系、所述第二關聯關系及所述第三關聯關系創建配置文件;
獲取模塊,用于基于預設的視頻業務獲取與所述視頻業務對應的爬蟲任務集及所述配置文件;
分配模塊,用于基于所述配置文件為所述爬蟲任務集中的爬蟲任務分配賬號和進程,所述配置文件記錄所述爬蟲任務集中的每個爬蟲任務對應的賬號和進程,其中,所述爬蟲任務集中的不同的第一爬蟲任務對應的第一賬號不相同,所述第一爬蟲任務為需要重復登錄賬號的任務,每個所述第一賬號與一個爬蟲任務對應,且與所述第一賬號對應的爬蟲任務為所述第一爬蟲任務;
執行模塊,用于根據為所述爬蟲任務集中的爬蟲任務分配的賬號和進程執行所述爬蟲任務集中的爬蟲任務。
該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于北京市博匯科技股份有限公司,未經北京市博匯科技股份有限公司許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作,請聯系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/201910241011.1/1.html,轉載請聲明來源鉆瓜專利網。





