[發明專利]spark-mllib調用方法、存儲介質、電子設備及系統有效
| 申請號: | 201710771009.6 | 申請日: | 2017-08-31 |
| 公開(公告)號: | CN107547541B | 公開(公告)日: | 2020-07-31 |
| 發明(設計)人: | 王毅;張文明;陳少杰 | 申請(專利權)人: | 武漢斗魚網絡科技有限公司 |
| 主分類號: | H04L29/06 | 分類號: | H04L29/06;H04L29/08 |
| 代理公司: | 武漢智權專利代理事務所(特殊普通合伙) 42225 | 代理人: | 沈林華 |
| 地址: | 430000 湖北省武漢市東湖開*** | 國省代碼: | 湖北;42 |
| 權利要求書: | 查看更多 | 說明書: | 查看更多 |
| 摘要: | |||
| 搜索關鍵詞: | spark mllib 調用 方法 存儲 介質 電子設備 系統 | ||
1.一種spark-mllib調用方法,其特征在于,該方法包括以下步驟:
S1:服務端收到學習請求時,將學習請求發送到至少2個設置于服務端上的akka-http中,轉到S2;
S2:akka-http收到學習請求時,將學習請求的url與預先配置的spark-mllib程序的路由進行比對,若存在與學習請求匹配的路由,則調用與學習請求匹配的路由對應的spark-mllib程序運行,轉到S3;
S3:spark-mllib程序訓練模型后,輸出模型預測結果,將模型預測結果的格式轉化為vector;
S2中通過預先創建于服務端中的ActorSystem服務,調用與學習請求匹配的路由對應的spark-mllib程序運行。
2.如權利要求1所述的spark-mllib調用方法,其特征在于:S1所述服務端為nginx。
3.如權利要求2所述的spark-mllib調用方法,其特征在于:S1中所述將學習請求發送到至少2個akka-http中的流程包括:在nginx的配置文件中添加upstream節點,根據每個akka-http的唯一標識和upstream節點,形成nginx的proxy_pass;根據proxy_pass發送學習請求。
4.一種計算機可讀存儲介質,該存儲介質上存儲有計算機程序,其特征在于:所述計算機程序被處理器執行時實現權利要求1至3任一項所述的方法。
5.一種電子設備,包括存儲器和處理器,存儲器上儲存有在處理器上運行的計算機程序,處理器執行計算機程序時實現權利要求1至3任一項所述的方法。
6.一種spark-mllib調用系統,其特征在于:該系統包括設置于服務端中的學習請求轉發模塊、至少2個akka-http模塊和若干spark-mllib程序訓練模塊;
學習請求轉發模塊用于:收到學習請求時,將學習請求發送至每個akka-http模塊;
akka-http模塊用于:收到學習請求時,將學習請求的url與預先配置的spark-mllib程序的路由進行比對,若存在與學習請求匹配的路由,則調用與學習請求匹配的路由對應的spark-mllib程序運行;
spark-mllib程序訓練模塊用于:調用spark-mllib程序訓練模型后,輸出模型預測結果,將模型預測結果的格式轉化為vector;
所述akka-http模塊通過預先創建于服務端中的ActorSystem服務,調用與學習請求匹配的路由對應的spark-mllib程序運行。
7.如權利要求6所述的spark-mllib調用系統,其特征在于:所述服務端為nginx。
8.如權利要求7所述的spark-mllib調用系統,其特征在于:所述學習請求轉發模塊將學習請求發送至每個akka-http模塊的流程包括:在nginx的配置文件中添加upstream節點,根據每個akka-http模塊的唯一標識和upstream節點,形成nginx的proxy_pass;根據proxy_pass發送學習請求。
該專利技術資料僅供研究查看技術是否侵權等信息,商用須獲得專利權人授權。該專利全部權利屬于武漢斗魚網絡科技有限公司,未經武漢斗魚網絡科技有限公司許可,擅自商用是侵權行為。如果您想購買此專利、獲得商業授權和技術合作,請聯系【客服】
本文鏈接:http://www.szxzyx.cn/pat/books/201710771009.6/1.html,轉載請聲明來源鉆瓜專利網。





