[發(fā)明專利]深度學(xué)習(xí)訓(xùn)練平臺(tái)的訓(xùn)練日志可視化系統(tǒng)、方法及設(shè)備

在審

• 申請(qǐng)?zhí)枺?/td>: 201911386415.6
• 申請(qǐng)日: 2019-12-29
• 公開(kāi)（公告）號(hào): CN111190805A
• 公開(kāi)（公告）日: 2020-05-22
• 發(fā)明（設(shè)計(jì)）人: 王文瀟
• 申請(qǐng)（專利權(quán)）人: 廣東浪潮大數(shù)據(jù)研究有限公司
• 主分類號(hào): G06F11/34
• 分類號(hào): G06F11/34;G06F9/451
• 代理公司: 北京集佳知識(shí)產(chǎn)權(quán)代理有限公司 11227
• 代理人: 牛亭亭

本申請(qǐng)公開(kāi)了一種深度學(xué)習(xí)訓(xùn)練平臺(tái)的訓(xùn)練日志可視化系統(tǒng)，包括：工具選取模塊，用于在接收到針對(duì)目標(biāo)訓(xùn)練任務(wù)的第一可視化請(qǐng)求時(shí)，選取對(duì)應(yīng)于目標(biāo)訓(xùn)練任務(wù)的預(yù)設(shè)的可視化工具；工具加載模塊，用于創(chuàng)建目標(biāo)資源，在目標(biāo)資源上加載選取出的可視化工具，并暴露出目標(biāo)資源的定位地址；可視化展示模塊，用于在接收到針對(duì)目標(biāo)訓(xùn)練任務(wù)的第二可視化請(qǐng)求時(shí)，通過(guò)定位地址啟用可視化工具，將目標(biāo)訓(xùn)練任務(wù)的訓(xùn)練日志進(jìn)行顯示。應(yīng)用本申請(qǐng)的方案，實(shí)現(xiàn)了訓(xùn)練日志可視化。并且操作簡(jiǎn)單方便，有利于提高用戶的工作效率。本申請(qǐng)還公開(kāi)了一種深度學(xué)習(xí)訓(xùn)練平臺(tái)的訓(xùn)練日志可視化方法及設(shè)備，具有相應(yīng)技術(shù)效果。

技術(shù)領(lǐng)域

本發(fā)明涉及計(jì)算機(jī)技術(shù)領(lǐng)域，特別是涉及一種深度學(xué)習(xí)訓(xùn)練平臺(tái)的訓(xùn)練日志可視化系統(tǒng)、方法及設(shè)備。

背景技術(shù)

容器集群是一種將多臺(tái)物理機(jī)抽象為邏輯上單一容器的技術(shù)，是一種比虛擬機(jī)技術(shù)更加節(jié)省計(jì)算資源，也更加靈活的虛擬化技術(shù)。而隨著互聯(lián)網(wǎng)應(yīng)用的高速發(fā)展，通過(guò)容器集群來(lái)實(shí)現(xiàn)用戶應(yīng)用也越來(lái)越常見(jiàn)。Kubernetes是常用的開(kāi)源的容器集群管理系統(tǒng)，用于管理云平臺(tái)中多個(gè)主機(jī)上的容器化的應(yīng)用，可以為容器化的應(yīng)用提供部署運(yùn)行、資源調(diào)度、服務(wù)發(fā)現(xiàn)和動(dòng)態(tài)伸縮等一系列完整功能。

深度學(xué)習(xí)的算法人員可以在云平臺(tái)中對(duì)訓(xùn)練模型進(jìn)行訓(xùn)練，即在云平臺(tái)中運(yùn)行訓(xùn)練任務(wù)。但是，深度學(xué)習(xí)的算法人員只能獲取到經(jīng)過(guò)訓(xùn)練之后的訓(xùn)練模型，而在實(shí)際應(yīng)用中，部分算法人員可能還需要訓(xùn)練過(guò)程中產(chǎn)生的日志數(shù)據(jù)，從而進(jìn)行訓(xùn)練模型的分析改進(jìn)。但由于目前的云平臺(tái)中，深度學(xué)習(xí)的算法人員只能獲取到經(jīng)過(guò)訓(xùn)練之后的訓(xùn)練模型，因此無(wú)法滿足部分算法人員獲取訓(xùn)練日志的這一需求。

綜上所述，如何有效地向用戶提供訓(xùn)練日志，是目前本領(lǐng)域技術(shù)人員急需解決的技術(shù)問(wèn)題。

發(fā)明內(nèi)容

本發(fā)明的目的是提供一種深度學(xué)習(xí)訓(xùn)練平臺(tái)的訓(xùn)練日志可視化系統(tǒng)、方法及設(shè)備，以有效地向用戶提供訓(xùn)練日志。

為解決上述技術(shù)問(wèn)題，本發(fā)明提供如下技術(shù)方案：

一種深度學(xué)習(xí)訓(xùn)練平臺(tái)的訓(xùn)練日志可視化系統(tǒng)，包括：

工具選取模塊，用于在接收到針對(duì)目標(biāo)訓(xùn)練任務(wù)的第一可視化請(qǐng)求時(shí)，選取對(duì)應(yīng)于所述目標(biāo)訓(xùn)練任務(wù)的預(yù)設(shè)的可視化工具；

工具加載模塊，用于創(chuàng)建目標(biāo)資源，在所述目標(biāo)資源上加載選取出的所述可視化工具，并暴露出所述目標(biāo)資源的定位地址；

可視化展示模塊，用于在接收到針對(duì)所述目標(biāo)訓(xùn)練任務(wù)的第二可視化請(qǐng)求時(shí)，通過(guò)所述定位地址啟用所述可視化工具，將所述目標(biāo)訓(xùn)練任務(wù)的訓(xùn)練日志進(jìn)行顯示。

優(yōu)選的，還包括：

資源釋放模塊，用于在檢測(cè)出釋放條件成立時(shí)，刪除所述目標(biāo)資源。

優(yōu)選的，所述釋放條件為發(fā)送所述第一可視化請(qǐng)求的用戶處于離線狀態(tài)。

優(yōu)選的，所述釋放條件為發(fā)送所述第一可視化請(qǐng)求的用戶處于離線狀態(tài)，且離線時(shí)長(zhǎng)大于預(yù)設(shè)的時(shí)長(zhǎng)閾值。

優(yōu)選的，所述工具加載模塊，具體用于：

創(chuàng)建pod作為目標(biāo)資源，在所述目標(biāo)資源上加載選取出的所述可視化工具，并建立與所述目標(biāo)資源綁定的kubernetes服務(wù)，通過(guò)所述kubernetes服務(wù)暴露出所述目標(biāo)資源的定位地址。

優(yōu)選的，還包括：

日志記錄模塊，用于在所述可視化展示模塊將所述目標(biāo)訓(xùn)練任務(wù)的訓(xùn)練日志進(jìn)行顯示之后，進(jìn)行事件記錄。

一種深度學(xué)習(xí)訓(xùn)練平臺(tái)的訓(xùn)練日志可視化方法，包括：

工具選取模塊在接收到針對(duì)目標(biāo)訓(xùn)練任務(wù)的第一可視化請(qǐng)求時(shí)，選取對(duì)應(yīng)于所述目標(biāo)訓(xùn)練任務(wù)的預(yù)設(shè)的可視化工具；