[發明專利]模型成熟度的評估方法及裝置

在審

• 申請號: 202010044262.3
• 申請日: 2020-01-15
• 公開（公告）號: CN111241689A
• 公開（公告）日: 2020-06-05
• 發明（設計）人: 張霖;劉營;賴李媛君
• 申請（專利權）人: 北京航空航天大學
• 主分類號: G06F30/20
• 分類號: G06F30/20;G06Q10/06
• 代理公司: 中國航天科技專利中心 11009
• 代理人: 楊春穎

本發明提供了一種模型成熟度的評估方法及裝置，通過以下方式實現：構建模型成熟度的指標體系，獲取指標數據，其中，指標體系中模型成熟度指標包括構建階段指標、執行階段指標、和管理階段指標；確定各階段下指標的權重；基于指標和指標權重，計算模型成熟度的值，評估模型成熟度等級。本發明提供的模型成熟度評估方法與裝置，對模型的開發及使用階段進行評估，能深入了解模型及其所屬系統的演化狀態，能夠提供快速的指標數據導入和評估算法配置，為模型評估人員及領域專家快速、準確地評估模型提供了條件。

技術領域

本發明屬于建模仿真領域，涉及一種新的模型評估維度與方法，同時通過該方法構建可配置的模型成熟度評估裝置，能夠提供快速的數據導入和模型成熟度結果快速計算。

背景技術

對模型的評價/評估可以從不同維度或角度進行，如置信度/可信度、逼真度等。然而，這些評估維度往往是針對模型的建模階段進行評估的，而且主要關注模型在特定時期或者條件下靜態的、固定的狀態或者表現，沒有反映出模型隨著時間及使用次數的變化而發生變化的情況，也沒有反映出系統演化狀態的變化，對于模型在使用階段的評估目前并沒有研究給出相關指標或者方法。但是對于體系SoS(system of systems)這樣的復雜系統仿真而言，這些維度并不能完全正確地反映系統涌現性及模型演化后的狀態、可信性等特性。

因此，需要從模型使用階段對模型進行有效評價，即從模型成熟度的角度，動態地評估模型是否隨著時間或者使用次數的變化而依然可信、可用，在復雜系統涌現條件下，評估模型演化后是否越來越成熟。

發明內容

為了克服現有技術的不足，本發明人進行了銳意研究，提供了一種模型成熟度的評估方法及裝置，該方法和裝置對模型成熟度的評估包含了模型全生命周期的三個過程，即構建、執行和管理；在評估方法建立時，模型成熟度指標體系從建模、執行、管理該三個方面進行了全面構建，并提供了模型成熟度指標的詳細說明及其量化標準，實現了對評估基礎的構建；在此基礎上，根據指標對評估結果的影響，計算指標權重；基于評價指標及其指標權重，綜合計算得到模型成熟度。本發明提供的模型成熟度評估方法與裝置，對模型的使用階段進行評估，能深入了解模型及其所屬系統的演化狀態，能夠提供快速的指標數據導入和評估算法配置，為模型評估人員及領域專家快速、準確地評估模型提供了條件。

本發明的目的在于提供以下技術方案：

第一方面，模型成熟度的評估方法，包括：

S101，構建模型成熟度的指標體系，獲取指標數據，其中，指標體系中模型成熟度指標包括構建階段指標、執行階段指標、和管理階段指標；

S102，確定各階段下指標的權重；

S103，基于指標和指標權重，計算模型成熟度的值，評估模型成熟度等級。

第二方面，模型成熟度的評估裝置，用于實施第一方面所述的方法，該裝置包括：

數據獲取模塊，其將表征指標體系中二級指標的數據接入數據存儲模塊；指標體系包括中包括構建階段指標、執行階段指標、和管理階段指標，各階段指標細化為一級指標和二級指標，其中，二級指標數據為成熟度評估的基礎數據；

數據存儲模塊，其構建數據存儲的相關模板，存儲數據獲取模塊導入的數據以及評估過程中產生的數據；

算法配置模塊，其用于配置獲取權重和成熟度值的算法并配置算法參數；

權重配置模塊，其用于確定各階段下指標的權重；

成熟度輸出模塊，基于指標和指標權重，計算模型成熟度的值，評估模型成熟度等級。

本發明提供的模型成熟度的評估方法及裝置，帶來了有益的技術效果：