[發明專利]一種基于XBRL的數據解析方法、存儲及介質及系統

在審

• 申請號: 202110142624.7
• 申請日: 2021-02-02
• 公開（公告）號: CN112783509A
• 公開（公告）日: 2021-05-11
• 發明（設計）人: 張洪波
• 申請（專利權）人: 山東立信特信息技術有限公司
• 主分類號: G06F8/41
• 分類號: G06F8/41;G06F16/215;G06F16/27;G06F16/28;G06N20/00
• 代理公司: 暫無信息
• 代理人: 暫無信息

1.一種基于XBRL的數據解析方法，其特征在于，包括如下步驟：

從源端抓取XBRL數據；

對抓取的所述XBRL數據進行加工清洗處理得到處理后的XBRL數據；

根據所述處理后的XBRL數據建立非關系數據庫，實現所述處理后的XBRL數據的分布式存儲；

對分布式存儲的所述處理后的XBRL數據執行可視化操作并進行抓取數據的可視化展示。

2.根據權利要求1所述的基于XBRL的數據解析方法，其特征在于，從源端抓取XBRL數據的步驟中：

所述源端包括XBRL站點、XBRL文件、符合XBRL數據結構的數據文件以及存放在數據庫中的XBRL格式數據。

3.根據權利要求1所述的基于XBRL的數據解析方法，其特征在于，對抓取的所述XBRL數據進行加工清洗處理得到處理后的XBRL數據的步驟中：

通過數據倉庫技術工具kettle執行所述加工清洗處理過程。

4.根據權利要求1所述的基于XBRL的數據解析方法，其特征在于，對分布式存儲的所述處理后的XBRL數據執行可視化操作并進行抓取數據的可視化展示的步驟中包括：

根據大數據分析工具Spark開發數據分析統計方法對所述處理后的XBRL數據進行統計分析；

根據展現層工具tableau全面圖形化分析對統計分析后的數據進行圖形化分析；

根據xbrlcore-master對圖形化分析戶的數據進行分析并展示分析結果。

5.根據權利要求1所述的基于XBRL的數據解析方法，其特征在于，還包括如下步驟：

對XBRL數據的數據描述對象進行數據畫像設計；

根據完成數據畫像設計后的XBRL數據建立數據專業知識圖譜。

6.根據權利要求1-5任一項所述的基于XBRL的數據解析方法，其特征在于，從源端抓取XBRL數據的步驟中包括：

獲取票據的掃描圖像，解析所述掃描圖像，得到所述掃描圖像中的XBRL數據。

7.根據權利要求6所述的基于XBRL的數據解析方法，其特征在于，獲取票據的掃描圖像，解析所述掃描圖像，得到所述掃描圖像中的XBRL數據的步驟中包括：

采用樣本數據對機器學習模型進行訓練，以訓練后的機器學習模型作為數據抓取模型，所述樣本數據包括樣本票據的掃描圖像，掃描圖像上的標識，XBRL數據識別結果；

將獲取的所述掃描圖像輸入至所述數據抓取模型，得到所述掃描圖像中的XBRL數據。

8.根據權利要求7所述的基于XBRL的數據解析方法，其特征在于，采用樣本數據對機器學習模型進行訓練，以訓練后的機器學習模型作為數據抓取模型，所述樣本數據包括樣本票據的掃描圖像，掃描圖像上的標識，XBRL數據識別結果的步驟中：

所述標識包括標題關鍵字、內容關鍵字、財務數據關鍵字和日期關鍵字，其中，每一類關鍵字中均包括至少一個，不同類關鍵字設置相同或不同優先級別。

9.一種存儲介質，其特征在于，在所述存儲介質中存儲有程序信息，計算機讀取所述程序信息后執行權利要求1-8任一項所述的基于XBRL的數據解析方法。

10.一種基于XBRL的數據抓取系統，其特征在于，包括至少一個處理器和至少一個存儲器，至少一個所述存儲器中存儲有程序信息，至少一個所述處理器讀取所述程序信息后執行權利要求1-8任一項所述的基于XBRL的數據解析方法。