[發明專利]集中配置管理系統測試報告的生成方法及裝置

有效

• 申請號: 201710369731.7
• 申請日: 2017-05-23
• 公開（公告）號: CN107168879B
• 公開（公告）日: 2020-03-10
• 發明（設計）人: 龔繼華;程廣
• 申請（專利權）人: 網易（杭州）網絡有限公司
• 主分類號: G06F11/36
• 分類號: G06F11/36
• 代理公司: 北京博浩百睿知識產權代理有限責任公司 11134
• 代理人: 宋子良

本申請公開了一種集中配置管理系統測試報告的生成方法及裝置。該方法包括：檢測集中配置管理系統的代碼是否已更新；若檢測到集中配置管理系統的代碼已更新，確定多個待測試操作系統，其中，多個待測試操作系統由集中配置管理系統配置；獲取多個待測試系統中的每個待測試操作系統中每個模塊對應的測試用例；逐次采用每個測試用例對對應的模塊進行測試，得到多個測試結果；基于多個測試結果生成測試報告。通過本申請，解決了相關技術中測試報告難以從整體上反映測試情況的問題。

技術領域

本申請涉及系統測試技術領域，具體而言，涉及一種集中配置管理系統測試報告的生成方法及裝置。

背景技術

Puppet是一種Linux、Unix平臺的集中配置管理系統，使用Ruby語言，可管理配置文件、用戶、cron任務、軟件包、系統服務等。Puppet把這些系統實體稱之為資源，Puppet的設計目標是簡化對這些資源的管理以及妥善處理資源間的依賴關系。

在實際生產環境中，將Puppet的資源封裝成模塊來完成環境的部署。同其他代碼一樣，模塊也需要進行測試才能夠保證其功能的正確性。通常情況下，會采用手工方式來進行測試，整理Bug，修復最后上線使用。但是手工方式的效率相對很低，會降低整個產品迭代上線的速度，因此引入自動化測試。在整個自動化測試的過程中，會自動完成相關用例的執行，收集執行的結果并整理成一份可讀性較強的測試報告來反饋測試的情況。

Puppet官方網站提供了一種開源的自動化測試化工具Beaker，可用來調度虛擬測試環境來完成自動化測試。Beaker是基于Rspec的開發套件，Rspec在執行完成后執行結果可以通過標準輸出，Json，Xml甚至輸出一份Html文件來進行保存和展示。本文將Rspec輸出的Json結果進行了保存，統計分析，最后渲染成一份可讀性強的報告，克服Rspec報告可讀性不強的缺點，同時實現報告的可訂閱功能。在相關技術里面有描述到，Beaker是基于Rspec的開發套件，Rspec可支持Json，Xml，Html這幾種類型的報告。在現有的方案里面，經常使用到的就是利用Rspec來輸出一份Html報告。然而，在Rspec報告中可以比較直觀的反應單個用例的執行結果，但是在一次自動化測試的過程中，需要的不僅僅是單個用例的測試情況。通常情況下，需要整體上了解測試的情況?？偨YRspec測試報告，有如下幾方面的不足:沒有整體上反應測試的情況，報告主要針對單個用例進行分析，不進行整體的統計分析；報告的可讀性不好。對于json格式和xml格式的報告，對普通用戶來說是完全不可讀的，而其輸出的html報告，把所有信息都糅合在一份報告中，很難理出用戶關心的內容，尤其是執行錯誤的報告信息。在Beaker測試過程中，會多次執行Rspec命令，輸出多份測試報告，現有技術暫時沒有提供方式能夠整合多份測試報告的結果。

針對相關技術中測試報告難以從整體上反映測試情況的問題，目前尚未提出有效的解決方案。

發明內容

本申請的主要目的在于提供一種集中配置管理系統測試報告的生成方法及裝置，以解決相關技術中測試報告難以從整體上反映測試情況的問題。

為了實現上述目的，根據本申請的一個方面，提供了一種集中配置管理系統測試報告的生成方法。該方法包括：檢測集中配置管理系統的代碼是否已更新；若檢測到所述集中配置管理系統的代碼已更新，確定多個待測試操作系統，其中，所述多個待測試操作系統由所述集中配置管理系統配置；獲取所述多個待測試系統中的每個待測試操作系統中每個模塊對應的測試用例；逐次采用每個測試用例對對應的模塊進行測試，得到多個測試結果；基于所述多個測試結果生成測試報告。

進一步地，基于所述多個測試結果生成測試報告包括：對所述多個測試結果進行分析，得到第一目標數據信息和第二目標數據信息，其中，所述第一目標數據信息中至少包括：測試用例的數量、測試失敗的數量和測試成功的數量，所述第二目標數據信息中至少包括：每個待測試操作系統中每個模塊的測試信息和對待測試操作系統中模塊測試失敗的信息；將所述第一目標數據信息和所述第二目標數據信息填充至預設模板中，生成所述測試報告。