[發(fā)明專利]一種數(shù)據(jù)壓縮方法及存儲系統(tǒng)

有效

• 申請?zhí)枺?/td>: 201310549672.3
• 申請日: 2013-11-07
• 公開（公告）號: CN103631873B
• 公開（公告）日: 2017-12-12
• 發(fā)明（設(shè)計）人: 李力振
• 申請（專利權(quán)）人: 華為技術(shù)有限公司
• 主分類號: G06F17/30
• 分類號: G06F17/30
• 代理公司: 北京同達(dá)信恒知識產(chǎn)權(quán)代理有限公司11291
• 代理人: 黃志華

技術(shù)領(lǐng)域

本發(fā)明涉及數(shù)據(jù)存儲技術(shù)領(lǐng)域，尤其涉及一種數(shù)據(jù)壓縮方法及存儲系統(tǒng)。

背景技術(shù)

存儲系統(tǒng)，是指應(yīng)用系統(tǒng)中由存放程序和數(shù)據(jù)的各種存儲設(shè)備、控制部件及管理信息調(diào)度的硬件和軟件所組成的系統(tǒng)。

現(xiàn)有技術(shù)中的存儲系統(tǒng)在進(jìn)行數(shù)據(jù)存儲時，為了節(jié)約存儲空間，一般采用將數(shù)據(jù)進(jìn)行壓縮，再將獲得的壓縮數(shù)據(jù)進(jìn)行存儲。

本發(fā)明申請人發(fā)現(xiàn)現(xiàn)有技術(shù)中至少存在以下技術(shù)問題：

現(xiàn)有技術(shù)中的存儲系統(tǒng)在對一數(shù)據(jù)進(jìn)行壓縮時，不能根據(jù)存儲系統(tǒng)中的每個節(jié)點(diǎn)的當(dāng)前工作狀態(tài)，合理地分配數(shù)據(jù)壓縮任務(wù)，從而存在壓縮效率低的技術(shù)問題。例如：在某一節(jié)點(diǎn)的當(dāng)前工作狀態(tài)為繁忙狀態(tài)時，存儲系統(tǒng)仍然將數(shù)據(jù)壓縮任務(wù)分配給該節(jié)點(diǎn)中的控制部件，那么在該控制部件執(zhí)行數(shù)據(jù)壓縮任務(wù)時，壓縮速率將會很慢，甚至還會影響到存儲系統(tǒng)的整體性能。

發(fā)明內(nèi)容

本申請實施例通過提供一種數(shù)據(jù)壓縮方法及存儲系統(tǒng)，解決了現(xiàn)有技術(shù)中的存儲系統(tǒng)在對一數(shù)據(jù)進(jìn)行壓縮時，不能根據(jù)存儲系統(tǒng)中的每個節(jié)點(diǎn)的當(dāng)前工作狀態(tài)，合理地分配數(shù)據(jù)壓縮任務(wù)，從而存在壓縮效率低的技術(shù)問題。

第一方面，提供一種數(shù)據(jù)壓縮方法，包括：

存儲系統(tǒng)中的元數(shù)據(jù)控制器MDC周期性地收集表示所述存儲系統(tǒng)中每個計算節(jié)點(diǎn)的當(dāng)前工作狀態(tài)的第一信息，以及表示所述存儲系統(tǒng)中每個存儲節(jié)點(diǎn)的當(dāng)前工作狀態(tài)的第二信息；

所述MDC基于所述第一信息，將所述每個計算節(jié)點(diǎn)中的當(dāng)前工作狀態(tài)不為繁忙狀態(tài)的計算節(jié)點(diǎn)，確定為當(dāng)前活動計算節(jié)點(diǎn)；所述MDC基于所述第二信息，將所述每個存儲節(jié)點(diǎn)中的當(dāng)前工作狀態(tài)不為繁忙狀態(tài)的存儲節(jié)點(diǎn)，確定為當(dāng)前活動存儲節(jié)點(diǎn)；

所述MDC生成記錄有所述當(dāng)前活動計算節(jié)點(diǎn)和所述當(dāng)前活動存儲節(jié)點(diǎn)的當(dāng)前活動節(jié)點(diǎn)列表；

在所述存儲系統(tǒng)需要對所述數(shù)據(jù)進(jìn)行壓縮時，第一計算節(jié)點(diǎn)中的第一DSH獲取所述數(shù)據(jù)；

所述第一DSH獲取所述當(dāng)前活動節(jié)點(diǎn)列表，并確認(rèn)在所述當(dāng)前活動節(jié)點(diǎn)列表中是否記錄有所述第一計算節(jié)點(diǎn)；

在所述當(dāng)前活動節(jié)點(diǎn)列表中沒有記錄所述第一計算節(jié)點(diǎn)時，所述第一DSH在所述數(shù)據(jù)中添加表示所述數(shù)據(jù)未被壓縮的標(biāo)簽，獲得標(biāo)簽數(shù)據(jù)；且

確認(rèn)在所述當(dāng)前活動節(jié)點(diǎn)列表中是否記錄有第一存儲節(jié)點(diǎn)，如果有，將所述標(biāo)簽數(shù)據(jù)發(fā)送給第一存儲管理器MM；其中，在所述第一存儲節(jié)點(diǎn)中設(shè)置有用于存儲所述數(shù)據(jù)的存儲器，及用于管理所述存儲器的所述第一MM；

在所述當(dāng)前活動節(jié)點(diǎn)列表中記錄有所述第一計算節(jié)點(diǎn)時，所述第一DSH對所述數(shù)據(jù)進(jìn)行壓縮，獲得壓縮數(shù)據(jù)。

結(jié)合第一方面，在第一種可能的實施方式中，基于如下方式，生成所述第一信息：

所述每個計算節(jié)點(diǎn)中的DSH基于自身所在計算節(jié)點(diǎn)中的至少一個計算節(jié)點(diǎn)硬件的當(dāng)前資源使用率，確定自身所在計算節(jié)點(diǎn)的當(dāng)前工作狀態(tài)，并基于自身所在計算節(jié)點(diǎn)的當(dāng)前工作狀態(tài)，生成所述第一信息；所述計算節(jié)點(diǎn)硬件包括計算節(jié)點(diǎn)中的CPU、和/或內(nèi)存、和/或輸入/輸出接口；

其中，若所述至少一個計算節(jié)點(diǎn)硬件的當(dāng)前資源使用率大于等于第一預(yù)設(shè)資源使用率，則所述至少一個計算節(jié)點(diǎn)硬件所在的計算節(jié)點(diǎn)的當(dāng)前工作狀態(tài)為繁忙狀態(tài)；若所述至少一個計算節(jié)點(diǎn)硬件的當(dāng)前資源使用率小于所述第一預(yù)設(shè)資源使用率，則所述至少一個計算節(jié)點(diǎn)硬件所在的計算節(jié)點(diǎn)的當(dāng)前工作狀態(tài)不為繁忙狀態(tài)。

結(jié)合第一方面、或第一方面的第一種可能的實施方式，在第二種可能的實施方式中，基于如下方式，生成所述第二信息：

所述每個存儲節(jié)點(diǎn)中的MM基于自身所在存儲節(jié)點(diǎn)中的至少一個存儲節(jié)點(diǎn)硬件的當(dāng)前資源使用率，確定自身所在存儲節(jié)點(diǎn)的當(dāng)前工作狀態(tài)，并基于自身所在存儲節(jié)點(diǎn)的當(dāng)前工作狀態(tài)，生成所述第二信息；所述存儲節(jié)點(diǎn)硬件包括存儲節(jié)點(diǎn)中的CPU、和/或內(nèi)存、和/或輸入/輸出接口；

其中，若所述至少一個存儲節(jié)點(diǎn)硬件的當(dāng)前資源使用率大于等于第二預(yù)設(shè)資源使用率，則所述至少一個存儲節(jié)點(diǎn)硬件所在的存儲節(jié)點(diǎn)的當(dāng)前工作狀態(tài)為繁忙狀態(tài)；若所述至少一個存儲節(jié)點(diǎn)硬件的當(dāng)前資源使用率小于所述第二預(yù)設(shè)資源使用率，則所述至少一個存儲節(jié)點(diǎn)硬件所在的存儲節(jié)點(diǎn)的當(dāng)前工作狀態(tài)不為繁忙狀態(tài)。

結(jié)合第一方面、或第一方面的第一種可能的實施方式、或第一方面的第二種可能的實施方式，在第三種可能的實施方式中，所述第一計算節(jié)點(diǎn)上部署有與所述數(shù)據(jù)對應(yīng)的應(yīng)用程序。

結(jié)合第一方面，在第四種可能的實施方式中，在所述第一DSH確認(rèn)在所述當(dāng)前活動節(jié)點(diǎn)列表中是否記錄有第一存儲節(jié)點(diǎn)之后，所述方法還包括：