[發(fā)明專利]一種CDN按前綴緩存清除方法和系統(tǒng)

在審

• 申請(qǐng)?zhí)枺?/td>: 201810180245.5
• 申請(qǐng)日: 2018-03-05
• 公開（公告）號(hào): CN108416016A
• 公開（公告）日: 2018-08-17
• 發(fā)明（設(shè)計(jì)）人: 劉曉光;汪志武;趙子毅;張晴晴
• 申請(qǐng)（專利權(quán)）人: 北京云端智度科技有限公司
• 主分類號(hào): G06F17/30
• 分類號(hào): G06F17/30;G06F3/06
• 代理公司: 暫無信息
• 代理人: 暫無信息

本發(fā)明涉及一種這種CDN按前綴緩存清除系統(tǒng)，包括數(shù)據(jù)預(yù)處理模塊：具備域名前綴列表的提取、刷新等功能；存儲(chǔ)模塊：該模塊具有域名列表存儲(chǔ)功能、前綴刷新任務(wù)時(shí)間、以及緩存時(shí)間存儲(chǔ)功能；數(shù)據(jù)分析處理模塊：進(jìn)行文件前綴數(shù)據(jù)的分析處理以及再次從源站獲取文件。這種CDN緩存清除方法，域名維護(hù)前綴刷新列表，存儲(chǔ)到各個(gè)機(jī)器，并且記錄該前綴刷新任務(wù)的時(shí)間；對(duì)于每個(gè)文件，在文件元數(shù)據(jù)中存儲(chǔ)文件緩存下來的時(shí)間；每次請(qǐng)求到達(dá)時(shí)，先比較是否命中前綴刷新列表，若命中則查詢文件緩存時(shí)間，若刷新時(shí)間比緩存時(shí)間要新，則清除該文件并且回上級(jí)再次獲取該文件。本發(fā)明通過標(biāo)記功能替代全量刪除機(jī)制，按前綴清除的動(dòng)作能夠快速生效。

技術(shù)領(lǐng)域

本發(fā)明屬于信息技術(shù)領(lǐng)域，特別是涉及一種CDN按前綴緩存清除方法和系統(tǒng)。

背景技術(shù)

在CDN等分布式系統(tǒng)中，內(nèi)容通過緩存機(jī)制，存儲(chǔ)到CDN節(jié)點(diǎn)，用戶通過CDN節(jié)點(diǎn)來獲取數(shù)據(jù)。因?yàn)镃DN節(jié)點(diǎn)做了緩存，就可能存在CDN節(jié)點(diǎn)和源站數(shù)據(jù)不一致的情況。在實(shí)際業(yè)務(wù)中，經(jīng)常會(huì)遇到清除CDN中指定文件緩存的功能，以達(dá)到CDN與源站數(shù)據(jù)完全同步的目的。實(shí)際使用中，網(wǎng)站的目錄結(jié)構(gòu)存在-定規(guī)律，經(jīng)常會(huì)遇到更新指定前綴下所有文件的功能(如：清除某個(gè)特定目錄下所有文件)。在按前綴清除的機(jī)制中，需要CDN節(jié)點(diǎn)能夠存儲(chǔ)前綴與文件的對(duì)應(yīng)關(guān)系，因?yàn)楣?jié)點(diǎn)存儲(chǔ)的文件眾多，文件也頻繁過期淘汰，維護(hù)此關(guān)系較為復(fù)雜。傳統(tǒng)的方案是對(duì)CDN節(jié)點(diǎn)的緩存信息記錄日志，每訪問一次緩存中的文件，則將本次訪問的資源地址記錄到文件或者數(shù)據(jù)庫中。通過對(duì)存儲(chǔ)的資源記錄進(jìn)行按前綴排序，得到某個(gè)前綴包含了哪些文件的信息。在前綴清除時(shí)，根據(jù)索引情況，逐一去清除緩存中的每個(gè)資源。傳統(tǒng)方案劣勢(shì)：1.對(duì)每次請(qǐng)求記錄訪問日志，并且將訪問日志按前綴排序?qū)π阅荛_銷大；2.每次前綴清除，需要立刻將該前綴對(duì)應(yīng)的所有文件全部清除，清除的動(dòng)作消耗大，并且清除生效的時(shí)間長。

發(fā)明內(nèi)容

本發(fā)明提供了一多CDN按前綴緩存清除方法和系統(tǒng)，目的在于提高緩存清除性能及刷新效率。

本發(fā)明提供的這種CDN按前綴緩存清除系統(tǒng)，包括數(shù)據(jù)預(yù)處理模塊：具備域名前綴列表的提取、刷新等功能；存儲(chǔ)模塊：該模塊具有域名列表存儲(chǔ)功能、前綴刷新任務(wù)時(shí)間、以及緩存時(shí)間存儲(chǔ)功能；數(shù)據(jù)分析處理模塊：進(jìn)行文件前綴數(shù)據(jù)的分析處理以及再次從源站獲取文件。

本發(fā)明提供的這種CDN按前綴緩存清除方法，域名維護(hù)前綴刷新列表，存儲(chǔ)到各個(gè)機(jī)器，并且記錄該前綴刷新任務(wù)的時(shí)間；對(duì)于每個(gè)文件，在文件元數(shù)據(jù)中存儲(chǔ)文件緩存下來的時(shí)間；每次請(qǐng)求到達(dá)時(shí)，先比較是否命中前綴刷新列表，若命中則查詢文件緩存時(shí)間，若刷新時(shí)間比緩存時(shí)間要新，則清除該文件并且回上級(jí)再次獲取該文件。

本發(fā)明的優(yōu)點(diǎn)是：1.通過標(biāo)記以及每次請(qǐng)求時(shí)候的查找動(dòng)作，替代了前綴的索引和排序過程。實(shí)現(xiàn)了只針對(duì)需要按前綴清除的文件才進(jìn)行索引查詢，降低性能開銷；2.通過標(biāo)記功能替代全量刪除機(jī)制，按前綴清除的動(dòng)作能夠快速生效。。

附圖說明

圖1是本發(fā)明示意圖。

具體實(shí)施方式

下面對(duì)本發(fā)明優(yōu)選實(shí)施例作詳細(xì)說明。

本發(fā)明提供的這種CDN按前綴緩存清除系統(tǒng)，包括數(shù)據(jù)預(yù)處理模塊：具備域名前綴列表的提取、刷新等功能；存儲(chǔ)模塊：該模塊具有域名列表存儲(chǔ)功能、前綴刷新任務(wù)時(shí)間、以及緩存時(shí)間存儲(chǔ)功能；數(shù)據(jù)分析處理模塊：進(jìn)行文件前綴數(shù)據(jù)的分析處理以及再次從源站獲取文件。

本發(fā)明這種CDN緩存清除方法，如圖1所示，域名維護(hù)前綴刷新列表，存儲(chǔ)到各個(gè)機(jī)器，并且記錄該前綴刷新任務(wù)的時(shí)間；對(duì)于每個(gè)文件，在文件元數(shù)據(jù)中存儲(chǔ)文件緩存下來的時(shí)間；每次請(qǐng)求到達(dá)時(shí)，先比較是否命中前綴刷新列表，若命中則查詢文件緩存時(shí)間，若刷新時(shí)間比緩存時(shí)間要新，則清除該文件并且回上級(jí)再次獲取該文件。

當(dāng)然，本技術(shù)領(lǐng)域的普通技術(shù)人員應(yīng)當(dāng)認(rèn)識(shí)到，以上實(shí)施例僅是用來說明本發(fā)明的，而并非對(duì)本發(fā)明的限定，只要在本發(fā)明的范圍內(nèi)對(duì)以上實(shí)施例的變化、變型都在本發(fā)明的保護(hù)范圍之內(nèi)。