[發(fā)明專利]一種外貿(mào)市場數(shù)據(jù)處理方法、裝置和存儲介質(zhì)

有效

• 申請?zhí)枺?/td>: 201811561954.4
• 申請日: 2018-12-20
• 公開（公告）號: CN109801098B
• 公開（公告）日: 2023-09-19
• 發(fā)明（設(shè)計(jì)）人: 楊曉霖;黃俊健;王曉佳;朱彬;嚴(yán)峰;紀(jì)曉陽
• 申請（專利權(quán)）人: 廣東廣業(yè)開元科技有限公司
• 主分類號: G06Q30/0201
• 分類號: G06Q30/0201;G06Q30/0202;G06F16/35
• 代理公司: 廣州嘉權(quán)專利商標(biāo)事務(wù)所有限公司 44205
• 代理人: 胡輝

1.一種外貿(mào)市場數(shù)據(jù)處理方法，其特征在于，包括以下步驟：

從互聯(lián)網(wǎng)收集外貿(mào)市場數(shù)據(jù)；

根據(jù)來源和/或內(nèi)容相關(guān)性，將收集到的外貿(mào)市場數(shù)據(jù)分別標(biāo)記為政府?dāng)?shù)據(jù)、行業(yè)數(shù)據(jù)和企業(yè)數(shù)據(jù)；根據(jù)格式，將收集到的數(shù)據(jù)分別標(biāo)記為數(shù)值類數(shù)據(jù)和文本類數(shù)據(jù)；

對收集到的外貿(mào)市場數(shù)據(jù)進(jìn)行預(yù)處理；

計(jì)算數(shù)值類數(shù)據(jù)相應(yīng)的信心指數(shù)；

計(jì)算文本類數(shù)據(jù)相應(yīng)的信心指數(shù)；

根據(jù)政府?dāng)?shù)據(jù)、行業(yè)數(shù)據(jù)和企業(yè)數(shù)據(jù)相應(yīng)的信心指數(shù)，分別計(jì)算政府信心指數(shù)、行業(yè)信心指數(shù)和企業(yè)信心指數(shù)；

根據(jù)政府信心指數(shù)、行業(yè)信心指數(shù)和企業(yè)信心指數(shù)計(jì)算綜合信心指數(shù)；所述綜合信心指數(shù)是政府信心指數(shù)、行業(yè)信心指數(shù)和企業(yè)信心指數(shù)的加權(quán)總和；

根據(jù)綜合信心指數(shù)以及由收集到的數(shù)據(jù)計(jì)算得到的擴(kuò)散指數(shù)，計(jì)算外貿(mào)景氣先行指數(shù)；所述外貿(mào)景氣先行指數(shù)是綜合信心指數(shù)以及由收集到的數(shù)據(jù)計(jì)算得到的擴(kuò)散指數(shù)的加權(quán)總和；

根據(jù)外貿(mào)景氣先行指數(shù)返回外貿(mào)運(yùn)行走勢評估結(jié)果；

所述計(jì)算數(shù)值類數(shù)據(jù)相應(yīng)的信心指數(shù)這一步驟，具體包括：

通過公式計(jì)算數(shù)值類數(shù)據(jù)的擴(kuò)散指數(shù)；式中，Di(t)為t時(shí)刻的擴(kuò)散指數(shù)，X_i(t)為該數(shù)值類數(shù)據(jù)在t時(shí)刻的值，j為時(shí)間差系數(shù)，I[X_i(t)≥X_i(t-j)]為示性函數(shù)；

將計(jì)算得到的擴(kuò)散指數(shù)作為數(shù)值類數(shù)據(jù)相應(yīng)的信心指數(shù)進(jìn)行返回。

2.根據(jù)權(quán)利要求1所述的一種外貿(mào)市場數(shù)據(jù)處理方法，其特征在于，所述對收集到的外貿(mào)市場數(shù)據(jù)進(jìn)行預(yù)處理這一步驟，具體包括：

刪除空缺數(shù)據(jù)和瑕疵數(shù)據(jù)；

對具有相近來源、格式和特征的數(shù)據(jù)進(jìn)行集中；

將具有相近格式的數(shù)據(jù)轉(zhuǎn)換統(tǒng)一為相同的格式。

3.根據(jù)權(quán)利要求1所述的一種外貿(mào)市場數(shù)據(jù)處理方法，其特征在于，所述計(jì)算文本類數(shù)據(jù)相應(yīng)的信心指數(shù)這一步驟，具體包括：

根據(jù)文本類數(shù)據(jù)使用TF-IDF算法計(jì)算得到詞權(quán)值矩陣；

根據(jù)詞權(quán)值矩陣依次使用高斯混合模型進(jìn)行聚類和使用支持向量機(jī)算法進(jìn)行分類，得到分類結(jié)果；

將分類結(jié)果作為信心級別標(biāo)記至相應(yīng)的文本類數(shù)據(jù)；

根據(jù)文本類數(shù)據(jù)各自對應(yīng)的信心級別，使用擴(kuò)散指數(shù)算法計(jì)算相應(yīng)的信心指數(shù)。

4.根據(jù)權(quán)利要求3所述的一種外貿(mào)市場數(shù)據(jù)處理方法，其特征在于，所述根據(jù)文本類數(shù)據(jù)使用TF-IDF算法計(jì)算得到詞權(quán)值矩陣這一步驟，具體包括：

將文本類數(shù)據(jù)分解為至少一個(gè)相互獨(dú)立的文檔；

使用分詞工具對各文檔進(jìn)行處理，然后根據(jù)停用詞庫刪除經(jīng)過處理后的文檔中的停用詞，組建得到多個(gè)分別與各文檔對應(yīng)的詞集合；

使用TF-IDF算法計(jì)算各目標(biāo)詞語在各文檔中的詞頻和逆文本頻率，并根據(jù)詞頻和逆文本頻率計(jì)算相應(yīng)的詞權(quán)值，從而得到多個(gè)分別與各目標(biāo)詞語和各文檔有對應(yīng)關(guān)系的詞權(quán)值向量；

將所述多個(gè)詞權(quán)值向量作為元素組成詞權(quán)值矩陣。

5.根據(jù)權(quán)利要求4所述的一種外貿(mào)市場數(shù)據(jù)處理方法，其特征在于，所述根據(jù)詞權(quán)值矩陣依次使用高斯混合模型進(jìn)行聚類和使用支持向量機(jī)算法進(jìn)行分類這一步驟，具體包括：

將所述詞權(quán)值矩陣輸入到高斯混合模型中，獲得高斯混合模型輸出的聚類結(jié)果；所述聚類結(jié)果為將各文檔分別歸為多個(gè)一級類別；

使用具有至少兩個(gè)分類器的支持向量機(jī)接收所述聚類結(jié)果，獲得支持向量機(jī)輸出的分類結(jié)果；所述聚類結(jié)果為將各一級類別對應(yīng)的文檔進(jìn)一步歸為多個(gè)二級類別；

返回支持向量機(jī)輸出的分類結(jié)果。

6.一種外貿(mào)市場數(shù)據(jù)處理裝置，其特征在于，包括存儲器和處理器，所述存儲器用于存儲至少一個(gè)程序，所述處理器用于加載所述至少一個(gè)程序以執(zhí)行權(quán)利要求1-5任一項(xiàng)所述方法。

7.一種存儲介質(zhì)，其中存儲有處理器可執(zhí)行的指令，其特征在于，所述處理器可執(zhí)行的指令在由處理器執(zhí)行時(shí)用于執(zhí)行如權(quán)利要求1-5任一項(xiàng)所述方法。