[發(fā)明專利]一種AIS數(shù)據(jù)處理方法及系統(tǒng)

在審

• 申請(qǐng)?zhí)枺?/td>: 202111252885.0
• 申請(qǐng)日: 2021-10-27
• 公開(kāi)（公告）號(hào): CN114090555A
• 公開(kāi)（公告）日: 2022-02-25
• 發(fā)明（設(shè)計(jì)）人: 王樂(lè)凱;袁小平;孔憲聰;穆珂
• 申請(qǐng)（專利權(quán)）人: 北明成功軟件(山東)有限公司
• 主分類號(hào): G06F16/215
• 分類號(hào): G06F16/215;G06F16/25;G06F16/182
• 代理公司: 北京紐樂(lè)康知識(shí)產(chǎn)權(quán)代理事務(wù)所(普通合伙) 11210
• 代理人: 張朝元

1.一種AIS數(shù)據(jù)處理方法，其特征在于，包括：

采集AIS數(shù)據(jù)，并將采集的所有AIS數(shù)據(jù)寫入到消息隊(duì)列，形成AIS數(shù)據(jù)消息；其中，所述AIS數(shù)據(jù)包括AIS轉(zhuǎn)發(fā)數(shù)據(jù)、AIS實(shí)時(shí)數(shù)據(jù)、AIS歷史數(shù)據(jù)；

對(duì)所述AIS數(shù)據(jù)消息進(jìn)行分析，判斷AIS數(shù)據(jù)消息中的數(shù)據(jù)是否存在異常，并在判斷結(jié)果為AIS數(shù)據(jù)消息中的數(shù)據(jù)存在異常的情況下，對(duì)AIS數(shù)據(jù)消息中的數(shù)據(jù)進(jìn)行異常去除處理；

對(duì)異常去除處理后的AIS數(shù)據(jù)消息進(jìn)行解碼，并根據(jù)預(yù)置匹配規(guī)則對(duì)解碼后得到的AIS數(shù)據(jù)進(jìn)行匹配，形成AIS基礎(chǔ)數(shù)據(jù)、AIS位置數(shù)據(jù)、AIS數(shù)據(jù)歷史數(shù)據(jù)；

根據(jù)得到的AIS基礎(chǔ)數(shù)據(jù)、AIS位置數(shù)據(jù)、AIS數(shù)據(jù)歷史數(shù)據(jù)，通過(guò)預(yù)置的數(shù)據(jù)挖掘框架，建立AIS數(shù)據(jù)計(jì)算基礎(chǔ)模型；

將AIS基礎(chǔ)數(shù)據(jù)、AIS位置數(shù)據(jù)、AIS數(shù)據(jù)歷史數(shù)據(jù)以及AIS數(shù)據(jù)計(jì)算基礎(chǔ)模型通過(guò)索引分布式文件存儲(chǔ)形式存在至數(shù)據(jù)庫(kù)，形成結(jié)構(gòu)化AIS數(shù)據(jù)庫(kù)。

2.根據(jù)權(quán)利要求1所述的AIS數(shù)據(jù)處理方法，其特征在于，還包括：

在采集的所有AIS數(shù)據(jù)寫入到消息隊(duì)列之前，對(duì)采集的所有AIS數(shù)據(jù)進(jìn)行數(shù)據(jù)格式處理，促使所有AIS數(shù)據(jù)的格式為預(yù)置數(shù)據(jù)格式，并備份所有AIS數(shù)據(jù)；

在對(duì)所有的AIS數(shù)據(jù)進(jìn)行數(shù)據(jù)格式處理之后，對(duì)AIS實(shí)時(shí)數(shù)據(jù)進(jìn)行時(shí)間戳判斷；

并在判斷結(jié)果為AIS實(shí)時(shí)數(shù)據(jù)不具備時(shí)間戳的情況下，在AIS實(shí)時(shí)數(shù)據(jù)中寫入時(shí)間戳。

3.根據(jù)權(quán)利要求1所述的AIS數(shù)據(jù)處理方法，其特征在于，對(duì)所述AIS數(shù)據(jù)消息進(jìn)行分析，判斷AIS數(shù)據(jù)消息中的數(shù)據(jù)是否存在異常，并在判斷結(jié)果為AIS數(shù)據(jù)消息中的數(shù)據(jù)存在異常的情況下，對(duì)AIS數(shù)據(jù)消息中的數(shù)據(jù)進(jìn)行異常去除處理包括：

對(duì)AIS數(shù)據(jù)消息中的數(shù)據(jù)，進(jìn)行報(bào)文規(guī)則分析，判斷AIS數(shù)據(jù)消息中的數(shù)據(jù)報(bào)文規(guī)則是否正確，并在判斷結(jié)果為錯(cuò)誤的情況下，刪除對(duì)應(yīng)的數(shù)據(jù)，其中，所述報(bào)文規(guī)則包括報(bào)文長(zhǎng)度規(guī)則、報(bào)文項(xiàng)目規(guī)則、報(bào)文內(nèi)容格式規(guī)則；

對(duì)AIS數(shù)據(jù)消息中的數(shù)據(jù)，進(jìn)行數(shù)據(jù)時(shí)隙分析，判斷AIS數(shù)據(jù)消息中的每個(gè)數(shù)據(jù)是否為單條報(bào)文數(shù)據(jù)；并在判斷結(jié)果為否的情況下，繼續(xù)對(duì)該數(shù)據(jù)進(jìn)行分析，確定該數(shù)據(jù)是否為數(shù)據(jù)時(shí)隙中的第一條報(bào)文數(shù)據(jù)，若是，則創(chuàng)建數(shù)據(jù)等待隊(duì)列，若不是，則將該數(shù)據(jù)追加到數(shù)據(jù)等到隊(duì)列，并在數(shù)據(jù)等到隊(duì)列中所有時(shí)隙數(shù)據(jù)全部完成后，根據(jù)數(shù)據(jù)時(shí)隙對(duì)數(shù)據(jù)進(jìn)行融合，形成完整的單條報(bào)文數(shù)據(jù)；

對(duì)AIS數(shù)據(jù)消息中的數(shù)據(jù)，進(jìn)行數(shù)據(jù)重復(fù)分析，判斷AIS數(shù)據(jù)消息中的數(shù)據(jù)是否存在重復(fù)數(shù)據(jù)；并在判斷結(jié)果為是的情況下，對(duì)重復(fù)的數(shù)據(jù)進(jìn)行刪除處理。

4.據(jù)權(quán)利要求3所述的AIS數(shù)據(jù)處理方法，其特征在于，對(duì)AIS數(shù)據(jù)消息中的數(shù)據(jù)，進(jìn)行數(shù)據(jù)重復(fù)分析，判斷AIS數(shù)據(jù)消息中的數(shù)據(jù)是否存在重復(fù)數(shù)據(jù)包括：

將AIS數(shù)據(jù)消息中的數(shù)據(jù)存儲(chǔ)至預(yù)置內(nèi)存數(shù)據(jù)表；并在單位時(shí)間內(nèi)，從預(yù)置內(nèi)存數(shù)據(jù)表中取出對(duì)應(yīng)數(shù)據(jù)；

將對(duì)AIS數(shù)據(jù)消息中的后續(xù)數(shù)據(jù)存儲(chǔ)至所述內(nèi)存數(shù)據(jù)表，并將后續(xù)數(shù)據(jù)與內(nèi)存數(shù)據(jù)表中所記錄的數(shù)據(jù)進(jìn)行比對(duì)，在比對(duì)結(jié)果為具有相同數(shù)據(jù)的情況下，判斷該數(shù)據(jù)為重復(fù)數(shù)據(jù)。

5.根據(jù)權(quán)利要求1所述的AIS數(shù)據(jù)處理方法，其特征在于，根據(jù)預(yù)置匹配規(guī)則對(duì)解碼后得到的AIS數(shù)據(jù)進(jìn)行匹配，形成AIS基礎(chǔ)數(shù)據(jù)、AIS位置數(shù)據(jù)、AIS數(shù)據(jù)歷史數(shù)據(jù)包括：

通過(guò)遠(yuǎn)程字典匹配規(guī)則，將解碼后得到的AIS數(shù)據(jù)根據(jù)靜態(tài)船舶數(shù)據(jù)、船舶位置信息數(shù)據(jù)以及船舶歷史數(shù)據(jù)，匹配分類為AIS基礎(chǔ)數(shù)據(jù)、AIS位置數(shù)據(jù)、AIS數(shù)據(jù)歷史數(shù)據(jù)；

并對(duì)匹配分后的AIS基礎(chǔ)數(shù)據(jù)、AIS位置數(shù)據(jù)、AIS數(shù)據(jù)歷史數(shù)據(jù)，單獨(dú)采用遠(yuǎn)程字典匹配規(guī)則進(jìn)行內(nèi)部重復(fù)數(shù)據(jù)匹配，并對(duì)應(yīng)的重復(fù)數(shù)據(jù)進(jìn)行去重處理。