本發(fā)明涉及數(shù)據(jù)處理,尤其涉及一種民航物流數(shù)據(jù)交換方法。
背景技術(shù):
1、在民航物流領(lǐng)域中,涉及多個數(shù)據(jù)終端設(shè)備(dte)之間為實(shí)現(xiàn)貨物的追蹤、管理和優(yōu)化而建立的臨時數(shù)據(jù)通信互連通路。數(shù)據(jù)交換的目的不僅在于獲取標(biāo)準(zhǔn)化的物流信息,如貨物的航班號、起降時間、重量及體積等通用數(shù)據(jù),這些數(shù)據(jù)在通用系統(tǒng)架構(gòu)下能夠輕松實(shí)現(xiàn)讀、寫、增、刪等操作。然而,隨著物流業(yè)務(wù)的復(fù)雜化和多樣化,越來越多的非通用數(shù)據(jù)涌現(xiàn)出來,如特定航空公司獨(dú)有的貨物編碼、特殊貨物的處理要求、以及由不同圖形應(yīng)用編輯的貨物照片或示意圖等。因此,在民航物流領(lǐng)域,迫切需要一種高效、靈活的數(shù)據(jù)交換方法,能夠自動識別和處理各種通用及非通用數(shù)據(jù),確保物流信息的準(zhǔn)確傳遞和及時處理,從而提升整個物流鏈路的運(yùn)作效率和客戶滿意度。
2、申請?zhí)枮?02311287788.4的中國發(fā)明專利提供了一種數(shù)據(jù)交換方法以及平臺,獲取待交換數(shù)據(jù)的頭信息,識別用戶需求,選擇數(shù)據(jù)交換區(qū)和對應(yīng)的相關(guān)應(yīng)用程序,每一個數(shù)據(jù)交換區(qū)均生成基礎(chǔ)標(biāo)識文件并與待交換數(shù)據(jù)進(jìn)行對比得到第一基礎(chǔ)標(biāo)識文件,根據(jù)第一基礎(chǔ)標(biāo)識文件確定待交換數(shù)據(jù)的交換對象。
3、但在現(xiàn)有技術(shù)中,數(shù)據(jù)處理流程模式固定,難以適應(yīng)不同數(shù)據(jù)類型的處理需求,尤其在數(shù)據(jù)處理過程中,各交換區(qū)之間的協(xié)同工作依賴于基礎(chǔ)標(biāo)識文件的對比,導(dǎo)致數(shù)據(jù)交換效率低下。
技術(shù)實(shí)現(xiàn)思路
1、本申請通過提供一種民航物流數(shù)據(jù)交換方法,解決了現(xiàn)有技術(shù)中數(shù)據(jù)處理模式固定導(dǎo)致數(shù)據(jù)交換效率低下的問題,實(shí)現(xiàn)了動態(tài)調(diào)整數(shù)據(jù)交換模式,提高數(shù)據(jù)交換效率的技術(shù)效果。
2、本申請?zhí)峁┝艘环N民航物流數(shù)據(jù)交換方法,所述方法包括:
3、s100:接收待交換數(shù)據(jù),建立智能路由模型,根據(jù)所述待交換數(shù)據(jù)信息和歷史信任鏈,選擇數(shù)據(jù)交換路徑和理想交換區(qū),通過自動補(bǔ)正機(jī)制對不完整的待交換數(shù)據(jù)信息進(jìn)行補(bǔ)全驗(yàn)證,形成預(yù)處理數(shù)據(jù)集;
4、s200:建立數(shù)據(jù)轉(zhuǎn)碼引擎接收所述預(yù)處理數(shù)據(jù)集,將預(yù)處理數(shù)據(jù)集轉(zhuǎn)化成目標(biāo)數(shù)據(jù)集;具體包括:識別當(dāng)前理想交換區(qū)的負(fù)載情況,決定最終交換區(qū),將待交換數(shù)據(jù)信息轉(zhuǎn)換為目標(biāo)數(shù)據(jù);使用航空語義網(wǎng)技術(shù)對預(yù)處理數(shù)據(jù)集中剩余數(shù)據(jù)做進(jìn)一步標(biāo)準(zhǔn)化處理形成標(biāo)準(zhǔn)剩余數(shù)據(jù);將目標(biāo)數(shù)據(jù)和標(biāo)準(zhǔn)剩余數(shù)據(jù)封裝成目標(biāo)數(shù)據(jù)集;
5、s300:接收到目標(biāo)數(shù)據(jù)集,按照數(shù)據(jù)交換路徑傳輸?shù)较乱粋鬏敼?jié)點(diǎn)。
6、進(jìn)一步地,所述待交換數(shù)據(jù)信息包括數(shù)據(jù)類型、來源以及數(shù)據(jù)交換需求,所述數(shù)據(jù)交換需求是指需要轉(zhuǎn)換的數(shù)據(jù)格式、接收方信息以及數(shù)據(jù)傳輸條件,所述來源是指上傳方和接收方的地址信息;所述數(shù)據(jù)交換路徑是指數(shù)據(jù)從起始點(diǎn)到目標(biāo)點(diǎn)所經(jīng)過的所有傳輸節(jié)點(diǎn)和連接的序列,所述傳輸節(jié)點(diǎn)是指在所述數(shù)據(jù)交換路徑中的每個實(shí)體;所述預(yù)處理數(shù)據(jù)集包括補(bǔ)全后的待交換數(shù)據(jù)信息、數(shù)據(jù)交換路徑和理想交換區(qū);所述歷史信任鏈?zhǔn)峭ㄟ^企業(yè)信任鏈數(shù)據(jù)庫和信任鏈評估模塊分析得到。
7、進(jìn)一步地,所述企業(yè)信任鏈數(shù)據(jù)庫包括每家企業(yè)的歷史發(fā)送數(shù)據(jù)、接收方反饋數(shù)據(jù)以及數(shù)據(jù)質(zhì)量評估數(shù)據(jù);所述信任鏈評估模塊是根據(jù)歷史數(shù)據(jù)傳輸評估效果對每條所述數(shù)據(jù)交換路徑進(jìn)行信任度評分,選取信任度評分最高的數(shù)據(jù)交換路徑作為歷史信任鏈。
8、進(jìn)一步地,所述自動補(bǔ)正機(jī)制包括地址驗(yàn)證和地址補(bǔ)全,所述地址驗(yàn)證是根據(jù)所有已知的有效地址驗(yàn)證所述待交換數(shù)據(jù)信息中的地址信息,并返回結(jié)果;所述地址補(bǔ)全是對于有效但部分內(nèi)容不完整的地址信息,通過填補(bǔ)方法進(jìn)行補(bǔ)全,并對補(bǔ)全后的地址進(jìn)行二次驗(yàn)證。
9、進(jìn)一步地,所述智能路由模型是以常見交換路徑作為基礎(chǔ)數(shù)據(jù),使用深度神經(jīng)網(wǎng)絡(luò)作為基礎(chǔ)模型進(jìn)行訓(xùn)練;其中,從歷史數(shù)據(jù)交換記錄中收集所有已完成的數(shù)據(jù)交換路徑信息,對于收集到的每條數(shù)據(jù)交換路徑,統(tǒng)計出現(xiàn)頻數(shù);預(yù)先設(shè)定頻率基數(shù)和頻繁度閾值,所述頻繁度閾值是所述頻率基數(shù)與數(shù)據(jù)交換路徑總數(shù)量的乘積;將出現(xiàn)頻數(shù)超過所述頻繁度閾值的路徑視為常見交換路徑。
10、進(jìn)一步地,所在步驟s100中,選擇數(shù)據(jù)交換路徑,還包括:根據(jù)歷史信任鏈為基礎(chǔ)數(shù)據(jù),建立數(shù)據(jù)源檔案庫,結(jié)合當(dāng)前待交換數(shù)據(jù)信息,實(shí)時評估數(shù)據(jù)源檔案庫中各數(shù)據(jù)交換路徑的綜合情況,同時根據(jù)企業(yè)的歷史數(shù)據(jù)交換路徑和需求特性,生成交換路徑優(yōu)先隊列,建立路徑?jīng)_突檢測機(jī)制,實(shí)時監(jiān)控各路徑的使用情況,動態(tài)調(diào)整數(shù)據(jù)交換任務(wù)。
11、進(jìn)一步地,所述數(shù)據(jù)源檔案庫是以企業(yè)為起始點(diǎn),以歷史數(shù)據(jù)交換路徑為發(fā)展線,記錄每個企業(yè)歷史數(shù)據(jù)交換路徑、交換區(qū)、歷史傳輸節(jié)點(diǎn)以及相關(guān)的性能指標(biāo),所述性能指標(biāo)包括使用時間、傳輸速度、安全性。
12、進(jìn)一步地,所述綜合情況包括數(shù)據(jù)交換路徑的實(shí)時負(fù)載、歷史性能、安全性指標(biāo)以及預(yù)估時效性,所述預(yù)估時效性是指每條數(shù)據(jù)交換路徑的總用時、每個傳輸節(jié)點(diǎn)的分別用時和傳輸成功率。
13、進(jìn)一步地,在步驟s200中,建立數(shù)據(jù)轉(zhuǎn)碼引擎還包括,建立動態(tài)適應(yīng)模型,用于對未知數(shù)據(jù)類型進(jìn)行識別,設(shè)置反饋循環(huán),根據(jù)識別結(jié)果設(shè)置轉(zhuǎn)換規(guī)則,并將轉(zhuǎn)換規(guī)則用于更新動態(tài)適應(yīng)模型;進(jìn)一步分析未知數(shù)據(jù)類型的層次結(jié)構(gòu)、字段類型和關(guān)系,以及重復(fù)模式、序列和關(guān)聯(lián)規(guī)則,并解析數(shù)據(jù)結(jié)構(gòu)內(nèi)容,提取結(jié)構(gòu)關(guān)鍵信息;根據(jù)分析結(jié)果,制定將未知數(shù)據(jù)類型轉(zhuǎn)換為標(biāo)準(zhǔn)格式的規(guī)則;并更新航空數(shù)據(jù)語義網(wǎng)絡(luò)。
14、進(jìn)一步地,所述動態(tài)適應(yīng)模型是以隨機(jī)森林算法為基礎(chǔ)算法進(jìn)行構(gòu)建,所述解析數(shù)據(jù)結(jié)構(gòu)內(nèi)容是應(yīng)用自然語言處理技術(shù)進(jìn)行解析,并提取結(jié)構(gòu)關(guān)鍵信息;所述更新航空數(shù)據(jù)語義網(wǎng)絡(luò)是將未知數(shù)據(jù)類型的信息整合到航空數(shù)據(jù)語義網(wǎng)絡(luò)中,具體步驟如下:使用資源描述框架表示新數(shù)據(jù)類型的信息,構(gòu)建rdf三元組,描述數(shù)據(jù)中的實(shí)體、屬性和關(guān)系;將rdf信息添加到航空數(shù)據(jù)語義網(wǎng)絡(luò)中,更新網(wǎng)絡(luò)中的本體和詞匯表,以包含新數(shù)據(jù)類型的相關(guān)概念;使用語義推理工具檢查更新后的語義網(wǎng)絡(luò)的一致性。
15、本申請中提供的一個或多個技術(shù)方案,至少具有如下技術(shù)效果或優(yōu)點(diǎn):
16、通過智能路由模型選擇常見且高效的數(shù)據(jù)交換路徑,減少了數(shù)據(jù)傳輸?shù)难舆t和錯誤率,實(shí)現(xiàn)了提高整體的數(shù)據(jù)交換效率的效果;建立自動補(bǔ)正機(jī)制實(shí)現(xiàn)地址驗(yàn)證和補(bǔ)全,確保地址信息的準(zhǔn)確性和完整性,實(shí)現(xiàn)了快速解決基礎(chǔ)信息問題、提高數(shù)據(jù)處理效率的效果;建立數(shù)據(jù)轉(zhuǎn)碼引擎并使用航空語義網(wǎng)技術(shù)對數(shù)據(jù)進(jìn)行標(biāo)準(zhǔn)化處理,使得不同格式的數(shù)據(jù)能夠互操作,實(shí)現(xiàn)了提高數(shù)據(jù)可用性和價值的效果。
1.一種民航物流數(shù)據(jù)交換方法,其特征在于,所述方法包括:
2.如權(quán)利要求1所述的一種民航物流數(shù)據(jù)交換方法,其特征在于,所述待交換數(shù)據(jù)信息包括數(shù)據(jù)類型、來源以及數(shù)據(jù)交換需求,所述數(shù)據(jù)交換需求是指需要轉(zhuǎn)換的數(shù)據(jù)格式、接收方信息以及數(shù)據(jù)傳輸條件,所述來源是指上傳方和接收方的地址信息;所述數(shù)據(jù)交換路徑是指數(shù)據(jù)從起始點(diǎn)到目標(biāo)點(diǎn)所經(jīng)過的所有傳輸節(jié)點(diǎn)和連接的序列,所述傳輸節(jié)點(diǎn)是指在所述數(shù)據(jù)交換路徑中的每個實(shí)體;所述預(yù)處理數(shù)據(jù)集包括補(bǔ)全后的待交換數(shù)據(jù)信息、數(shù)據(jù)交換路徑和理想交換區(qū);所述歷史信任鏈?zhǔn)峭ㄟ^企業(yè)信任鏈數(shù)據(jù)庫和信任鏈評估模塊分析得到。
3.如權(quán)利要求2所述的一種民航物流數(shù)據(jù)交換方法,其特征在于,所述企業(yè)信任鏈數(shù)據(jù)庫包括每家企業(yè)的歷史發(fā)送數(shù)據(jù)、接收方反饋數(shù)據(jù)以及數(shù)據(jù)質(zhì)量評估數(shù)據(jù);所述信任鏈評估模塊是根據(jù)歷史數(shù)據(jù)傳輸評估效果對每條所述數(shù)據(jù)交換路徑進(jìn)行信任度評分,選取信任度評分最高的數(shù)據(jù)交換路徑作為歷史信任鏈。
4.如權(quán)利要求1所述的一種民航物流數(shù)據(jù)交換方法,其特征在于,所述自動補(bǔ)正機(jī)制包括地址驗(yàn)證和地址補(bǔ)全,所述地址驗(yàn)證是根據(jù)所有已知的有效地址驗(yàn)證所述待交換數(shù)據(jù)信息中的地址信息,并返回結(jié)果;所述地址補(bǔ)全是對于有效但部分內(nèi)容不完整的地址信息,通過填補(bǔ)方法進(jìn)行補(bǔ)全,并對補(bǔ)全后的地址進(jìn)行二次驗(yàn)證。
5.如權(quán)利要求1所述的一種民航物流數(shù)據(jù)交換方法,其特征在于,所述智能路由模型是以常見交換路徑作為基礎(chǔ)數(shù)據(jù),使用深度神經(jīng)網(wǎng)絡(luò)作為基礎(chǔ)模型進(jìn)行訓(xùn)練;其中,從歷史數(shù)據(jù)交換記錄中收集所有已完成的數(shù)據(jù)交換路徑信息,對于收集到的每條數(shù)據(jù)交換路徑,統(tǒng)計出現(xiàn)頻數(shù);預(yù)先設(shè)定頻率基數(shù)和頻繁度閾值,所述頻繁度閾值是所述頻率基數(shù)與數(shù)據(jù)交換路徑總數(shù)量的乘積;將出現(xiàn)頻數(shù)超過所述頻繁度閾值的路徑視為常見交換路徑。
6.如權(quán)利要求1所述的一種民航物流數(shù)據(jù)交換方法,其特征在于,所在步驟s100中,選擇數(shù)據(jù)交換路徑,還包括:根據(jù)歷史信任鏈為基礎(chǔ)數(shù)據(jù),建立數(shù)據(jù)源檔案庫,結(jié)合當(dāng)前待交換數(shù)據(jù)信息,實(shí)時評估數(shù)據(jù)源檔案庫中各數(shù)據(jù)交換路徑的綜合情況,同時根據(jù)企業(yè)的歷史數(shù)據(jù)交換路徑和需求特性,生成交換路徑優(yōu)先隊列,建立路徑?jīng)_突檢測機(jī)制,實(shí)時監(jiān)控各路徑的使用情況,動態(tài)調(diào)整數(shù)據(jù)交換任務(wù)。
7.如權(quán)利要求6所述的一種民航物流數(shù)據(jù)交換方法,其特征在于,所述數(shù)據(jù)源檔案庫是以企業(yè)為起始點(diǎn),以歷史數(shù)據(jù)交換路徑為發(fā)展線,記錄每個企業(yè)歷史數(shù)據(jù)交換路徑、交換區(qū)、歷史傳輸節(jié)點(diǎn)以及相關(guān)的性能指標(biāo),所述性能指標(biāo)包括使用時間、傳輸速度、安全性。
8.如權(quán)利要求6所述的一種民航物流數(shù)據(jù)交換方法,其特征在于,所述綜合情況包括數(shù)據(jù)交換路徑的實(shí)時負(fù)載、歷史性能、安全性指標(biāo)以及預(yù)估時效性,所述預(yù)估時效性是指每條數(shù)據(jù)交換路徑的總用時、每個傳輸節(jié)點(diǎn)的分別用時和傳輸成功率。
9.如權(quán)利要求1所述的一種民航物流數(shù)據(jù)交換方法,其特征在于,在步驟s200中,建立數(shù)據(jù)轉(zhuǎn)碼引擎還包括,建立動態(tài)適應(yīng)模型,用于對未知數(shù)據(jù)類型進(jìn)行識別,設(shè)置反饋循環(huán),根據(jù)識別結(jié)果設(shè)置轉(zhuǎn)換規(guī)則,并將轉(zhuǎn)換規(guī)則用于更新動態(tài)適應(yīng)模型;進(jìn)一步分析未知數(shù)據(jù)類型的層次結(jié)構(gòu)、字段類型和關(guān)系,以及重復(fù)模式、序列和關(guān)聯(lián)規(guī)則,并解析數(shù)據(jù)結(jié)構(gòu)內(nèi)容,提取結(jié)構(gòu)關(guān)鍵信息;根據(jù)分析結(jié)果,制定將未知數(shù)據(jù)類型轉(zhuǎn)換為標(biāo)準(zhǔn)格式的規(guī)則;并更新航空數(shù)據(jù)語義網(wǎng)絡(luò)。
10.如權(quán)利要求9所述的一種民航物流數(shù)據(jù)交換方法,其特征在于,所述動態(tài)適應(yīng)模型是以隨機(jī)森林算法為基礎(chǔ)算法進(jìn)行構(gòu)建,所述解析數(shù)據(jù)結(jié)構(gòu)內(nèi)容是應(yīng)用自然語言處理技術(shù)進(jìn)行解析,并提取結(jié)構(gòu)關(guān)鍵信息;所述更新航空數(shù)據(jù)語義網(wǎng)絡(luò)是將未知數(shù)據(jù)類型的信息整合到航空數(shù)據(jù)語義網(wǎng)絡(luò)中,具體步驟如下:使用資源描述框架表示新數(shù)據(jù)類型的信息,構(gòu)建rdf三元組,描述數(shù)據(jù)中的實(shí)體、屬性和關(guān)系;將rdf信息添加到航空數(shù)據(jù)語義網(wǎng)絡(luò)中,更新網(wǎng)絡(luò)中的本體和詞匯表,以包含新數(shù)據(jù)類型的相關(guān)概念;使用語義推理工具檢查更新后的語義網(wǎng)絡(luò)的一致性。