羅俊博 林 珠 陳樹敏
(1.廣東省科技基礎條件平臺中心,廣東 廣州 510033;2.廣東省高性能計算重點實驗室,廣東 廣州 510033)
互聯網+區域物流信息平臺系統建設技術研究
羅俊博1,2林珠1,2陳樹敏1,2
(1.廣東省科技基礎條件平臺中心,廣東廣州510033;2.廣東省高性能計算重點實驗室,廣東廣州510033)
隨著互聯網+的到來,區域物流信息平臺建設也進入新一輪的升級改造。本文通過對并行計算技術、hadoop開源平臺等新技術應用進行探討,對互聯網+區域物流信息平臺系統建設技術進行研究,闡述了平臺的設計、架構、安全、功能和數據等幾個方面的內容。
互聯網+;區域物流;并行計算;Hadoop
在全球新一輪科技革命和產業變革中,互聯網與各領域的融合發展具有廣闊前景和無限潛力,已成為不可阻擋的時代潮流,正對各國經濟社會發展產生著戰略性和全局性的影響?!盎ヂ摼W+”把互聯網的創新成果與經濟社會各領域進行深度融合,推動著技術的進步、效率的提升和組織的變革,形成更廣泛的以互聯網為基礎設施和創新要素的經濟社會發展新形態?;ヂ摼W+區域物流信息平臺的建設,互聯網進入物流,推動物流的效率提升和管理優化,形成物流服務標準化,物流標準系統化,物流系統網絡化,推動區域物流走向新的層面。
互聯網正在加速與物流行業的融合,結合互聯網和物流行業的各自優勢,創新行業業態和產業?!盎ヂ摼W+”,信息技術與傳統產業的相互融合,數據量與日俱增,通過提高單個處理器的運算速度和采用傳統的串行計算技術已難以勝任,并行計算機及其并行計算技術應用而生,運用云計算、大數據、物聯網、移動互聯等信息技術,整合物流資源,升級制造業、商貿業、物流業等傳統產業,實現物品從生產地到消費者手上的準確、快速的轉移全過程。
根據區域物流公共信息需求,結合互聯網+的概念,充分運用廣泛的互聯網、物聯網基礎設施,采用云計算、大數據、并行計算、Hadoop平臺等技術,利用各種智能終端、APP應用,搭建互聯網+區域物流信息平臺,對物流狀態進行控制和有效管理,互聯網+區域物流信息平臺系統設計應分為區域物流管理核心系統、區域物流管理擴展系統、區域物流管理系統三個層次,建立一個以電子物流為目的,對需求信息和物流源進行全面整合,實現以物流業務管理以及海關EDI數據交換為核心,擴展運輸管理的功能,以及電子通關信息流的全面整合,并以最優的資源配置滿足一體化物流需要的區域物流信息平臺解決方案。
針對區域物流信息平臺的總體目標,利用J2EE平臺,采用B/S技術和成熟通用的建模工具,以實現規范、靈活的物流管理為重點,基于互聯網+,在區域物流業務的基礎之上,以物流管理為核心,擴展財務管理、運輸管理、簡單加工以及基于Web的客戶服務,對數據進行分析、統計、挖掘,實現互聯網+區域物流信息平臺,平臺的系統架構如圖1所示。

圖1 系統架構圖
為保證各業務系統數據安全,防止非法用戶進入,以及合法用戶執行非法行為,保證只有合法用戶才能執行授權的數據交換模塊,平臺為用戶提供了多種遠程用戶認證方式。用戶可根據業務系統的具體安全性需求,選擇是否啟用遠程用戶認證及采用的認證方式,系統可根據遠程用戶和口令進行合法性檢測,并根據用戶身份確定訪問權限,也可根據需求自定義遠程用戶認證事件,制訂適用于本系統的特殊用戶認證需求融合業界先進的加密技術,保證數據傳輸安全。
基于JAAS機制,通過用戶+角色+權限(user+role+ privilege)實現了三個層面的權限訪問控制。
第一層面:對登錄系統的用戶的模塊訪問權的控制,如果用戶沒有權限,則不顯示相應的模塊。
第二層面:對界面上的原子操作的控制,如果登錄用戶對界面的某些功能操作無權限,則不顯示相應的功能。
第三個層面:對數據存儲的權限控制,如果用戶通過非法途徑獲得URL登錄系統某個界面進行操作,在數據提交時,系統對提交用戶進行權限檢查,如果用戶沒有權限,則不允許提交。
網絡結構如圖2所示。

圖2 網絡結構圖
針對區域物流業務,滿足當前物流業務的需要,考慮系統的擴展性。把人工操作自動化,減少操作次數,減少工作量,并避免由于人為操作造成錯誤,使工作效率得到大大提高,降低公司運營成本;以物流管理以及海關EDI數據交換為核心,擴展了運輸管理;增加財務管理、客戶服務模塊;增強基本信息管理、統計查詢功能;增加系統的靈活性、全面性和安全性等,形成六大子平臺。
5.1公眾信息服務平臺
物流區域內的管理系統,使物流信息在區內暢通地流動從而得到充分的利用,提高區域物流運作效率。連接區域物流企業、物流運作設施以及政府管理部門與相關職能部門的信息系統,是區域物流信息資源的匯集中心,也是國內外了解區域物流資源的窗口。以網絡業務管理、信息交換和信息共享為支撐,其總體功能為:公用信息的及時交換和共享,智能化實時事務處理,安全認證支持,供應鏈管理中的信息交換樞紐。
5.2電子交易平臺
物流信息化的一個重要內容是使物流交易電子化、網絡化,電子商務技術的發展使其成為可能,促進物流信息資源和物流生產資源的整合。電子交易平臺為物流區域建立一個綜合、開放的B2B、B2C物流電子商務環境,為供方和需方提供一個虛擬交易市場,雙方可發布和查詢供需信息,在線洽談,交易系統可以為雙方進行交易撮合。
5.3物流業務應用托管平臺
通過物流業務應用托管平臺對物流業務進行有效管理和跟蹤。該平臺的總體功能包括:物流服務全過程的電子化管理;全方位的客戶關系管理;智能化實時事務處理和緊急事件處理;物流服務全過程監控、調度和管理;為各個物流企業提供一定標準的接口,并提供可重新組合的功能模塊;信息充分交互和共享,減少因信息不對稱造成的時間延誤和其它損失;合理整合和調度區域內一切物流資源,提高設備使用率等。
5.4協同辦公平臺
提供政務協同辦公和辦公自動化功能,對物流區域內工作人員的辦公、人事及資產進行電子化、智能化管理,優化業務流程,加強業務伙伴間的協作,優化供應鏈。
5.5電子通關平臺
利用現代信息技術建立公共數據中心,由各部門將所管理的進出口業務信息流、資金流、貨物流電子底賬數據存放在集中式的公共數據庫中,為各行業的管理機關提供跨部門、跨行業聯網數據核查,并為企業提供在網上辦理各種進出口業務的信息系統。
5.6系統管理平臺
包括用戶管理、安全管理、數據管理等功能。平臺采用多框架和表單相互嵌套的形式實現,使得界面的組合層次分明和靈活。采取局部刷新的處理方法,加快了界面的刷新速度。系統的模塊通過數據表存儲進行管理,樹菜單顯示的模塊內容根據用戶的權限動態實現增減。
6.1數據并行處理技術
對于單機多核的并行計算,可采用基于線程的OpenMP和Java的并行編程模型,OpenMP(Open Multi-Processing)是一套支持跨平臺共享內存方式的多線程并發的編程API,通過并行化處理提高計算速度;對于多主機超級計算機集群,可采用基于進程的MPI技術,MP(IMessage Passing Interface,消息傳遞接口)具有標準化、可移植性、可用性、函數行等優點。
6.2數據格式轉換
公眾信息服務平臺需要處理大量的數據,而這些數據來自各相關行業、各類物流企業和政府相關部門的各類異構的信息系統,平臺數據的存儲建設是數據處理的關鍵環節。對關鍵數據進行格式轉換,以便統一處理。數據交換平臺將擔負起物流信息系統中公共信息的標準化和規范化定義、采集、處理、組織和存儲,為物流企業提供“一站式”接入服務。
支持TCP/IP、HTTP、SMTP、JMS、FTP、WEB SERVICE等各種同步和網絡協議,并支持專用的通訊協議,如無線同步。同步技術通過LAN和公共網絡支持無線同步,實現企業信息的準實時訪問。對于手持設備,支持特殊的協議,包括SMS等。數據交換平臺提供了MODEM、ISDN、DDN、無線等多種通信方式,保證業務系統的數據交換不受限于具體的通信狀況和網絡帶寬。區域物流信息平臺支持各類平臺和數據源之間的信息共享和交互,可自動實現Sybase ASE、Oracle、SQL Server、Informix、DB2等各種主流數據庫之間的數據轉換和交互,該轉換過程對用戶和應用透明。支持不同國際標準的媒體格式數據轉換如EXCEL、EDI、EDI X12、OBJECT等。各應用系統在通過平臺進行數據交互時,只需考慮交換數據的內容、類型和格式,而無須考慮異構平臺、數據庫之間的差異。采用了XML技術進行數據處理和數據交換,如圖3所示。

圖3 數據交換平臺體系結構
6.3大數據文件系統
隨著各種類型數據的不斷增長,傳統的數據存儲已對數據的處理速度帶來影響,通過建立大數據文件系統,形成數據湖,數據統一放置在數據湖里,保持數據的原始性,每個用戶可建立自己的數據湖,以需求為驅動,盡可能獲取多的數據。數據采集通過實時、微批處理、批處理采集,通過集中管理,采用hadoop開源平臺,處理非結構化數據,實現靈活操作。數據湖對結構化和非結構化的信息進行分析,將非結構化信息映射到結構化數據上,方便用戶可對數據查看和使用。
本文對互聯網+區域物流信息平臺建設進行探索,就平臺的設計和建設等方面結合目前流行的新技術進行了技術研究和探討,以實施區域物流工程,提升物流倉儲的智能化水平和效率,降低物流成本,促進物流行業的快速發展。希望在互聯網+的未來,本文可以給讀者在區域物流信息平臺技術建設方面提供借鑒和參考。
[1]姜輝,王煉.公共物流信息服務平臺研究.交通與計算機,2003 (6):71-72.
[2]王喜富,申金升,關偉.區域性現代物流公共信息平臺系統框架研究[J].物流技術,2006(1):77-78.
[3]程盛芳.基于面向知識管理的中小企業信息化建設策略[J].技術與市場,2008(12):11-12.
[4]J.Xiang,Y.Zhang,and T.SKeie,”Medium access control protocols in congnitive radio networks”,Wireless Commun.Mob.Comput.,Vol.10,2010(1):31-49.
[5]楊霞,何剛,劉德傳,等.物聯網公共信息平臺建設研究[J].合作經濟與科技,2012(7):10-11.
[6]工業和信息化部.物聯網"十二五"發展規劃[Z].
[7]尹釗.新經濟形勢下G物流企業運營模式創新的實踐研究[D].云南師范大學,2014.
[8]楊洋,李菁菁,王慶官.PBS作業調度研究[J].蘇州大學學報,2009,25(1):42-46.
[9]陳樹敏,羅俊博,陳青.并行計算技術的幾種實現方式研究[J].計算機技術與發展,2015(9):174-177.
Research on Technologies of Regional Logistics Information Platform System
Luo Junbo1,2Lin Zhu1,2Chen Shumin1,2
(1.Guangdong Science&Technology Infrastructure Center,Guangzhou 510033,Guangdong; 2.Guangdong Provincial Key Laboratory of High Performance Computing,Guangzhou 510033,Guangdong)
With the arrival of Internet+,the construction of regional logistics information platform has entered a new round of upgrading and transformation.This paper discusses on the applications of parallel computing technology and Hadoop open source platform,researches on the technology of Internet+regional logistics information platform system construction,and expounds the design,architecture,security,function and data of the platform.
Internet+;regional logistics;parallel computing;Hadoop
F250
A
1008-6609(2016)06-0023-04
羅俊博,女,湖北荊門人,研究生,工程師,項目管理師,研究方向:信息化系統建設管理,科技資源開放共享,科技基礎條件平臺建設。
廣東省科研設施與儀器網絡管理平臺建設,項目編號:粵財教[2016]105號。