大數據技術在煉化企業的應用分析及研究

唐曉平

摘 要 本文首先分析了目前大數據技術在煉化企業應用中出現的問題，然后結合目前大數據技術在煉化企業中的應用問題進行了詳細的總結，煉化企業信息化的發展和工業化的轉變融合是煉化企業發展的主要趨勢，需要提高大數據技術在煉化企業中的應用比重，旨在為煉化企業的發展提供理論保障，同時為提高煉化企業的核心競爭力奠定基石。

關鍵詞 大數據技術；煉化企業；應用

1 目前大數據技術在煉化企業應用中出現的問題

1.1 還沒有形成數據管理模式

目前大數據技術在煉化企業中的應用還處于初級階段，所以在決策者方面還沒有形成系統的數據管理模式，還不能夠利用數據進行理性思維的運用和發展，很多煉化企業在遇到問題還沒有形成針對數據進行理性分析，絕大多數還停留在根據自己的經驗和直覺來解決問題，在解決問題上沒有根據數據之間的關聯性以及邏輯性進行分析，同時在管理方面也沒有依靠數據去進行邏輯思維的分析，僅僅依靠業務驅動管理，所以大數據技術僅僅停留在理論層面，而沒有考慮到實踐方面的問題。

1.2 收集數據缺少非結構化數據

非結構化數據再大數據技術中屬于比較重要的一種數據類型，主要包含的形式有視頻、語音、圖片以及文檔等，但是在目前的煉化企業中，針對大數據的收集與整理主要涉及的是結構化的數據，針對非機構化數據的采集與收集比較匱乏，并且很多文件沒有實行電子化，這就導致數據再保存的過程中容易遺失，然而進行數據的重建需要消耗大量的時間，甚至有些數據可能無法恢復[1]。

1.3 大數據技術相關的信息基礎設施滯后

大數據技術的發展需要依靠相關的信息基礎設施來保障，煉化企業中信息化技術也處于不斷發展的階段，目前在煉化企業中信息基礎設施建設也在不斷發展，但是大數據時代的到來，需要依靠更加先進的基礎設施建設，但是目前針對大數據技術的相關基礎設施建設還比較落后，信息采集設備的傳感器、海量數據信息的存儲都還是目前比較重要的問題，同時針對數據分析的軟件還比較落后，針對數據的儲存還沒有形成規模化的云平臺，這些都導致大數據技術在煉化企業中的發展受到限制。

1.4 大數據技術相關人才缺乏

大數據技術針對人才的綜合素質要求更高，目前煉化企業中的工作人員針對大數據技術的專業知識認識較低，同時針對相關數據處理和分析沒有專業技術能力，煉化企業中缺少能夠對大數據進行分析與管理的復合型人才，所以導致煉化企業中即使收集到海量的數據，但是沒有相關的專業人才能夠對數據進行充分的處理與分析，這就導致大數據技術的發展緩慢。

1.5 數據共享還不能實現

大數據技術在煉化企業中的應用需要依靠大量的數據，這些數據的處理與分析需要許多相關的技術部分和企業的數據，但是目前很對部門或者企業針對自己的信息沒有進行開放，數據還處于保密的階段，所以大數據技術在運用的過程中得不到海量的數據來支撐，這就導致大數據技術不能充分發揮自己的功能，所以大數據技術收集的數據缺乏完整性，數據分析的結果也存在一定的片面化[2]。

2 大數據技術在煉化企業中的應用

2.1 數據庫技術（NoSQL）

傳統的數據庫屬于關系型的數據庫，但是NoSQL主要是指非關系型的數據庫，數據類型屬于非結構化的數據形式，和原來傳統的數據庫相比，這種非結構化的數據庫主要是是根據列的模式來進行數據的存儲，在橫向上具有更高的擴展性，數據可以不用保持一致，但是在結果上需要保持匹配，并且它能夠在很多臺服務器上進行工作，展開工作的形式主要是分布協作，這種數據庫能夠保障多種SQL語言的應用，處理數據的能力比較強。

2.2 分布式并行處理技術（MapReduce）

這種基數主要是將需要解決的問題進行自動分割，將其拆分成map和reduce的形式，map主要是指映射，reduce是指化簡，分割后的數據在Map函數的處理下被映射成許多不同的區塊，然后這些區塊會被分配給計算機中的不同處理節點進行處理，得到一種結果，然后這種結果經過Reduce函數的處理得出最后的結果。這種形式的數據處理能夠將數據進行分割處理，準確性更高。煉化企業利用這種數據技術，能夠在原先服務器和園區網基礎上進行信息化建設成本的有效控制[3]。

2.3 預處理技術（ETL）

大數據的預處理技術主要為了保障數據挖掘的質量以及數據處理的效率，再進行數據的采集之后，需要對數據進行填補、平滑、合并以及規格化的與處理工作，這些數據分散在不同的數據庫系統中，然后通過提取、轉換以及加載數據達到預處理的效果。ETL只要是將數據提取到臨時中間層，然后進行數據的清洗、轉換以及集成工作，最后將數據放到目標數據庫和相對應的文件存儲系統中，這些數據為數據挖掘提供基礎。

2.4 可視化技術

目前大數據在煉化企業中提供的交互方式主要分為五種形式，分別是數據挖掘和統計之間的交互、任意分析和查詢之間的交互、企業報表、立方體分析以及報表分析和預警之間的交互等五種形式，這五種形式的交互的程度和規模上各不相同，C/S架構和B/S架構是大數據可視化技術的數據分析結果展現的兩種形式，在這兩種形式中，C/S更趨向于可操作性，B/S更趨向于智能化，主要是針對管理決策層。在煉化企業的合同管理系統中，面向企業的決策者合同查詢界面就屬于比較靈活多樣的商業智能化形式[4]。

3 結束語

綜上所述，大數據技術在煉化企業的發展過程中占據著重要的位置，特別是大數據技術的相關技術的應用對煉化企業的發展具有重要的意義，但是目前大數據技術在煉化企業的應用中仍然存在較多的問題，所以需要加強對大數據技術的研究與推廣，促進大數據技術在煉化企業發展中的應用，為煉化企業的發展打下堅實的基礎。

參考文獻

[1] 李德芳，蔣白樺，王宏安，等.煉化企業MES體系結構的分析與設計[J].現代化工，2004，24（z2）：48-52.

[2] 姜頑強，張靜淑.GIS在煉化企業廠區外管道安全管理中的應用研究[J].中國管理信息化，2014，（11）：57-58，59.

[3] 韓廣新.大數據技術助力煉化企業智能工廠建設[J].設備管理與維修，2015，（12）：10-12.

[4] 路世忠，朱理琛，蔣白樺，等.煉化企業動力設備的集成維護管理系統研究[J].計算機集成制造系統，2007，13（1）：132-135，146.