淺談數(shù)據(jù)整合技術(shù)在水利設(shè)計(jì)中的運(yùn)用

周勇

（廣西恒廣建筑工程有限公司，廣西 南寧 532200）

對于決策開展的分析工作所需的信息均是一些統(tǒng)計(jì)性的內(nèi)容，不過在目前的信息體系之下很是繁瑣。具體原因：第一，開展一個(gè)決定一般要查詢很多信息體系以及外在的體系，而且要開展分析工作，活動量很多，信息的李永興較低，同時(shí)還會發(fā)生一些差錯現(xiàn)象。第二，目前的體系平臺和開發(fā)設(shè)備并不是兼容的，要想直接的獲取此類信息的話很是繁瑣。第三，所有的體系不具有綜合化的接口，也不具有相關(guān)的信息標(biāo)準(zhǔn)和規(guī)定等，所有的數(shù)據(jù)庫是不能夠有效的集成發(fā)展的。第四，開展的統(tǒng)計(jì)分析活動要靠著非常多的歷史內(nèi)容，不過這些內(nèi)容不是很綜合。

1 關(guān)于數(shù)據(jù)資源的探索

1.1 綜合辦公管理數(shù)據(jù)集是實(shí)現(xiàn)人員基礎(chǔ)信息統(tǒng)一管理的基礎(chǔ)數(shù)據(jù)集。主要包括：a.個(gè)人基本信息：包括個(gè)人信息庫等。b.單位基本信息：包括單位基本信息庫、單位所屬分支機(jī)構(gòu)信息庫等。c.參數(shù)信息庫：包括代碼庫、圖表分析生成庫等。

1.2 計(jì)劃經(jīng)營管理數(shù)據(jù)集主要包括：a.市場信息：包括顧客信息資源庫、市場動態(tài)信息庫、競爭對手信息庫等。b.招投標(biāo)管理信息：包括招標(biāo)信息庫、投標(biāo)信息庫、專家信息庫等。c.合同信息：包括合同信息庫、收付款項(xiàng)信息庫、產(chǎn)品交付管理庫等。d.資質(zhì)管理信息：包括資質(zhì)信息庫、資質(zhì)審核庫、資質(zhì)借用管理庫等。

1.3 項(xiàng)目設(shè)計(jì)流程管理數(shù)據(jù)集主要包括：a.項(xiàng)目信息：包括項(xiàng)目立項(xiàng)信息庫、任務(wù)下達(dá)信息庫、項(xiàng)目組人員任命庫等。b.項(xiàng)目任務(wù)分解：包括項(xiàng)目任務(wù)分解資源信息庫、關(guān)鍵路徑控制等。c.網(wǎng)絡(luò)虛擬辦公室：包括項(xiàng)目動態(tài)信息庫、中間成果管理庫、動態(tài)分析庫等。d.產(chǎn)品管理信息：包括產(chǎn)品校審信息庫、成果交付信息庫等。

1.4 圖檔管理數(shù)據(jù)集主要包括：a.歸檔管理信息：包括資料預(yù)歸檔管理庫、資料歸檔管理庫等。b.整編信息：包括檔案整編信息庫等。c.借閱信息：包括人員信息庫、檔案借閱信息庫等。d.電子檔案信息：包括電子檔案授權(quán)庫、電子檔案借閱管理庫等。e.銷檔信息：包括銷毀檔案信息庫、銷毀人員信息庫等。

2 關(guān)于整合的獲取措施

2.1 數(shù)據(jù)庫開發(fā)技術(shù)。利用數(shù)據(jù)庫開發(fā)技術(shù)的數(shù)據(jù)整合主要指利用數(shù)據(jù)庫本身的功能，如觸發(fā)器、PL/SQL存儲過程、DBLINK等功能完成，完成對各個(gè)信息系統(tǒng)所需要數(shù)據(jù)的抽取、查詢和關(guān)聯(lián)等。

所有的整合工藝都具有一些優(yōu)點(diǎn)。第一，能夠適合相同數(shù)據(jù)庫間的信息綜合。第二，花費(fèi)的費(fèi)用不多，通常均是借助于開發(fā)工作者的編程來實(shí)現(xiàn)的，只是要借助于開發(fā)資金。不過它的獲取也存在一定的干擾。第三，不具有較高的擴(kuò)展能力。因?yàn)榫峭ㄟ^人工的模式來開展的編程，它的后續(xù)時(shí)間段的費(fèi)用非常多，尤其是出現(xiàn)變動問題的時(shí)候，要靠著開發(fā)工作者對于代碼進(jìn)行修整。第四，關(guān)于效率。因?yàn)槠渚怯砷_發(fā)商來設(shè)置的，在體系不斷變大的狀態(tài)之中，在面對繁瑣的信息整合事項(xiàng)的時(shí)候，功效無法確保。

2.2 ETL技術(shù)。通過ETL技術(shù)及專業(yè)ETL軟件，即數(shù)據(jù)抽取（Extract）、轉(zhuǎn)換（Transform）、裝載（Load）能將數(shù)據(jù)從原系統(tǒng)數(shù)據(jù)庫經(jīng)過抽取，進(jìn)行轉(zhuǎn)換，最后加載到目標(biāo)數(shù)據(jù)庫，實(shí)現(xiàn)系統(tǒng)數(shù)據(jù)之間的整合。

此技術(shù)有很多的優(yōu)點(diǎn)。第一，效率非常高。ETL軟件相關(guān)的信息抽調(diào)以及加載等的效率十分高，尤其是對那些較大的信息量的分析。第二，完善了數(shù)據(jù)的品質(zhì)。可以結(jié)合多種狀態(tài)來分析信息的品質(zhì)，同時(shí)對于垃圾內(nèi)容清理。第三，擴(kuò)展管控功效。可以經(jīng)由管控頁面等對數(shù)據(jù)抽取策略執(zhí)行制定時(shí)間觸發(fā)方式，對抽取結(jié)果進(jìn)行分析等。第四，多平臺、多數(shù)據(jù)源支持。支持各種平臺、各種數(shù)據(jù)庫系統(tǒng)（如ORACLE、SQLServer等）以及不同版本數(shù)據(jù)庫之間的數(shù)據(jù)抽取。最后，有很多的轉(zhuǎn)換控件，可以開展多種繁瑣的轉(zhuǎn)換活動。不過它也面對很多的不利現(xiàn)象。比如費(fèi)用很多，落實(shí)時(shí)間比較久。

3 關(guān)于整合的落實(shí)

3.1 首要時(shí)期對于信息體系的初始內(nèi)容分析。為了可以更為綜合的分析數(shù)據(jù)內(nèi)容的定義，獲取有關(guān)的文檔內(nèi)容，要對體系的初始內(nèi)容開展分析。此時(shí)期涵蓋了解需要采集的數(shù)據(jù)結(jié)構(gòu)定義和數(shù)據(jù)表之間的設(shè)計(jì)聯(lián)系。例如：我們對包括非電子數(shù)據(jù)、excel格式數(shù)據(jù)及其各種不同數(shù)據(jù)庫格式數(shù)據(jù)進(jìn)行分析。

3.2 其次是設(shè)計(jì)的落實(shí)時(shí)期。為了不干擾初始信息模式的變化和使用，并確保其穩(wěn)定性，此時(shí)期關(guān)鍵是論述數(shù)據(jù)整合信息和方法等的落實(shí)。

3.3 然后是數(shù)據(jù)校驗(yàn)時(shí)期。為了確保不會出現(xiàn)不綜合的或是不正確的內(nèi)容，所以在其運(yùn)作以前的時(shí)候，要設(shè)置綜合化的校驗(yàn)體系，以此來確保生產(chǎn)以及整合信息相同。比如，對于導(dǎo)入的內(nèi)容積極的校對，關(guān)鍵的標(biāo)準(zhǔn)是設(shè)計(jì)方的標(biāo)準(zhǔn)，而且對于得到的信息不斷的分析，關(guān)鍵是經(jīng)由人工法來分析。

3.4 最后是體系上線時(shí)期。把計(jì)算好的整合步驟公開，而且要明確落實(shí)步驟，體系的管控工作者可以經(jīng)由監(jiān)控模式，開展任務(wù)的監(jiān)管工作。結(jié)合規(guī)定，管控工作者還可以將規(guī)劃變更，積極地排列轉(zhuǎn)換要素，進(jìn)而能夠在設(shè)定好的時(shí)間之中開展好全部的活動。

結(jié)語

該項(xiàng)整合活動會將過去的那種以機(jī)構(gòu)和項(xiàng)目為關(guān)鍵點(diǎn)的信息孤島形勢變革，進(jìn)而確保所有的設(shè)計(jì)機(jī)構(gòu)的信息可以整合。之前的部分級別等的一些運(yùn)作體系，會導(dǎo)致所有的項(xiàng)目的技術(shù)不完全的一樣，同樣也會使得其進(jìn)展速率靠著開發(fā)工作者的編碼功效，進(jìn)而導(dǎo)致設(shè)計(jì)機(jī)構(gòu)的功效不是很高。開展了整合工作之后，就可以在設(shè)計(jì)方的自身統(tǒng)一技術(shù)規(guī)定之內(nèi)，積極的體現(xiàn)出團(tuán)隊(duì)的活動性。經(jīng)由從整合而開展的信息移值等，會使得設(shè)計(jì)機(jī)構(gòu)的整合費(fèi)用變低。

[1]蔣東興，劉啟新.數(shù)字校園信息整合之我見[M].北京:清華大學(xué)計(jì)算機(jī)與信息管理中心，2003.

[2]周志達(dá)，徐先傳.數(shù)據(jù)倉庫中數(shù)據(jù)抽取、轉(zhuǎn)換及加載工具研究[J].北京理工大學(xué)學(xué)報(bào)，2003，23（6）:720-723.