999精品在线视频,手机成人午夜在线视频,久久不卡国产精品无码,中日无码在线观看,成人av手机在线观看,日韩精品亚洲一区中文字幕,亚洲av无码人妻,四虎国产在线观看 ?

計算機信息技術存儲平臺的開發與應用

2018-01-17 09:24:43李廷
電子技術與軟件工程 2017年23期
關鍵詞:大數據

摘 要 隨著通信領域的不斷發展,海量數據逐漸產生。對數據加以妥善存儲,已經成為了各行業關注的重點。本文以云存儲及分布式算法為基礎,對計算機信息存儲平臺進行了開發,并對其應用的實現途徑進行了闡述。目的在于提高數據的存儲效率及安全性,提高各領域的數據處理效率。

【關鍵詞】計算機信息技術 云存儲 大數據 分布式算法

計算機信息存儲技術,即以計算機技術為基礎所實現的,以自動化存儲數據為主要功能的技術。提高用戶的數據存儲效率,是改善用戶對技術的應用體驗、提高存儲平臺應用有效性的關鍵。云存儲技術為新型的數據處理技術,將其應用到計算機信息技術存儲平臺的開發過程中,對平臺存儲性能的提升,具有重要價值。

1 計算機信息技術存儲平臺的開發

以云存儲技術以及分布式算法為基礎,開發了計算機信息技術存儲平臺:

1.1 存儲平臺的開發

存儲平臺由客戶端、中心服務器以及接口等構成:

1.1.1 客戶端

多為計算機,是用戶據以處理數據的終端平臺。

1.1.2 中心服務器

功能與服務器類似,可根據用戶的需求做出響應,為用戶提供操作的任務線程。

1.1.3 接口

功能在于為數據的傳輸提供途徑。

1.1.4 集群控制

功能在于對所有的連接進行管理以及封裝。對外,該模塊具有讀寫功能。對內,可通過Hash算法,對節點以及數據的遷移等過程進行管理,提高Redis線程的安全性。

1.1.5 認證碼接口

功能在于為數據的加密以及解密提供存儲以及認證接口。

1.2 基礎數據庫的開發

1.2.1 鍵的開發

(1)將key鍵的長度,控制在128字節之內,降低key鍵所消耗的內存,提高平臺的數據存儲量。

(2)避免key鍵過短,以免含義表達不清晰。

(3)整個平臺中,key值的格式應保持一致。

1.2.2 值的結構設計

(1)可以將值設計成為字符串類型,采用SET等,得到value值。

(2)字符串列表以array List以及Linked list為主。上述兩種列表優勢互補。可根據設計需求及目的,對兩者進行合理選擇。

(3)字符串集合以有序集合為主,存儲值相對固定。

(4)底層存儲:以哈希表為依托,完成底層存儲。

1.3 分布式構架的開發

1.3.1 開發原則

分布式構架的開發,應遵循以下原則:

(1)平衡性:確保可將數據分布到所有的存儲節點,提高存儲平臺應用的平衡性。

(2)單調性:當新的數據進入到存儲平臺中時,應將其映射到新的節點中,提高存儲的單調性,避免數據的存儲發生混亂。

(3)分散性:應盡量降低分散性,提高節點的集群性。

(4)唯一性:相同的key,應映射到相同的服務器當中,確保key與服務器一一對應。

1.3.2 服務器集群設計

(1)連接代理:采用連接代理的方法,確保Redis數據能夠與服務器之間相互溝通。

(2)中心服務器:將平臺與用戶連接,實現人機交互,提高平臺對用戶需求的相應效率。

(3)輔助:確保數據的傳輸以及存儲安全有效。

2 計算機信息技術存儲平臺應用的實現途徑

2.1 基礎功能應用的實現方法

2.1.1 通信功能

存儲平臺通信功能主要包括內應用與外應用兩種。采用epoll將平臺與客戶端相互連接后,通信功能即可實現,用戶即可應用平臺對數據進行存儲。

2.1.2 文件的獲取

該平臺中心服務器中,包含完整的用戶文件。當用戶需要調取文件時,可以通過緩存文件夾尋找。中心服務器可根據用戶的命令作出相應,決定是否為用戶提供數據。

2.2 存儲功能應用的實現方法

存儲功能的實現,需要中心服務器以及底層Redis數據庫聯合作用來完成。當用戶需要存儲數據時,可將數據傳輸至計算機當中。隨后,Jedis會將中心服務器與底層數據庫相連接。如任務鏈表不為空,平臺可隨之執行數據存儲任務,存儲完成后,用戶即可收到反饋信息,實現對平臺存儲功能的應用。

需注意的是,平臺的數據存儲功能如何,受異步回調的影響較大。如上述問題得不到解決,較容易引發數據存儲延遲問題,致使連接超時,數據的存儲無法實現。增加調度代理的數量,是解決上述問題的主要途徑。在調度代理增加的情況下,單點Redis將會為用戶提供單線程的服務,數據的闡述效率,同樣將得到一定的提升。

2.3 數據冗余應用的實現方法

存儲平臺中,數據冗余模塊的功能,與RS碼大致相同,包括編碼與解碼兩種。接口如下:

RS-encode(String file Cache Dir);

RS-dncode(String file Cache Dir,Boolean aLive[]);

編碼的過程,通常需要由服務器完成。鑒于Java編寫較為困難,可采用c代碼實現該過程。中心服務器的執行方法以native為主,執行效果較好,能夠有效提高數據冗余模塊應用的有效性。

2.4 數據加密應用的實現方法

數據加密功能主要包括兩種,一方面在于針對不同類型的文件,進行加密與解密操作。另一方面則在于將認證碼加設到文件中,以認證碼為準,判斷數據是否存在存儲錯誤。上述兩項功能的應用,均需以api為依托來實現。

2.5 應用效果測試

為評估設計效果是否能夠滿足海量數據的存儲需求,采用以下方法對平臺的性能進行了測試:

(1)操作系統為Windows 7,32位。

(2)處理器:Intel(R)。

(3)系統內存3GB。

(4)設計偽代碼。

(5)獲得測試結果如下:加入新節點前,節點A與B的數據遷移量分別為365981與296845。加入新節點后,節點A與B的數據遷移量分別為242639與254813。通過對遷移量的觀察可以發現,節點加入后,負載同樣具有平衡性,提示平臺性能較為穩定。

3 結論

綜上,有關領域應將大數據以及云存儲技術應用到計算機信息技術存儲平臺的開發過程中,提高平臺存儲數據性能的優化性,解決存儲困難的問題。應通過加設認證碼的方法進行數據加密、通過增加調度代理數量的方法,解決存儲延遲問題、通過epoll將平臺與客戶端相互連接、采用c代碼增強數據冗余模塊的功能,改善用戶對平臺的應用體驗。

參考文獻

[1]羅斌.計算機信息技術存儲平臺的開發與應用[J/OL].電子技術與軟件工程,2017(16):159-160.

[2]劉京.計算機信息技術存儲平臺的開發與應用[J/OL].電子技術與軟件工程,2014(16):201-202.

作者簡介

李廷(1976-),男,新疆維吾爾自治區石河子市人。石河子大學計算機科學系2009級計算機信息技術專業大專畢業生,主要研究方向為計算機信息技術。

作者單位

新疆石河子工程技術學校 新疆維吾爾自治區石河子市 832000endprint

猜你喜歡
大數據
基于在線教育的大數據研究
中國市場(2016年36期)2016-10-19 04:41:16
“互聯網+”農產品物流業的大數據策略研究
中國市場(2016年36期)2016-10-19 03:31:48
基于大數據的小微電商授信評估研究
中國市場(2016年35期)2016-10-19 01:30:59
大數據時代新聞的新變化探究
商(2016年27期)2016-10-17 06:26:00
淺談大數據在出版業的應用
今傳媒(2016年9期)2016-10-15 23:35:12
“互聯網+”對傳統圖書出版的影響和推動作用
今傳媒(2016年9期)2016-10-15 22:09:11
大數據環境下基于移動客戶端的傳統媒體轉型思路
新聞世界(2016年10期)2016-10-11 20:13:53
基于大數據背景下的智慧城市建設研究
科技視界(2016年20期)2016-09-29 10:53:22
數據+輿情:南方報業創新轉型提高服務能力的探索
中國記者(2016年6期)2016-08-26 12:36:20
主站蜘蛛池模板: 日韩欧美亚洲国产成人综合| 青青草原国产免费av观看| 日韩午夜片| 国产新AV天堂| 白浆免费视频国产精品视频 | 国产免费好大好硬视频| 中文精品久久久久国产网址| 久久动漫精品| 亚洲综合一区国产精品| 亚洲视频二| 动漫精品中文字幕无码| 欧美色丁香| 久久综合色天堂av| 国产精品自在线天天看片| 亚洲无码视频一区二区三区| 另类专区亚洲| 亚洲人免费视频| 国产日韩AV高潮在线| 天天综合网亚洲网站| 中文字幕在线视频免费| 久久久久久久久亚洲精品| 国产区免费精品视频| 日韩一二三区视频精品| 午夜在线不卡| 国产精品成人观看视频国产| 国内精自视频品线一二区| 日本少妇又色又爽又高潮| 亚洲日本在线免费观看| 最新无码专区超级碰碰碰| 国产精品极品美女自在线看免费一区二区 | 日韩欧美国产精品| 丝袜美女被出水视频一区| 国产欧美日韩专区发布| 91精品伊人久久大香线蕉| 欧美一级高清片欧美国产欧美| 国产黑丝一区| 久久亚洲国产最新网站| 欧美日韩91| 婷婷色狠狠干| 午夜天堂视频| 夜夜爽免费视频| 日本爱爱精品一区二区| 欧美特黄一免在线观看| 久久国产高清视频| 好吊日免费视频| 久久夜色精品国产嚕嚕亚洲av| 国产福利免费观看| 国产午夜福利片在线观看| 麻豆精选在线| 欧美亚洲综合免费精品高清在线观看| 亚洲视频一区| 91色国产在线| 亚洲香蕉久久| 国产精品一区二区在线播放| 成人午夜在线播放| 婷婷综合色| 国产制服丝袜91在线| 日韩精品资源| 亚洲中文字幕国产av| 精品一区二区三区视频免费观看| 蜜臀av性久久久久蜜臀aⅴ麻豆| 女人一级毛片| 国产女同自拍视频| 国产精品99久久久久久董美香| 国产高清不卡| 国产欧美高清| 亚洲av色吊丝无码| 欧美日韩精品在线播放| 精品一区二区久久久久网站| 亚洲精品第五页| 久久精品最新免费国产成人| 国产黄在线免费观看| 97国产一区二区精品久久呦| 国产欧美在线| 亚洲色欲色欲www网| 免费观看欧美性一级| 日韩欧美视频第一区在线观看 | 成人91在线| 国产免费a级片| 亚洲精品在线影院| 亚洲视频影院| 国产打屁股免费区网站|