大數(shù)據(jù)環(huán)境下云媒資具體應(yīng)用與存儲(chǔ)技術(shù)探討

徐愷俐

（浙江廣播電視集團(tuán)，浙江 杭州 310000）

在目前的發(fā)展階段中，很多媒體企業(yè)都在建設(shè)“云媒資庫”，云媒資就是其中的重要組成部分，這一新事物的出現(xiàn)會(huì)改變媒資內(nèi)容的存儲(chǔ)模式，同時(shí)也會(huì)改變以往媒資只應(yīng)用于內(nèi)部的傳統(tǒng)。云媒資的出現(xiàn)會(huì)為媒體企業(yè)提供媒資直接面向大眾的機(jī)會(huì)，同時(shí)這也代表著傳統(tǒng)編輯理念的轉(zhuǎn)變。

一、大數(shù)據(jù)環(huán)境下云媒資及存儲(chǔ)技術(shù)的具體應(yīng)用

（一）混合云技術(shù)云媒資系統(tǒng)及存儲(chǔ)的具體應(yīng)用

在大數(shù)據(jù)環(huán)境下，云媒資的具體應(yīng)用比較突出的是基于混合云的云媒資儲(chǔ)存平臺(tái)，平臺(tái)的具體構(gòu)成有數(shù)據(jù)加密、公有云、私有云。

1.數(shù)據(jù)加密

數(shù)據(jù)加密的過程就是私有云上載到共有云的過程。以混合云云媒資儲(chǔ)存平臺(tái)為基礎(chǔ)，專業(yè)的數(shù)據(jù)加密模塊完成數(shù)據(jù)加密工作。該功能模塊的加密方式有兩種，一種是運(yùn)用RSA算法的視頻數(shù)據(jù)完成加密工作，另外一種處理方式是基于I幀的選擇性CP-ABE加密算法。前者在為視頻數(shù)據(jù)加密的工作中很有優(yōu)勢(shì)，而且安全性非常強(qiáng)。但是該算法也有一定弱勢(shì)，就是與第二種算法相比傳輸速度和運(yùn)算速度相對(duì)較慢。基于I幀的選擇性CP-ABE加密算法在關(guān)鍵數(shù)據(jù)加密方面有一定優(yōu)勢(shì)，不僅傳輸速度快，而且運(yùn)算速度也非常快。但是該處理方式也有一定劣勢(shì)，就是安全性略低，但是也能較大程度保證關(guān)鍵數(shù)據(jù)的安全。

2.公有云

通常情況下，公有云由第三方提供。通過Internet就能使用公有云，公有云可能是免費(fèi)的，成本也比較低廉。相應(yīng)的公有云的性能水平也不太高。在國(guó)內(nèi)媒體行業(yè)比較特殊，對(duì)云儲(chǔ)存有較高的功能和性能要求。因此媒體企業(yè)應(yīng)用公有云需要選擇與大型的云服務(wù)提供商合作。

3.私有云

私有云是混合云云媒資存儲(chǔ)平臺(tái)的關(guān)鍵構(gòu)成部分，會(huì)在企業(yè)內(nèi)部構(gòu)架屬于企業(yè)的私有云資源，具體的組成部分有數(shù)據(jù)挖掘系統(tǒng)和分布式儲(chǔ)存系統(tǒng)。數(shù)據(jù)挖掘系統(tǒng)的主要工作是管理媒資的數(shù)據(jù)熱點(diǎn)和生命周期。管理的重要內(nèi)容是基于大數(shù)據(jù)技術(shù)的熱點(diǎn)素材識(shí)別。分布式儲(chǔ)存系統(tǒng)的組成是數(shù)據(jù)管理和磁盤陣列。對(duì)于媒體企業(yè)來說，私有云能夠更好滿足大數(shù)據(jù)環(huán)境下的媒體資源儲(chǔ)存需要。

（二）Nutanix平臺(tái)云媒資儲(chǔ)存系統(tǒng)的具體應(yīng)用

1.集群共享

Nutanix平臺(tái)是虛擬計(jì)算平臺(tái)，能夠用來高度集成存儲(chǔ)網(wǎng)絡(luò)資源，該平臺(tái)使用融合式架構(gòu)，實(shí)現(xiàn)在單一的設(shè)備中將本地存儲(chǔ)和計(jì)算資源有效整合。此項(xiàng)功能會(huì)很好滿足網(wǎng)站云儲(chǔ)存需要。在系統(tǒng)的每個(gè)服務(wù)節(jié)點(diǎn)中，都有VM控制器、VM監(jiān)控程序，由此系統(tǒng)就有了可伸縮的靈活體系架構(gòu)。在硬盤驅(qū)動(dòng)器HDD、固態(tài)硬盤SSD的配合作用下，本地儲(chǔ)存就成功轉(zhuǎn)化為集群共享。NDFS是系統(tǒng)的關(guān)鍵構(gòu)成，負(fù)責(zé)的主要任務(wù)是所有元數(shù)據(jù)的數(shù)據(jù)管理，另外該文件也能聚集全部節(jié)點(diǎn)間的本地儲(chǔ)存，在為大數(shù)據(jù)環(huán)境下的云媒資存儲(chǔ)服務(wù)時(shí)數(shù)據(jù)讀寫機(jī)制和數(shù)據(jù)壓縮機(jī)制能發(fā)揮重要作用。

2.容錯(cuò)機(jī)制

系統(tǒng)的平臺(tái)容錯(cuò)機(jī)制促使該系統(tǒng)能夠在云媒資存儲(chǔ)中發(fā)揮更大作用，專業(yè)的容錯(cuò)機(jī)制能有效應(yīng)對(duì)服務(wù)器、磁盤、VM控制節(jié)點(diǎn)的故障，從而對(duì)災(zāi)難性硬件故障起到規(guī)避作用，保證數(shù)據(jù)和訪問功能始終可以正常使用。比如系統(tǒng)發(fā)生了磁盤故障，在容錯(cuò)機(jī)制的支持作用下，系統(tǒng)能夠?qū)崿F(xiàn)對(duì)故障的準(zhǔn)確檢測(cè)，之后便會(huì)將其標(biāo)記為離線狀態(tài)，將其在儲(chǔ)存池內(nèi)掛起。

二、混合云基礎(chǔ)云媒資及云儲(chǔ)存技術(shù)發(fā)展急需解決的問題

就媒體企業(yè)的媒資系統(tǒng)而言，云儲(chǔ)存技術(shù)是其中最為關(guān)鍵的部分。云媒資以公有云作為儲(chǔ)存技術(shù)，有效解決了媒體資源的儲(chǔ)存壓力。但是隨著時(shí)間的推移，也逐漸出現(xiàn)了一些問題，在未來的發(fā)展中只有解決這些問題才能獲得更大的成就。問題之一是公有云的媒資資料存儲(chǔ)安全問題，出現(xiàn)這一問題主要是因?yàn)槠髽I(yè)傳統(tǒng)的內(nèi)部數(shù)據(jù)保護(hù)方式已經(jīng)不再適用，無法保證公有云數(shù)據(jù)的安全。目前云資源的安全受到兩方面的威脅，一方面來自于云服務(wù)商內(nèi)部，比如信息泄露。另一方面來自外部攻擊，比如黑客侵襲。問題之二是公有云和企業(yè)內(nèi)部客戶端交互效率問題。使用公有云，媒資系統(tǒng)的存儲(chǔ)壓力就能被有效緩解。但是由于媒資系統(tǒng)的用戶在企業(yè)內(nèi)相對(duì)比較集中，當(dāng)應(yīng)用公有云的數(shù)量達(dá)到一定數(shù)目，企業(yè)內(nèi)用戶媒資就會(huì)與互聯(lián)網(wǎng)信息產(chǎn)生大量數(shù)據(jù)交互。在媒資系統(tǒng)中存在著大量的視頻和音頻數(shù)據(jù)，這導(dǎo)致數(shù)據(jù)交互的效率問題尤其突出。

三、混合云基礎(chǔ)云媒資及云儲(chǔ)存技術(shù)發(fā)展策略

（一）強(qiáng)化閥值設(shè)定功能，增強(qiáng)系統(tǒng)的數(shù)據(jù)自我調(diào)整能力

最大化發(fā)揮混合云云儲(chǔ)存的平臺(tái)的價(jià)值，首先要給予私有云存儲(chǔ)空間更多的關(guān)注，要強(qiáng)化其閥值設(shè)定功能。需要設(shè)定的閥值有兩個(gè)，分別是基礎(chǔ)閥值和緊急閥值，前者用P來表示，后者用U來表示。私有云空間剩余情況用Y來表示，當(dāng)Y>P，就說明此時(shí)私有云的存儲(chǔ)狀態(tài)是正常的，當(dāng)系統(tǒng)顯示P>Y>U，則代表此時(shí)私有云正處于遷移狀態(tài)，當(dāng)系統(tǒng)顯示U>Y，則說明此時(shí)系統(tǒng)正處于緊急遷移狀態(tài)。通過強(qiáng)化閾值設(shè)定功能，有效規(guī)范媒資數(shù)據(jù)的遷移操作。

其次，增強(qiáng)系統(tǒng)的數(shù)據(jù)自我調(diào)整功能，數(shù)據(jù)挖掘自我調(diào)整功能的實(shí)現(xiàn)需要依賴公有云素材的實(shí)際回調(diào)率。在設(shè)置云素材的回調(diào)率閾值時(shí)，以媒資系統(tǒng)的近線素材回調(diào)率為參考。用M1代表公有云素材的實(shí)際回調(diào)率，用M來表示公有云素材的回調(diào)率的閥值。當(dāng)出現(xiàn)M1>M的情況，說明公司的媒資素材公有云回調(diào)閾值低于回調(diào)率。此時(shí)就要對(duì)熱點(diǎn)周期加以調(diào)整，另外還要調(diào)整熱點(diǎn)素材決策模型的算法，從而實(shí)現(xiàn)M1≤M。這是一個(gè)動(dòng)態(tài)調(diào)整的過程，優(yōu)化系統(tǒng)的數(shù)據(jù)自我調(diào)整功能會(huì)促進(jìn)混合云云媒資存儲(chǔ)平臺(tái)發(fā)揮更大的價(jià)值。

（二）轉(zhuǎn)變?cè)泼劫Y的編輯理念

為了保證大數(shù)據(jù)環(huán)境下云媒資存儲(chǔ)技術(shù)的價(jià)值能夠更好體現(xiàn)，要積極轉(zhuǎn)變?cè)泼劫Y的編輯理念。應(yīng)具備的編輯理念之一是不僅要滿足內(nèi)部工作的需要，還要適當(dāng)為大眾提供一定服務(wù)。傳統(tǒng)媒資的主要用途是檔案資料，目前云媒資領(lǐng)域的發(fā)展已經(jīng)達(dá)到一定水平，此時(shí)媒資內(nèi)的視頻資源和音頻資源已經(jīng)變成了可以無限次使用和消費(fèi)的產(chǎn)品。面向大眾適當(dāng)開放這些資源會(huì)更容易獲得外部社會(huì)的認(rèn)可，在此條件下，媒體的融合發(fā)展也有了更好的支持條件。在大數(shù)據(jù)環(huán)境理念下，轉(zhuǎn)變?cè)泼劫Y技術(shù)的編輯理念要從編輯意圖、重點(diǎn)和手段等方面入手，從而促進(jìn)技術(shù)發(fā)揮更大的價(jià)值。

應(yīng)具備的編輯理念之二是要更加關(guān)注精準(zhǔn)著錄和外部用戶的需求，如今智能手機(jī)在社會(huì)上已經(jīng)十分普及，信息技術(shù)的發(fā)展使得中國(guó)進(jìn)入信息爆炸時(shí)代。在此階段，媒體平臺(tái)呈現(xiàn)多元化發(fā)展趨勢(shì)，信息傳遞消費(fèi)體驗(yàn)有著便利、快捷、順暢的特點(diǎn)，同時(shí)這個(gè)過程也是對(duì)媒體傳播成功與否的體現(xiàn)，所以在大數(shù)據(jù)環(huán)境下，應(yīng)用云媒資存儲(chǔ)技術(shù)要更加關(guān)注外部用戶的輕閱讀需求，可以從多個(gè)角度觀察微單元化的用戶需求。

（三）加強(qiáng)安全監(jiān)控和防病毒措施

安全監(jiān)控要覆蓋運(yùn)行情況、網(wǎng)絡(luò)安全、云計(jì)算資源三方面，切實(shí)提高大數(shù)據(jù)環(huán)境下云媒資存儲(chǔ)技術(shù)的應(yīng)用質(zhì)量。以網(wǎng)絡(luò)安全監(jiān)控為例，圖形化界面會(huì)在其中發(fā)揮關(guān)鍵作用，此外還要用到SNMP協(xié)議。對(duì)網(wǎng)絡(luò)安全實(shí)現(xiàn)高質(zhì)量的信息監(jiān)控，信息采集服務(wù)器的加入會(huì)使全臺(tái)網(wǎng)主干平臺(tái)的監(jiān)控?cái)?shù)據(jù)服務(wù)通信需求得到較好滿足。在應(yīng)用防病毒手段時(shí)，要實(shí)現(xiàn)對(duì)病毒的統(tǒng)一防護(hù)，也要具備掃描評(píng)估網(wǎng)路漏洞的功能，此外還需要檢測(cè)并防護(hù)外來網(wǎng)絡(luò)的入侵。為了有效降低病毒威脅，可以在網(wǎng)絡(luò)中設(shè)置病毒防護(hù)服務(wù)器。

四、結(jié)束語

綜上所述，大數(shù)據(jù)環(huán)境下云媒資及存儲(chǔ)技術(shù)的應(yīng)用需要解決的問題有很多，本文總結(jié)了兩點(diǎn)：公有云的媒資資料存儲(chǔ)安全問題；公有云和企業(yè)內(nèi)部客戶端交互效率問題。為此，混合云基礎(chǔ)云媒資技術(shù)在未來要強(qiáng)化閥值設(shè)定功能，增強(qiáng)系統(tǒng)的數(shù)據(jù)自我調(diào)整能力，轉(zhuǎn)變?cè)泼劫Y的編輯理念并加強(qiáng)安全監(jiān)控和防病毒措施，從而為媒體企業(yè)提供更好的云存儲(chǔ)服務(wù)。