論文類別：專家論文
作 者：佚名
所在地區(qū)：大數(shù)據(jù)石油企業(yè)信息化建設(shè)探討
下載次數(shù)：784
摘 要：
3.2大規(guī)模數(shù)據(jù)并行處理及計算
為提高大規(guī)模數(shù)據(jù)并行處理能力，石油企業(yè)可摒棄對底層技術(shù)過多分析，而是以應(yīng)用問題自身計算過程、計算方法為核心。在GoogleMapReduce軟件架構(gòu)支持下，以內(nèi)存計算為基礎(chǔ)，利用Spark系統(tǒng)優(yōu)勢，加快大規(guī)模數(shù)據(jù)并行處理及計算速度。同時依據(jù)云計算設(shè)備互通、自適應(yīng)特點，石油企業(yè)可以基礎(chǔ)設(shè)備層為入手點，制定儲存池化、網(wǎng)絡(luò)池化、計算池化三種不同層次的池化資源。其中儲存池化主要是根據(jù)用戶請求，進行儲存資源的靈活分配；網(wǎng)絡(luò)池化主要是將石油企業(yè)多個機房內(nèi)進行互相聯(lián)通，由統(tǒng)一網(wǎng)絡(luò)池化器進行調(diào)度管理，以實現(xiàn)不同地區(qū)網(wǎng)絡(luò)機房網(wǎng)絡(luò)通信的高度可用性。這種情況下，在某一設(shè)備出現(xiàn)故障后，就可以將另外一個地區(qū)作為網(wǎng)絡(luò)備災(zāi)系統(tǒng)，保證大規(guī)模數(shù)據(jù)處理系統(tǒng)的無縫隙連接；計算池化主要是在當(dāng)前數(shù)據(jù)計算請求超出計算池計算能力的情況下，將虛擬化冗余計算資源融入計算池內(nèi)（韋博，互聯(lián)網(wǎng)背景下的石油行業(yè)大數(shù)據(jù)的信息化應(yīng)用，電腦知識與技術(shù),2017年第24期25-26頁）。其可以脫離地理位置、時間、空間限制，靈活遷入或者遷出計算池，保證內(nèi)部計算資源的高效率應(yīng)用。在基于大規(guī)模數(shù)據(jù)并行處理及計算的信息化模式建設(shè)過程中，石油企業(yè)可以云計算為基礎(chǔ)，摒棄以往SAAS簡單云模式開發(fā)方式。而是以在線協(xié)作管理、信息化信息審批、PaaS平臺開發(fā)為核心，構(gòu)建較為成熟的云計算平臺。在云計算平臺建設(shè)階段，石油企業(yè)可以借鑒自身擁有的大量信息化設(shè)施，利用充足的軟硬件資源及自動化、網(wǎng)格計算、虛擬化等云計算，將原有數(shù)據(jù)中心進行進一步優(yōu)化。同時進行面向企業(yè)內(nèi)部服務(wù)的私有云架構(gòu)的構(gòu)建，以便提高內(nèi)部業(yè)務(wù)需求響應(yīng)速率。其中虛擬化主要是針對服務(wù)器、網(wǎng)絡(luò)、內(nèi)存等物理資源邏輯表示，通過虛擬化技術(shù)，將物理資源、系統(tǒng)、主機、移動儲存設(shè)備、IT設(shè)備維護、IT設(shè)備更新等模塊進行有機整合，以提高服務(wù)器設(shè)備利用率。此外，在私有云搭建過程中，為保證后期大規(guī)模數(shù)據(jù)云計算系統(tǒng)穩(wěn)定運行，石油企業(yè)可在保證自身擁有數(shù)據(jù)完全控制權(quán)的基礎(chǔ)上，與云廠商合作，進行云計算技術(shù)方案的開發(fā)。
上一頁 [1] [2] [3] [4] [5] 下一頁
