WFCloud國產(chǎn)大數(shù)據(jù)平臺
- FCloud國產(chǎn)大數(shù)據(jù)平臺主要針對國家面向大型應(yīng)用的共性云計算基礎(chǔ)平臺研制,,用于發(fā)展具有自主可控的云計算技術(shù),,提高大數(shù)據(jù)挖掘與智能服務(wù)的能力,。國產(chǎn)大數(shù)據(jù)平臺的研制符合國家信息安全政策導(dǎo)向,從CPU芯片,、服務(wù)器設(shè)計和制造到固件、操作系統(tǒng),、共性支撐軟件,、虛擬化技術(shù)、系統(tǒng)集群和大數(shù)據(jù)處理實現(xiàn)了完全國產(chǎn)自主可控,。
WFCloud國產(chǎn)大數(shù)據(jù)平臺主要解決分布式存儲和內(nèi)存計算的底層實現(xiàn),,具備海量數(shù)據(jù)存儲、檢索和分析處理能力,,對業(yè)務(wù)應(yīng)用提供各類數(shù)據(jù)存儲,、計算、展示以及挖掘接口,,能夠?qū)崿F(xiàn)大數(shù)據(jù)處理業(yè)務(wù)支撐,。圖1 國產(chǎn)大數(shù)據(jù)平臺
? 數(shù)據(jù)存儲
基于分布式文件系統(tǒng)存儲,支持海量結(jié)構(gòu)化,、非結(jié)構(gòu)化數(shù)據(jù)存儲,,支持多數(shù)據(jù)副本,數(shù)據(jù)存儲容量支持線性擴展
? 數(shù)據(jù)管理
集成Nosql數(shù)據(jù)庫,、數(shù)據(jù)倉庫及全文檢索引擎,,支持TB級數(shù)據(jù)檢索秒級響應(yīng),支持關(guān)聯(lián)查詢,、分析查詢等復(fù)雜數(shù)據(jù)查詢和分析
? 數(shù)據(jù)挖掘
支持典型數(shù)據(jù)挖掘算法集成,,支持機器學(xué)習(xí)和圖算算法集成,,能夠支撐專用數(shù)據(jù)挖掘算法和機器學(xué)習(xí)模型開發(fā)
? 分布式計算
支持分布式計算、內(nèi)存計算,、流處理等分布式計算引擎,,能夠?qū)崿F(xiàn)主流計算業(yè)務(wù)的分布式實現(xiàn),并在申威,、龍芯,、飛騰等國內(nèi)主要國產(chǎn)處理器做了大量適配和優(yōu)化,對計算支持和性能等方面著重進行了優(yōu)化和提升,。
? 資源管理
平臺采用主從雙機的HA形式,,有效保障業(yè)務(wù)連續(xù)性,提供平臺計算,、存儲,、網(wǎng)絡(luò)資源管理工具,能實時監(jiān)控平臺資源使用