WFCloud國產大數(shù)據(jù)平臺
- FCloud國產大數(shù)據(jù)平臺主要針對國家面向大型應用的共性云計算基礎平臺研制,用于發(fā)展具有自主可控的云計算技術,提高大數(shù)據(jù)挖掘與智能服務的能力。國產大數(shù)據(jù)平臺的研制符合國家信息安全政策導向,從CPU芯片、服務器設計和制造到固件、操作系統(tǒng)、共性支撐軟件、虛擬化技術、系統(tǒng)集群和大數(shù)據(jù)處理實現(xiàn)了完全國產自主可控。
WFCloud國產大數(shù)據(jù)平臺主要解決分布式存儲和內存計算的底層實現(xiàn),具備海量數(shù)據(jù)存儲、檢索和分析處理能力,對業(yè)務應用提供各類數(shù)據(jù)存儲、計算、展示以及挖掘接口,能夠實現(xiàn)大數(shù)據(jù)處理業(yè)務支撐。圖1 國產大數(shù)據(jù)平臺
? 數(shù)據(jù)存儲
基于分布式文件系統(tǒng)存儲,支持海量結構化、非結構化數(shù)據(jù)存儲,支持多數(shù)據(jù)副本,數(shù)據(jù)存儲容量支持線性擴展
? 數(shù)據(jù)管理
集成Nosql數(shù)據(jù)庫、數(shù)據(jù)倉庫及全文檢索引擎,支持TB級數(shù)據(jù)檢索秒級響應,支持關聯(lián)查詢、分析查詢等復雜數(shù)據(jù)查詢和分析
? 數(shù)據(jù)挖掘
支持典型數(shù)據(jù)挖掘算法集成,支持機器學習和圖算算法集成,能夠支撐專用數(shù)據(jù)挖掘算法和機器學習模型開發(fā)
? 分布式計算
支持分布式計算、內存計算、流處理等分布式計算引擎,能夠實現(xiàn)主流計算業(yè)務的分布式實現(xiàn),并在申威、龍芯、飛騰等國內主要國產處理器做了大量適配和優(yōu)化,對計算支持和性能等方面著重進行了優(yōu)化和提升。
? 資源管理
平臺采用主從雙機的HA形式,有效保障業(yè)務連續(xù)性,提供平臺計算、存儲、網(wǎng)絡資源管理工具,能實時監(jiān)控平臺資源使用