佳發大(dà)數(shù)據處理(lǐ)平台基于 HDFS、Hbase、Kudu 等從(cóng) G"B 到(dào) PB 級别的(de)存儲方案，提供數(shù)據全量接入，将業(yè)務數(shù)據從(cóng)各類數(shù)據源導入數(shù) 據倉庫以及其他(tā)相(xiàng)關大(dà)數(shù)據環境，提供關系型數(shù)據庫和(hé)日(rì)志(zhì)的(de)增量實時(shí)/準實時(shí)接入，将業(yè)務庫≈中增量數(shù)據和(hé)應用(yòng)日(rì)志(zhì)實時(shí)導入到(dào)大(♠dà)數(shù)據環境，并通(tōng)過數(shù)據可(kě)視(shì)化(huà)分(fēn)析，對(duì)全省無線電(diàn)使σ用(yòng)狀況進行(xíng)實時(shí)監測。

上(shàng)圖為(wèi)大(dà)數(shù)據處理(lǐ)平台部分(fēn)頁面展示

數(shù)據采集、存儲與計(jì)算(suàn)能(néng)力。随著(zhe)數(shù)據量的(de)飛(fēi)速增長(cháng)，數(shù )據來(lái)源和(hé)數(shù)據結構更為(wèi)多(duō)樣，數(shù)據處理(lǐ)方式需滿足各個(gè)場(chǎng)景下(xià)的(de)數(sh≥ù)據分(fēn)析與應用(yòng)需求。實現(xiàn)多(duō)數(shù)據系統的(de)統一(yī)存儲、¥管理(lǐ)和(hé)業(yè)務系統數(shù)據的(de)統一(yī)。不(bù)再需要(yào)從(cóng)多(duō)個(gè)業(yè)務系統‍數(shù)據庫中提取數(shù)據再進行(xíng)整合。

上(shàng)圖為(wèi)大(dà)數(shù)據處理(lǐ)平台部分(fēn)頁面展示

增強自(zì)主分(fēn)析能(néng)力，持續挖掘業(yè)務價值。建立更加靈活、便捷的(de)可(kě)視(shì)化(h&uà)分(fēn)析，提高(gāo)數(shù)據分(fēn)析自(zì)主性，增強數(shù)據分(fēn)析效率，提高(g∑āo)數(shù)據價值貢獻。

上(shàng)圖為(wèi)大(dà)數(shù)據處理(lǐ)平台部分(fēn)頁面展示

佳發大(dà)數(shù)據處理(lǐ)平台實現(xiàn)了(le)高(gāo)效的(de)ETL開(kāi)發和(hé)數(shù)據倉庫建設，建λ設了(le)統一(yī)的(de)數(shù)據清洗、計(jì)算(suàn)流程，滿足了(le)數(shù)據分(fēn)析與數(shù)據挖掘、數(shù)據報(bào)表、報Ω(bào)告等業(yè)務場(chǎng)景對(duì)數(shù)據消費(fèi)的(de)需求；搭建了(le)同時(shí)滿足離(lí)線計(jì)算ε(suàn)和(hé)實時(shí)計(jì)算(suàn)應用(yòng)場(chǎng)景的(de)大(dà)數(shù)據平台。随著(zh↔e)互聯網快(kuài)速的(de)發展，單純的(de)離(lí)線計(jì)算(suàn)已經不(bù)能(n£éng)滿足正常的(de)業(yè)務需求，實時(shí)計(jì)算(suàn)應用(yòng)場(chǎng)景也(yě)已經成為(wèi)了(le)各個(gè)單位必須考慮的(¥de)業(yè)務場(chǎng)景；提供了(le)簡單易用(yòng)的(de)操作(zuò)界面，相(xiàng)關技(jì)術(shù)人(rén)員(yuán)可(kě)以快(kuài)¥速上(shàng)手進行(xíng)平台管理(lǐ)和(hé)維護；通(tōng)過認證、授權、審計(jì)，提供全方位的(de)數(shù)據安全技(jì)術(shù)保障；基于有(yǒu)數(↔shù)，不(bù)僅使數(shù)據庫中的(de)數(shù)據更加美(měi)觀易懂(dǒng)，各業(yè)務部門(mén)還(hφái)能(néng)通(tōng)過自(zì)助式分(fēn)析查詢所需數(shù)據，更高(gāo)效地(dì)支持業(yè)務決策。