http://www.barttrial.,阳光姐妹淘下载,三八客服-三j片-三级片-快播 3j片

彩訊Richdata 大數據智能分析平臺整合了各行業的http://www.barttrial.,阳光姐妹淘下载,三八客服-三j片-三级片-快播 3j片數據分析、決策支持和數據洞察需求,是通用的大數據BI工具產品,具備高性能實時和離線計算能力、豐富的統計、分析、挖掘模型,為行業全流程、全周期的生產運營活動提供商業智能支持。

(1)

產品定位

基于大數據的BI工具產品:

RichData 全稱大數據智能分http://www.barttrial.,阳光姐妹淘下载,三八客服-三j片-三级片-快播 3j片析平臺,是一個跟具體行業業務無關的、通用性的基于大數據的BI工具產品,通過這個產品所具備的高性能實時和離線計算能力、豐富的統計、分析、挖掘模型,為行業全流程、全周期的生產運營活動提供商業智能支持。

中間性的大數據分析挖掘平臺:

RichData 與具體業務實現了松耦合,是一個中間性的大數據分析挖掘平臺,可應用到多個行業,實現行業內特定場景下,對大數據的分析需求,包括對大數據的采集、存儲、管理、計算、分析、展現。

(2)

低門檻面向終端用戶:

RichData 平臺是一個低門檻的工具平臺,各層次的人員都可以使用,包括開發人員,分析人員,運維人員,管理人員等。配置化的安裝部署

系統可實現跨平臺、跨網絡、跨區域分布式部署。

將大數據平臺各組成部分封裝成統一的產品安裝工具,實現界面化的向導式安裝。

平臺采用向導式過程安裝,自動檢測資源,自動化安裝。用戶只需指定機器資源,平臺自動進行資源檢測、資源規劃、平臺各模塊的安裝。真正做到向導http://www.barttrial.,阳光姐妹淘下载,三八客服-三j片-三级片-快播 3j片式安裝,無人值守式安裝。

元數據驅動的平臺架構

平臺采用分布式架構,彈性管控集群資源。

平臺運行以元數據為基礎,元數據包括數據源元數據,數據倉庫元數據,結果元數據,數據服務元數據,任務元數據,平臺信息元數據等。

平臺各功能組件之間通過數據進行交互,實現松耦合。平臺各子系統既是一個獨立的功能模塊,又能通過數據的交互構成一個整體。

(3)

全域的系統監控與管理

管理模塊是大數據平臺信息的匯聚點,通過管理子系統獲取的信息可以知道系統的總體運行情況.

實時查看平臺運行的業務,對業務進行調度,優先級配置,多維度的業務報表。

通過管理平臺的信息呈現,用戶可以清晰地知道當前系統運行的變化趨勢,從而把握系統的穩定性http://www.barttrial.,阳光姐妹淘下载,三八客服-三j片-三级片-快播 3j片及健康狀況,可動態管理集群。

具備集群監控、集群管理(節點管理,異常管理,用戶管理,安全管理等)、元數據管理、調度管理、數據服務管理、系統管理等功能。

完善的安全管理策略

多層面的用戶權限管理機制,設置嚴格的數據管理機制。

內置了用戶操作記錄機制,全面監控用戶對平臺的使用情況。

(4)

豐富的函數模型庫

對常用的統計函數,數值計算函數,字符函數進行封裝

對常用的數據挖掘模型、算法進行封裝

插件式的函數模型庫,可動態增加新算法模型。

提供行業分析模型及類似BI的分析和展示工具。

開放的數據服務

對外提供各種數據服務,開放多種數據接口,外部系統/用戶可通過服務認證、數據API等方式按權限訪問相應的數據。

采用可視化的圖形,列表等頁面展現方式。

統一服務,標準化的接口訪問協議,為各類數據服務提供統一入口,提供便利,全面的數據http://www.barttrial.,阳光姐妹淘下载,三八客服-三j片-三级片-快播 3j片服務。

統一控制,對用戶訪問和數據訪問的統一管控,訪問日志記錄,保證數據安全。

統一數據緩存機制,接口訪問穩定性和速度的提升。可擴展,可定制,滿足未來的數據訪問需求。

(5)

多來源多格式適配的數據采集

以元數據驅動的方式提供強大的抽取、轉換和加載(ETL) 能力。適配多種數據源,支持從文件,DB、數據流中導入數據。

靈活的數據轉換配置和任務配置,提供了直觀的圖形界面設計器,大大縮短數據抽取的開發周期,并且容易維護。設計界http://www.barttrial.,阳光姐妹淘下载,三八客服-三j片-三级片-快播 3j片面友好,提供了工作流設計模式,滿足各種場景的實現。

服務以集群方式部署,支持多任務并發,自動負載均衡,支持大數據量的抽取轉換處理,執行效率高,提供了豐富的異常處理功能,能滿足各種異常處理需求。

統一的分布式存儲

以Hbase做為數據存儲的統一格式,MapReduce、Hive通過接口使用Hbase數據。

做到一份存儲,多處使用。

(6)

配置式的服務配置工具

通過配置完成計算任務的配置,降低平臺實施和使用的技術門檻。

通過統一的配置模板實現對數據計算的定義、腳本實現并通過定義規則驅動數據計算。

可視化的自助分析工具

自定義報表工具,實現了基于 XML 的定義文件來可編程性地生成報表的能力.

圍繞著報表引擎,開發用戶圖形界面,用戶可以使用向導,無需編程,通過http://www.barttrial.,阳光姐妹淘下载,三八客服-三j片-三级片-快播 3j片工具配置一步接一步完成創建一個報表。

數據展示格式靈活,能更大程度上滿足用戶的數據需求。

多維分析工具,提供豐富的圖形化展現界面和接口。

用java語言開發支持 MDX(多維表達式)的查詢語言、分析型XML 和 olap4j 的接口技術規范。實現了從 SQL 和其它數據源讀取數據,在內存緩沖區中生成集合數據。

(7)

產品優勢

分布式存儲底層改造

Hadoop原生的框架中,數據可在HDFS、HBASE、HIVE中進行存儲和計http://www.barttrial.,阳光姐妹淘下载,三八客服-三j片-三级片-快播 3j片算。如果一個數據集同時要進行要進行以上三種存儲和計算的話,需要在三個組件中都存儲數據。彩訊大數據平臺對分布式存儲進行改造,實現將數據存儲在HBASE中,開發數據接口,使得MapReduce、 HIVE可以通過接口訪問HBASE存儲的數據進行計算,從而實現一份數據,三種計算模式。

函數模型封裝

將常用統計、分析、挖掘的模型進行插件式封裝,用戶實現統計實例無需再進行底層的編程,只需要按照計算模式的參數輸入約定,即可完成實例的開發定義;不常用的計算模型,按需實現插件式開發,開發后部署到計算模型庫中,逐步豐富計算模型庫。

配置式個性化開發

通過可配置式個性化開發,大大降低了平臺實施和使用的技術門檻,對平臺的80%以上的二次開發不再需要專業的開發人員,業務人員就可以實現對數據計算的定義、腳本實現并通過定義規則驅動數據計算。

在交互界面上,選取指定的計算模式,在數據元數據中選取需要進行計算的屬性,將計算模式、計算屬性和元數據傳遞給語義層;在語義服務層,形成對http://www.barttrial.,阳光姐妹淘下载,三八客服-三j片-三级片-快播 3j片指定數據的指定計算的算法語義,并將這個算法語義轉換成既定的計算語義(如:SQL語句)。在分布式計算層面:先將計算語義轉換成計算腳本和計算任務JOB,然后按照JOB的定義選取指定的計算模板執行計算腳本,并將結果按計算語義中定義的結果模式輸出到指定的結果表中,同時實現在前方數據服務中可檢索。

配置式安裝部署

將大數據平臺各組成部分封裝成統一的產品安裝工具,實現界面化的向導式安裝實施,使http://www.barttrial.,阳光姐妹淘下载,三八客服-三j片-三级片-快播 3j片得平臺的部署實施自動化簡易化。

 

 
网站地图