·快速地整合和管理不同類型的大容量數據,對原生形式的信息采用高級分析。
·可視化所有的可用數據,供特殊分析使用。
·為構建新的分析應用程序提供了開發環境。
·工作負荷的優化和調度。
項目背景:
電信運營商數據量龐大,客戶采購中科數據服務作為數據存儲和數據處理的軟件,作為流量流速分析平臺,部署到客戶機房,幫助電信運營商快速完成對海量數據的處理和分析。
項目內容:
數據服務作為數據存儲和處理軟件,每日完成3000萬條數據的存儲。數據服務BI作為分析平臺,完成流量流速統計、網間出口流量統計(分地市)、網間出口流量流向統計、網間出口流量的流向統計(分運營商分?。?、網間出口流量業務量統計、網間出口流量的業務量統計(分地市)、業務TOPN流量排名、業務TOPN具體應用流量排名、熱點域名TOPN排名、單IP流速TOPN排名等分析。
作為產品和平臺提供商,數據服務科技提供了咨詢和實施兩種服務完成了數據治理和數據價值發掘工作。完成了從數據抽?。‥xtract)、清洗(Transform)、裝載(Load)、建模(Modeling)、到探索式數據分析(Analysis)等等全方位、一體化工作,保證了項目的成功。
根據時間維度,網站匯總,進行用戶的來源地區、來路域名和頁面訪問次數,停留時間,有效訪問次數、跳出率、回訪者、新訪問者、回訪次數、回訪相隔天數等相關數據的統計。要能夠動態添加條件,通過對用戶行為監測獲得的數據進行分析,更加詳細、清楚地了解用戶的行為習慣。
每天數據量幾千萬條,而不同網站客戶的分析需求是各自不同的,靈活變化的多維度分析需求對分析性能提出了更高的挑戰,傳統的數據庫以及Hadoop架構已經無法滿足高性能的即時分析需求。
作為產品和平臺提供商,數據服務科技提供了咨詢和實施兩種服務完成了數據治理和數據價值發掘工作。配合客戶一起完成了從數據抽?。‥xtract)、清洗(Transform)、裝載(Load)、建模(Modeling)、到探索式數據分析(Analysis)等一體化工作,保證了項目的成功,實現了從線下交付到線上交付的成功轉變。
電信企業的需要主要是賬務統計、收益情況分析、市場競爭分析、業務發展分析、客戶分析、客戶關系管理及市場側率、網絡基站分析、服務質量分析、營銷管理分析、綜合決策分析、績效考核等。
客戶在處理多維分析上遇到了難題,ROLAP分析的數據實時性高,功能擴展性好,非常靈活,但大數據性能差,很難支持交互式分析。MOLAP性能迅捷,但不能直接從數據庫取數,因此業務數據的變化不能迅速反應到MOLAP中,無法做到實時分析數據??傊疅o論是采用ROLAP還是MOLAP都有他們各自無法避免的缺點。
客戶的各級部門提出BI應用的需求,各級部門自己操作完成整個系統的部署、開發和后期維護。因此客戶在選擇BI工具時,需要考慮哪一款BI工具容易上手,開發簡單。這樣他們的工作人員可以迅速掌握使用,無需BI廠商提供長時間的技術支持。而且客戶部署之后需求肯定會變化,如果自己工作人員可以完全掌握工具的話可以迅速應對。