火眼?數據科學建模平臺



聚焦大數據模型中臺服務:語義理解,圖關系,機器學習,時序預測

讓業務流程變得更加個性化,并最大化數據價值變現
迪奧大數據


    迪奧火眼大數據一體機產品組合為企業提供數據管理可視化服務,主要用例包括:針對企業的行情監測、針對企業內部的管理經營分析可視化、針對企業顧客的行為分析等。它主要有三大功能,一是強大的企業內外部數據整合能力,二是豐富的分析模型庫,三是豐富的可視化控件。

    作為大數據一體機的產品廠商,迪奧公司在大數據應用領域被評為領先者。該平臺集成了多種大數據管理應用模型,企業可以根據需要調用模型組件庫的組件進行相應數據挖掘分析,其中包括個性化推薦引擎、場景營銷引擎和大數據分析引擎。該平臺可以部署于各種業務模式中,為各種設備提供多屏訪問,從而滿足當今企業的通信和協作需求。它提供了一個基于標準的可擴展開發平臺,并以較低的總體擁有成本(TCO) 保證其卓越的性能、高可靠性和高伸縮性。


  • 我們正在迎來一個數據爆炸的時代
  • 各類設備和互動產生的數據量正以年均大于50%的速度增長,預計在2020年可能會到44ZB(44萬億GB)。全球企業越來越關注大數據給自己帶來的機會或沖擊。據調查顯示,擁有優秀大數據能力的企業,它的財務表現在行業前25分位的可能性是競爭對手的2倍、做出正確決策的可能性高出競爭對手3倍、決策速度比競爭對手快5倍??杉?,大數據對于企業乃至社會的重要性不言而喻。

    一體機是指通過標準化的架構集成了服務器、存儲、網絡、軟件等配置,減化了數據中心基礎設施部署和運維管理的復雜性的一體化設備。大數據一體機即通過一體機的產品形態,解決了大數據時代基礎設施的持續擴展問題、數據處理的個性化和一體化需求問題、海量數據的存儲成本問題。

  • 迪奧火眼大數據一體機概述
  • 迪奧大數據一體機是一種專為大量數據的分析處理而設計的軟、硬件結合的產品,由一組集成的服務器、存儲設備、操作系統、數據庫管理系統以及一些為數據查詢、處理、分析用途而特別預先安裝及優化的軟件組成,為中等至大型的數據倉庫市?。ㄍǔJ萘吭赥B至PB級別)提供解決方案。

    迪奧大數據一體機如同企業數據門戶,為企業全面整合數據資產,通過狀態指標監控企業狀態,在此基礎上進行多角度、全方位的可視化分析,全面、綜合地掌握和利用在經營過程中得到的信息,更加精準的掌握企業當前運行狀況與經營能力,達到提高企業管理和決策水平的目的。

    通過迪奧大數據一體機,集團產業可以對自身產品、服務、顧客管理等情況進行分析和挖掘,反饋當前存在問題,輔助決策者找到解決問題的途徑,促進集團產業信息化鏈條的建設、完善,建設集團產業運行全息圖。



  • 豐富的可視化呈現
  • 報表展現工具集成了30余種統計圖表,將為領導、部門和個人提供個性化展現。系統管理員預先制作各類主題的主頁模板,并根據工作需要,選擇相應模板,更換報表頁面形式和信息內容。部門管理員可通過下載不同的模板,配置模板上動態信息區對應的欄目,修改模板樣式文件,即可獲得不同風格和多樣化欄目的分析報表,滿足部門信息使用的需求。


  • 應用場景
  • 迪奧大數據一體機是一體化的數據分析處理平臺,可應對多種數據類型和多種數據處理需求,包括但不限于以下四種應用場景:

    海量數據存儲:大數據一體機具備高性能的分布式文件系統,支持大吞吐量高并發訪問,具有自我修復,動態擴展等特性,硬件配備了高密度大容量的硬盤和高速的數據交換網絡,對外提供豐富的數據訪問接口,非常適合監控視頻,醫療影像,科研數據等大數據集的存儲。

    批量數據處理:通過分布式計算框架ElasticSearch,大數據一體機可調用所有節點的計算資源執行諸如數據格式整理,數據類型轉換,文本特征值提取,模式識別等數據數據處理任務,在處理過程中減少了數據在不同節點間的交換,降低了傳輸帶寬的壓力,極大的提升了處理效率。

    海量結構化數據在線查詢:大數據一體機內置了列存數據庫HBase,它具有高效的查詢性能和良好的橫向擴展能力,支持高并發訪問,百億條的數據規模下進行查詢可達到毫秒級響應,非常適合金融,電信等行業的歷史交易查詢以及公安,交通等行業的道路卡口數據查詢,快速身份信息查詢等需。

    數據倉庫:大數據一體機配備了數據倉庫工具和ETL工具,可實現將數據從多種數據庫,多個數據源抽取,轉換最終加載到數據倉庫中。數據倉庫對外提供標準SQL接口,適合各種面向分析應用的數據倉庫場景。


    。

  • 技術指標

  • 根據不同的應用場景需求,迪奧大數據一體機有三個通用系列供用戶選擇,并可為用戶進行定制化配置滿足客戶要求:


    大數據一體機型號
    EyeDMP1000
    EyeDMP2000
    EyeDMP3000
    *擴展性
    只支持單機柜,最多14個數據節點
    主柜最多14個節點支持1-2個機柜,最多30個數據節點
    主柜最多12個節點,支持多個機柜,最大支持60節點
    應用場景
    小規模數據處理,擴展性要求不高
    高性價比配置,適合大多數數據處理場景
    適合數據量大,增長速度快,數據處理性能要求高的應用場景
    管理網絡
    千兆以太網
    千兆以太網
    千兆以太網
    數據網絡
    千兆以太網
    萬兆以太網
    萬兆以太網
    整機最大計算CPU
    168
    360
    720
    整機最大計算內存
    5096GB
    10920GB
    21840GB
    *整機最大存儲空間
    504TB
    1080TB
    2160TB
    交流輸入電壓
    220V380V可選
    220V380V可選
    220V380V可選
    整柜最大功率
    11200w
    12600w
    10800w
    整柜最大重量
    690kg
    760kg
    630kg
    機柜尺寸
    1050*600*2050
    1050*600*2050
    1050*600*2050
    工作溫度
    5-35攝氏度
    5-35攝氏度
    5-35攝氏度
    管理節點配置
    雙路E5-2620V2CPU
    96G內存
    42.5600G硬盤
    2個千兆網口
    四路E7-4820 V28核) CPU
    256G內存
    82.5300G硬盤
    4個千兆網口
    1個單口萬兆網卡
    八路E7-8837 8核)CPU
    256G內存
    42.5600G硬盤
    2個千兆網口
    1個單口萬兆網卡
    數據節點配置
    雙路E5-2420v2 CPU
    192G內存
    22.5500G硬盤
    123.53T硬盤
    2個千兆網口
    雙路E5-2420v2 CPU
    192G內存
    22.5500G硬盤
    123.53T硬盤
    2個千兆網口
    1個單口萬兆網卡
    雙路E5-2420v2 CPU
    192G內存
    22.5500G硬盤
    123.53T硬盤
    2個千兆網口
    1個單口萬兆網卡


    *擴展性:指大數據一體機標準配置的擴展能力,采用特殊硬件和設計理論上可擴展到4000節點

    *主柜數據存儲空間:如采用HDFS 3副本機制實際存儲容量需要除以3


  • 數據產生層

  • 內部業務系統產生的結構化數據

    客戶身份信息,包括客戶名稱、客戶類別、國籍地區、身份證明文件信息、客戶頭像等信息;

    客戶聯系信息,包括聯系地址、聯系電話等信息;

    客戶自然屬性或社會屬性信息,包括自然人客戶的職業性質、教育程度等信息,機構客戶的機構類型、資本屬性等信息;

    客戶其他基本信息;

    業務申請單據、合同協議、業務回單、信用記錄、研發記錄等內容。

    企業內部非結構化數據

    日常業務處理過程中產生的非結構化數據,存儲形式多樣,主要包括用戶訪問日志、用戶行為、用戶點評等。

    企業外部數據

    企業外部數據以非結構化為主,主要包括國家政策法規、論壇等互聯網信息、地理位置等移動信息、微博等社交媒體信息。

    迪奧大數據一體機總體架構圖

  • 數據交換層
  • 數據交換層是根據數據源存儲的不同分類而設計的,將結構化數據,文本、圖像、聲音等非結構化信息整合,通過統一命名規則的URL訪問。這樣可以達到初步的數據整合的目的(集中管理,統一目錄,聯合搜索)。本質是通過分析數據存儲結構和數據存儲庫的特點來針對性的設計工具,以追求卓越的性能。

  • 數據應用層
  • 管理分類應用

    管理分析類應用主要實現了集團客戶管理、研發管理、研發投入管理、風險管理、科技信息披露五大分析體系功能

    管理分析類應用通常采用套裝軟件和BI工具實現

    數據增值類服務應用

    數據科學家根據自己對業務需求的理解或者對市場的判斷,設計并運行模型,發掘數據價值,并封裝成商業產品

    數據增值產品通常采用R語言和BI工具實現,面向企業內外部用戶

    沙盤演練類應用

    業務人員根據業務需求或自己對業務的理解,設計計算模型,準備各類明細或匯總數據,導入模型運算,驗證業務結果

    沙盤演練類應用通常使用R語言在Hadoop分布式體系下實現

    歷史查詢類應用

    針對公檢法查詢需求、內外部審計需求和最終用戶的歷史交易查詢需求,以貼源存儲的歸檔數據為基礎,實現的查詢類應用

    歷史查詢類應用通常使用BI 工具或自主開發實現

    高時效類分析應用

    客戶經理等最終業務人員針對當前業務的發生(如:用戶交易、用戶訪問日志),進行實時查詢、分析的應用

    實時分析類應用通常使用CEP、ESB等技術實現

  • 數據訪問層
  • 多種展現形式滿足各層級用戶及應用系統使用需求

  • 迪奧大數據一體機為企業帶來的獨特價值
  • 1. 促進業務創新

    業務人員可以基于明細、可信的數據,進行多維分析和數據挖掘,為業務創新(客戶服務創新、產品創新等)創造了有利條件。

    2.加強業務協作

    實現分散在各個業務系統中的數據在數據平臺中的集中和整合,建立單一的產品、客戶等數據的企業級視圖,有效促進業務的集成和協作,并為企業級分析、交叉銷售提供基礎。

    3. 實現數據共享

    通過數據平臺實現數據集中,確保各級部門均可在保證數據隱私和安全的前提下使用數據,充分發揮數據作為企業重要資產的業務價值。

    4. 改善數據質量

    從中長期看,數據倉庫對分散在各個業務系統中的數據整合、清洗,有助于企業整體數據質量的改善,提高的數據的實用性。

    5. 提升建設效率

    通過數據平臺對數據進行集中,為管理分析、挖掘預測類等系統提供一致的數據基礎,改變現有系統數據來源多、數據處理復雜的現狀,實現應用系統建設模式的轉變,提升相關IT系統的建設和運行效率。


    特別聲明

    迪奧,DEEAO,Deelio和所有其它迪奧科技公司的產品或服務名稱,是廣州迪奧信息科技有限公司在中國和其他國家的注冊商標。數據雷達?表示中國注冊商標。其他品牌和產品名稱均為相關公司的注冊商標。

    版權所有,2016年,迪奧科技保留所有權利。

會員登錄
登錄
我的資料
留言
回到頂部