發布時間:2017-08-08 23:08:35
1
2
1. 項目背景
大(dà)數據時代,激增的(de)數據量和(hé)快速的(de)數據産生速度,不僅要求企業(yè)具備低成本數據存儲能(néng)力,同時還要求企業(yè)具備高(gāo)效數據處理(lǐ)能(néng)力,能(néng)夠及時的(de)從海(hǎi)量數據中獲取有(yǒu)價值信息,爲企業(yè)運營決策提供支持。當前Hadoop已經成爲海(hǎi)量數據存儲和(hé)處理(lǐ)業(yè)界标準,因此構建基于Hadoop技術(shù)的(de)企業(yè)級大(dà)數據平台,借助大(dà)數據平台提供的(de)低成本數據存儲能(néng)力,及強大(dà)的(de)分(fēn)布式計(jì)算能(néng)力,滿足客戶營銷、風險預警等在線及離(lí)線業(yè)務應用(yòng)需求。
2. 建設曆程及主要成果
甯波銀行(xíng)2015年開(kāi)始籌建基于Hadoop大(dà)數據平台建設了新一代的(de)數據倉庫,以業(yè)務驅動爲基礎,在新一代數據倉庫上(shàng)建立了一套适用(yòng)于我行(xíng)特色的(de)數據模型;實現了建設初期預定的(de)目标,并在使用(yòng)和(hé)運營過程中不斷與時俱進、獲得新的(de)成果。
1. 搭建了基于大(dà)數據平台企業(yè)級的(de)數據架構,實現了數據端到(dào)端的(de)全生命周期管理(lǐ);
2. 實現了全行(xíng)數據資産的(de)清理(lǐ)、集中存儲、管理(lǐ)和(hé)标準化、并且引入外部數據,并在全方位支持業(yè)務應用(yòng)的(de)同時确保了數據資産的(de)安全;
3. 系統整體架構平台技術(shù)架構圖
4. 基于平台上(shàng)建設諸多應用(yòng),豐富的(de)業(yè)務應用(yòng)支持,如(rú):
愛數據應用(yòng)集市:爲業(yè)務部門提供更好的(de)數據分(fēn)析服務。
大(dà)數據風控集市:采集外部數據,全面分(fēn)析客戶風險。
非現場(chǎng)審計(jì)集市:爲審計(jì)部提供審計(jì)所需相(xiàng)關數據。
E-銷複雜查詢:後台生成50種産品的(de)客戶簽約信息,通過sola查詢快速查找客戶産品信息。
交易對手查詢:快速查詢客戶存款交易信息。
5. 靈活的(de)上(shàng)下遊接口,确保數據倉庫能(néng)夠靈活、快速支持上(shàng)遊新業(yè)務開(kāi)展帶來的(de)數據變化及下遊數據需求的(de)實時變化;
3. 天正智能(néng)方案
上海徕壹滬數據服務有限公司(即“天正智能(néng)”)作爲專業(yè)的(de)數據解決方案服務提供商,有(yǒu)幸成爲甯波銀行(xíng)大(dà)數據平台建設的(de)參與者,10多年來從解決方案、專業(yè)團隊、運營及應用(yòng)支持方面爲數據倉庫系統提供全方位的(de)支持及保障。
建設期:爲行(xíng)方倉庫系統提供系統架構及解決方案的(de)咨詢及支持服務,并承擔系統開(kāi)發,實現系統的(de)實施落地(dì),包括模型建設、數據加載、數據标準化、應用(yòng)建設等;
運營及維護期:根據數據倉庫專業(yè)角色爲客戶長期組建、打造和(hé)維護了一支專業(yè)、穩定的(de)隊伍,确保系統日常的(de)穩定運行(xíng)、實現日常數據的(de)入/出庫支持、保證數據需求的(de)響應性能(néng)、以及建設了一整套系統建設、開(kāi)發、管理(lǐ)、應用(yòng)相(xiàng)關的(de)規範、流程及相(xiàng)關文(wén)檔;
數據應用(yòng)期:針對下遊業(yè)務對數據的(de)多樣化應用(yòng)需求,從數據架構、數據接口、角色組織上(shàng)建立了靈活配套的(de)層次及措施。對于系統化的(de)業(yè)務應用(yòng),提供了通用(yòng)數據接口,通過數據的(de)主動推送或者被動訪問實現對數據的(de)支持;對于靈活、實時、動态的(de)數據需求,提供了通用(yòng)數據訪問(取數)平台,借助數據标準化(業(yè)務、技術(shù)标注化),讓下遊用(yòng)戶實現對數據的(de)自主探查、訪問及應用(yòng)。