小男孩‘自慰网亚洲一区二区,亚洲一级在线播放毛片,亚洲中文字幕av每天更新,黄aⅴ永久免费无码,91成人午夜在线精品,色网站免费在线观看,亚洲欧洲wwwww在线观看

分享

某銀行大數(shù)據(jù)平臺的技術(shù)架構(gòu)設(shè)計實踐與應(yīng)用

 long16 2020-02-28

一、銀行大數(shù)據(jù)平臺建設(shè)背景及目標(biāo)

我們進(jìn)行大數(shù)據(jù)平臺建設(shè)有幾個方面的背景。一是我們在信息化建設(shè)和數(shù)據(jù)分析的基礎(chǔ)比較好;二是雖然在信息化建設(shè)過程中建設(shè)了比較完成的BI應(yīng)用,但隨著業(yè)務(wù)不斷發(fā)展,這些解決方案已不能完全滿足業(yè)務(wù)對于數(shù)據(jù)分析的需求;三是大數(shù)據(jù)技術(shù)的快速發(fā)展和應(yīng)用為滿足業(yè)務(wù)迫切需求提供了新的解決方案。

我們在信息化道路上已經(jīng)走過很長一段歷程,通過軟件系統(tǒng)將業(yè)務(wù)邏輯和業(yè)務(wù)流程進(jìn)行電子化改造,實現(xiàn)了業(yè)務(wù)數(shù)據(jù)結(jié)構(gòu)化存儲。隨著業(yè)務(wù)數(shù)據(jù)的結(jié)構(gòu)化存儲不斷發(fā)展,銀行在數(shù)據(jù)分析和利用方面也逐步進(jìn)行建設(shè),比如數(shù)據(jù)采集、數(shù)據(jù)倉庫以及集市等應(yīng)用也逐步建立,數(shù)據(jù)下發(fā)、報表以及駕駛艙等數(shù)據(jù)消費(fèi)應(yīng)用也逐步完善。運(yùn)用先進(jìn)的數(shù)據(jù)分析工具深度挖掘數(shù)據(jù)價值在行內(nèi)的有著比較深厚的“群眾基礎(chǔ)”,上至行領(lǐng)導(dǎo)、下至支行普通員工都深刻得理解數(shù)據(jù)分析工具對于挖掘數(shù)據(jù)價值的重要性,并隨著數(shù)據(jù)應(yīng)用不斷深入對于怎樣更好的進(jìn)行數(shù)據(jù)分析和使用有了越來越多的需求。

業(yè)務(wù)部門已經(jīng)不滿足于僅對財務(wù)報表數(shù)據(jù)、經(jīng)營情況的數(shù)據(jù)分析,希望能對業(yè)務(wù)開展各個環(huán)節(jié)進(jìn)行快捷的數(shù)據(jù)分析,對于業(yè)務(wù)經(jīng)營活動提供強(qiáng)力有的數(shù)據(jù)支撐和決策能力。這勢必增加數(shù)據(jù)存儲和計算資源,在面對這些新業(yè)務(wù)需求時傳統(tǒng)的數(shù)據(jù)處理遇到的困難主要有幾個方面。一方面擴(kuò)容成本比較高,且只能處理及結(jié)構(gòu)化數(shù)據(jù);另一方面大量的數(shù)據(jù)分析對于系統(tǒng)的計算資源要求太高,無法保證數(shù)據(jù)分析效率;最后,只能提供離線數(shù)據(jù)處理,無法提供實時或準(zhǔn)實時的數(shù)據(jù)分析,這樣就導(dǎo)致了業(yè)務(wù)需求井噴但數(shù)據(jù)分析系統(tǒng)卻無法支撐的局面。

我行從2013年我們開始對大數(shù)據(jù)解決方案進(jìn)行試驗性論證,大數(shù)據(jù)解決方案可將更多的數(shù)據(jù)納入分析,將以前無法處理的半結(jié)構(gòu)化以及文本數(shù)據(jù)進(jìn)行處理,能夠與現(xiàn)有的數(shù)據(jù)倉庫和集市等進(jìn)行整合,充分利用現(xiàn)有整合結(jié)果進(jìn)行精加工,并通過將大數(shù)據(jù)分析結(jié)果下發(fā)給行內(nèi)業(yè)務(wù)系統(tǒng)、報表工具進(jìn)行數(shù)據(jù)消費(fèi),進(jìn)一步深入挖掘數(shù)據(jù)的價值。

某銀行大數(shù)據(jù)平臺的技術(shù)架構(gòu)設(shè)計實踐與應(yīng)用

總的來講就是我們有比較好的信息化基礎(chǔ)和數(shù)據(jù)分析基礎(chǔ),業(yè)務(wù)對于數(shù)據(jù)分析的訴求無法完全通過傳統(tǒng)的BI類應(yīng)用得到滿足,而大數(shù)據(jù)提供的技術(shù)解決方案讓業(yè)務(wù)更有想象空間。

經(jīng)過與業(yè)務(wù)部門需求的深入溝通,與同業(yè)及廠商的進(jìn)行深入調(diào)研,結(jié)合我行實際情況,明確了大數(shù)據(jù)平臺建設(shè)需要實現(xiàn)以下幾個技術(shù)目標(biāo):

一是要有更多的數(shù)據(jù),要比傳統(tǒng)BI處理和分析更多的數(shù)據(jù),提升數(shù)據(jù)分析的范圍,在現(xiàn)有數(shù)據(jù)的基礎(chǔ)上補(bǔ)充對半結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)的分析處理能力,實現(xiàn)對業(yè)務(wù)全流程相關(guān)數(shù)據(jù)的整合和分析;

二是更全面的數(shù)據(jù)處理能力,批量處理能力要比傳統(tǒng)BI更強(qiáng),每天能完成TB級數(shù)據(jù)處理,同時突破現(xiàn)有的BI系統(tǒng)僅提供批量離線數(shù)據(jù)處理的桎梏,必須要提供實時的基于事件的數(shù)據(jù)分析決策能力;

三是要有更好的數(shù)據(jù)服務(wù),針對業(yè)務(wù)對傳統(tǒng)BI類應(yīng)用使用中的痛點(diǎn)進(jìn)行該改進(jìn),讓用戶能夠方便快捷了解平臺能提供什么樣的服務(wù),怎樣能快速獲取到平臺的數(shù)據(jù)服務(wù);四是更豐富的系統(tǒng)對接方式,傳統(tǒng)BI將處理結(jié)果以批量方式下發(fā)給業(yè)務(wù)系統(tǒng)使用,我們需要將大數(shù)據(jù)技術(shù)的處理結(jié)果封裝成數(shù)據(jù)服務(wù)接口,與現(xiàn)有業(yè)務(wù)系統(tǒng)對接進(jìn)行數(shù)據(jù)消費(fèi),減少批量數(shù)據(jù)下發(fā)對下游系統(tǒng)的存儲和性能壓力。

某銀行大數(shù)據(jù)平臺的技術(shù)架構(gòu)設(shè)計實踐與應(yīng)用

二、建設(shè)難點(diǎn)及應(yīng)對措施

在建設(shè)過程中面臨的困難主要有幾個方面,大數(shù)據(jù)技術(shù)基礎(chǔ)薄弱、大數(shù)據(jù)技術(shù)應(yīng)用能否發(fā)揮價值的不確定大、數(shù)據(jù)治理管控的難度比較大等問題。

某銀行大數(shù)據(jù)平臺的技術(shù)架構(gòu)設(shè)計實踐與應(yīng)用

大數(shù)據(jù)相關(guān)技術(shù)薄弱無積累

銀行信息建設(shè)過程是逐步積累起來的,且有比較多的同業(yè)建設(shè)經(jīng)驗可以借鑒,而我們在準(zhǔn)備進(jìn)行大數(shù)據(jù)建設(shè)時,彼時在銀行系統(tǒng)內(nèi)掌握并用好大數(shù)據(jù)技術(shù)的還比較少,并沒有太多同業(yè)成功經(jīng)驗可以復(fù)制,新技術(shù)引入對于開發(fā)和系統(tǒng)維護(hù)的挑戰(zhàn)都很大。我們做了三個方面的工作進(jìn)行彌補(bǔ):一是加大人員投入,聚焦技術(shù)方向深入研究相關(guān)技術(shù);二是找靠譜的實施服務(wù)商,通過實施服務(wù)商找一些有大數(shù)據(jù)開發(fā)能力和實施經(jīng)驗的開發(fā)人員,加快原始技術(shù)積累進(jìn)程;三是加強(qiáng)技術(shù)交流,鼓勵結(jié)合項目不斷學(xué)習(xí)新技術(shù)并在項目組內(nèi)進(jìn)行交流,鼓勵參加開源社區(qū)組織的技術(shù)沙龍走出去看看別人怎樣做的,積極與銀行同業(yè)以及先進(jìn)的互聯(lián)網(wǎng)公司進(jìn)行技術(shù)和應(yīng)用的交流。

大數(shù)據(jù)應(yīng)用前景的不確定性大

大數(shù)據(jù)應(yīng)用首先是技術(shù)上革新,其次是對內(nèi)部管理模式和工作機(jī)制也是新的挑戰(zhàn),銀行和互聯(lián)網(wǎng)企業(yè)的“基因”上差異很大,項目建設(shè)論證階段,專家評委對大數(shù)據(jù)技術(shù)在銀行系統(tǒng)內(nèi)是否會“水土不服”表示擔(dān)憂。對于一個新組建的幾乎零基礎(chǔ)的團(tuán)隊能不能把大數(shù)據(jù)技術(shù)用起來,以及能否發(fā)揮數(shù)據(jù)的業(yè)務(wù)價值都有很大的疑慮。為此,我們將建設(shè)工作分成幾個階段實施,盡量減少一次性大量投入的風(fēng)險。在平臺建設(shè)方面,先建設(shè)離線數(shù)據(jù)處理能力,通過離線建設(shè)摸索大數(shù)據(jù)技術(shù)與銀行業(yè)務(wù)結(jié)合的實現(xiàn)方案,再進(jìn)行自助數(shù)據(jù)分析和實時決策能力的建設(shè),不斷完善數(shù)據(jù)治理能力;在應(yīng)用上,與業(yè)務(wù)達(dá)成共識選定易于實現(xiàn)且成效顯著的業(yè)務(wù)場景,搭建最小集群進(jìn)行開發(fā)和應(yīng)用,待應(yīng)用模式逐步成熟后根據(jù)業(yè)務(wù)需求對集群進(jìn)行擴(kuò)容。當(dāng)技術(shù)路線或者實現(xiàn)方式等導(dǎo)致與業(yè)務(wù)需求存在偏差的情況,可以及時調(diào)整方向,降低技術(shù)不確定性帶來的影響??傮w上來講,按照“先離線后實時,先簡單后復(fù)雜,兼顧數(shù)據(jù)治理”的思路進(jìn)行分階段建設(shè),每一階段均按照“小步快跑,快速迭代”的思路快速應(yīng)用產(chǎn)生價值。

數(shù)據(jù)大集中的治理管控難度大

大數(shù)據(jù)平臺要整合處理的數(shù)據(jù)量大,一旦大數(shù)據(jù)平臺進(jìn)行大量的應(yīng)用,數(shù)據(jù)之間的引用和依賴關(guān)系復(fù)雜,對[L1] 數(shù)據(jù)治理能力的要求越來越高。要實現(xiàn)對大數(shù)據(jù)平臺元數(shù)據(jù)、數(shù)據(jù)血緣、碼值管理、數(shù)據(jù)生命周期進(jìn)行有效管理,確保大數(shù)據(jù)平臺的數(shù)據(jù)變更風(fēng)險可控、業(yè)務(wù)影響分析準(zhǔn)確,要將大數(shù)據(jù)平臺與行內(nèi)數(shù)據(jù)標(biāo)準(zhǔn)和規(guī)范相匹配,滿足數(shù)據(jù)治理的要[L2] 求,我們從兩個方面入手解決這個矛盾。一方面是逐步完善大數(shù)據(jù)平臺的數(shù)據(jù)治理體系,形成數(shù)據(jù)開發(fā)規(guī)范,將數(shù)據(jù)開發(fā)的規(guī)范和數(shù)據(jù)治理要求內(nèi)嵌至數(shù)據(jù)開發(fā)過程,作為強(qiáng)制執(zhí)行要求進(jìn)行約束,確保從源頭上滿足數(shù)據(jù)治理要求。另一方面,與數(shù)據(jù)治理相關(guān)應(yīng)用進(jìn)行對接,將行內(nèi)已有的元數(shù)據(jù)、碼值等作為大數(shù)據(jù)平臺數(shù)據(jù)治理的輸入,復(fù)用行內(nèi)數(shù)據(jù)標(biāo)準(zhǔn),同時將大數(shù)據(jù)平臺產(chǎn)生的元數(shù)據(jù)和碼值輸出到數(shù)據(jù)治理應(yīng)用進(jìn)行統(tǒng)一管理。

三、銀行大數(shù)據(jù)平臺技術(shù)架構(gòu)設(shè)計

為了能更好的實現(xiàn)大數(shù)據(jù)平臺的業(yè)務(wù)功能和預(yù)期的目標(biāo),我們采用了自頂向下的方式對大數(shù)據(jù)平臺進(jìn)行功能設(shè)計,同時在業(yè)務(wù)應(yīng)用過程中不斷優(yōu)化調(diào)整大數(shù)據(jù)平臺業(yè)務(wù)功能,形成了滿足離線處理及數(shù)據(jù)消費(fèi)、實時運(yùn)算及決策兩類應(yīng)用場景,多個物理集群的平臺技術(shù)架構(gòu)。

平臺總體技術(shù)架構(gòu)設(shè)計

技術(shù)架構(gòu)上從下至上分別為數(shù)據(jù)源層、數(shù)據(jù)采集交換層、數(shù)據(jù)存儲與計算層、數(shù)據(jù)能力層、數(shù)據(jù)服務(wù)層以及配套的數(shù)據(jù)管理能力和批次管理能力等。

某銀行大數(shù)據(jù)平臺的技術(shù)架構(gòu)設(shè)計實踐與應(yīng)用

數(shù)據(jù)源包含了行內(nèi)與大數(shù)據(jù)平臺進(jìn)行實時對接的系統(tǒng)、或者為業(yè)務(wù)系統(tǒng)提供業(yè)務(wù)數(shù)據(jù)來源的系統(tǒng)。主要由賬務(wù)類系統(tǒng)、渠道類系統(tǒng)、決策支持類系統(tǒng)等。

數(shù)據(jù)交換層,分為應(yīng)用系統(tǒng)實時接口對接采集、實時旁路數(shù)據(jù)采集、離線批量數(shù)據(jù)采集等三個部分。實時接口對接采集需要業(yè)務(wù)系統(tǒng)配合改造將需要采集的業(yè)務(wù)信息存放在消息隊列中,為了實時業(yè)務(wù)場景提供事件輸入;實時的旁路采集在網(wǎng)絡(luò)通訊層面進(jìn)行數(shù)據(jù)數(shù)據(jù)旁路采集,相對實時接口采集來講,業(yè)務(wù)系統(tǒng)不需要配合改造,是一種業(yè)務(wù)系統(tǒng)無感知的采集方式,比較適用于基于事件的準(zhǔn)實時營銷和推薦類的場景;離線批量數(shù)據(jù)采集在銀行系統(tǒng)中比較成熟,傳統(tǒng)BI系統(tǒng)以及建設(shè)了比較完備的數(shù)據(jù)采集工具,直接復(fù)用現(xiàn)有數(shù)據(jù)采集工具進(jìn)行行內(nèi)數(shù)據(jù)的采集,對于已有工具未采集的數(shù)據(jù),采用自定義開發(fā)程序采集的方式,業(yè)務(wù)空閑時段定時生成數(shù)據(jù)文件,供數(shù)到大數(shù)據(jù)平臺。三類數(shù)據(jù)采集方式基本上能覆蓋大數(shù)據(jù)平臺相關(guān)業(yè)務(wù)應(yīng)用場景。

數(shù)據(jù)存儲與計算層的主要工作是將采集的數(shù)據(jù)進(jìn)行存儲和計算,根據(jù)大數(shù)據(jù)平臺的業(yè)務(wù)應(yīng)用場景,這一層按照業(yè)務(wù)特點(diǎn)的差異劃分了三個不同的區(qū)域,離線數(shù)據(jù)存儲與計算區(qū)、實時計算區(qū)、數(shù)據(jù)應(yīng)用區(qū)。

離線數(shù)據(jù)存儲與計算區(qū)將批量采集的數(shù)據(jù)加載Hadoop集群進(jìn)行集中存儲,同時通過Hive和Spark程序進(jìn)行批量數(shù)據(jù)處理工作,主要進(jìn)行數(shù)據(jù)清洗、標(biāo)準(zhǔn)化、指標(biāo)標(biāo)簽加工等。實時計算區(qū)進(jìn)行基于事件的實時指標(biāo)計算以及實時決策,能夠滿足事中風(fēng)控決策、個性化推薦、事后營銷等業(yè)務(wù)場景需求。數(shù)據(jù)應(yīng)用區(qū)有幾項功能定位:

一是同步離線處理的結(jié)果數(shù)據(jù),通過接口提供給行內(nèi)業(yè)務(wù)系統(tǒng)進(jìn)行數(shù)據(jù)訪問,主要提供用戶的360°畫像數(shù)據(jù)的消費(fèi)。

二是將大數(shù)據(jù)平臺數(shù)據(jù)的加工結(jié)果進(jìn)行數(shù)據(jù)展示,便于業(yè)務(wù)應(yīng)用,比如客戶之間的關(guān)系的查詢和展示,比如用戶的畫像展示和客群篩選等。

三是提供基于大數(shù)據(jù)平臺加工結(jié)果進(jìn)行自助化報表分析等。

數(shù)據(jù)服務(wù)能力輸出設(shè)計

大數(shù)據(jù)平臺具備了幾種對外開放的能力,由數(shù)據(jù)開發(fā)和運(yùn)行能力、自助分析能力、數(shù)據(jù)快速消費(fèi)能力組成。為行內(nèi)的各類數(shù)據(jù)使用人員提供支撐服務(wù)。

某銀行大數(shù)據(jù)平臺的技術(shù)架構(gòu)設(shè)計實踐與應(yīng)用

一是數(shù)據(jù)開發(fā)和運(yùn)行能力,具備基于開發(fā)模板的進(jìn)行可視化和規(guī)范化的進(jìn)行數(shù)據(jù)批量處理程序開發(fā)能力;具備指標(biāo)設(shè)計和管理能力,支持按照不同主鍵進(jìn)行指標(biāo)設(shè)計和加工,基于平臺已整合存儲的數(shù)據(jù)進(jìn)行指標(biāo)口徑配置,每天自動生成指標(biāo)并將指標(biāo)下發(fā)給下游業(yè)務(wù)系統(tǒng)。

二是自助分析能力,是一種讓用戶能夠自助進(jìn)行數(shù)據(jù)理解及分析的能力。主要由數(shù)據(jù)探查工具、靈活自助分析工具、客戶360°視圖服務(wù)等提供核心的自助分析能力。

某銀行大數(shù)據(jù)平臺的技術(shù)架構(gòu)設(shè)計實踐與應(yīng)用

通過數(shù)據(jù)探查工具能讓行內(nèi)各數(shù)據(jù)應(yīng)用開發(fā)人員能快速了解大數(shù)據(jù)平臺已整合的數(shù)據(jù)、數(shù)據(jù)的組織形式、加工口徑等信息,方便應(yīng)用開發(fā)人員基于已加工的數(shù)據(jù)結(jié)果或者基于整合數(shù)據(jù)進(jìn)行二次加工,開發(fā)針對應(yīng)用場景的數(shù)據(jù)消費(fèi)應(yīng)用。向行內(nèi)的數(shù)據(jù)開發(fā)人員、數(shù)據(jù)分析人員、業(yè)務(wù)應(yīng)用人員等提供統(tǒng)一的數(shù)據(jù)檢索引擎,為各類用戶提供無差異的數(shù)據(jù)檢索服務(wù),將靈活自助分析的報表、平臺內(nèi)各種數(shù)據(jù)、平臺應(yīng)用產(chǎn)品、甚至平臺仍未整合的行內(nèi)業(yè)務(wù)數(shù)據(jù)進(jìn)行統(tǒng)一檢索和展示。靈活自助分析工具為行內(nèi)的業(yè)務(wù)用戶提供靈活、自助的報表分析工具,報表工具分析的是加工后的指標(biāo)數(shù)據(jù)或者經(jīng)整合后的數(shù)據(jù)。報表分析工具提供報表分享功能,報表制作完成后能根據(jù)底層數(shù)據(jù)情況自動刷新報表,提供美觀的圖表展示功能。

數(shù)據(jù)探查工具與靈活自助分析工具進(jìn)行深度的應(yīng)用整合,靈活自助分析工具設(shè)計制作的報表可在數(shù)據(jù)探索工具進(jìn)行發(fā)布,發(fā)布后的報表可被全行用戶檢索到,在檢索結(jié)果中僅展示報表的業(yè)務(wù)屬性描述以及對應(yīng)的屬主等信息,對于沒有報表訪問權(quán)限的用戶無法訪問報表內(nèi)容,并提示獲取授權(quán)的途徑;對于已被授權(quán)的用戶能通過檢索結(jié)果“一鍵直達(dá)”報表展示頁。

基于客戶維度的指標(biāo)體系和離線區(qū)的加工結(jié)果形成了客戶360°視圖,通過客戶基本信息、客戶持有產(chǎn)品信息、客戶交易行為信息、客戶與客戶之間的關(guān)系、客戶理財偏好、客戶風(fēng)險屬性等等多維度的指標(biāo)和標(biāo)簽對客戶特征進(jìn)行全面的描述,通過維度和指標(biāo)不斷豐富完善使得客戶畫像越來越清晰,客戶的形象越來越具體。提供了基于客戶360°視圖自助進(jìn)行客群定義和篩選的能力。

數(shù)據(jù)消費(fèi)能力,指的是將大數(shù)據(jù)平臺批量和實時運(yùn)算的結(jié)果運(yùn)用到業(yè)務(wù)交易的各個環(huán)節(jié)中,實現(xiàn)數(shù)據(jù)價值。實時決策引擎基于流計算技術(shù)和客戶360視圖,從業(yè)務(wù)系統(tǒng)實時采集業(yè)務(wù)事件數(shù)據(jù)并進(jìn)行實時指標(biāo)加工,根據(jù)業(yè)務(wù)配置的決策規(guī)則實時運(yùn)算決策結(jié)果。通過對接不同的業(yè)務(wù)事件及定制不同的結(jié)果反饋機(jī)制,能夠為業(yè)務(wù)系統(tǒng)提供實時營銷、個性化推薦、風(fēng)控防欺詐等實時決策能力。通過將大數(shù)據(jù)平臺的指標(biāo)封裝成統(tǒng)一的數(shù)據(jù)服務(wù)接口,提供給行內(nèi)各個業(yè)務(wù)系統(tǒng)進(jìn)行實時調(diào)用,用以輔助交易系統(tǒng)開展業(yè)務(wù)。

平臺服務(wù)層,基于數(shù)據(jù)存儲和計算層提供的能力提供數(shù)據(jù)服務(wù)能力,主要有實時數(shù)據(jù)查詢和消費(fèi)服務(wù)、實時數(shù)據(jù)決策服務(wù)、客群定義與篩選服務(wù)、客戶畫像展示服務(wù)、自助數(shù)據(jù)探索與分析服務(wù)。

平臺管理及治理能力設(shè)計

批次管理服務(wù),調(diào)度服務(wù)負(fù)責(zé)在達(dá)到批次執(zhí)行條件時正常發(fā)起批次,批次運(yùn)行條件設(shè)置比較復(fù)雜且無法滿足大數(shù)據(jù)平臺批次復(fù)雜的依賴關(guān)系設(shè)置。監(jiān)控工具需要能結(jié)合數(shù)據(jù)運(yùn)行過程中的狀態(tài)信息進(jìn)行監(jiān)控,且支持的方式比較單一。結(jié)合調(diào)度服務(wù)和監(jiān)控工具的特點(diǎn),充分發(fā)揮調(diào)度和監(jiān)控的特長,重新設(shè)計了批次管理服務(wù)和批次監(jiān)控規(guī)范,在數(shù)據(jù)處理的關(guān)鍵節(jié)點(diǎn)埋點(diǎn)記錄批次運(yùn)行的狀態(tài)信息,方便進(jìn)行批次運(yùn)行情況監(jiān)控以及上下游數(shù)據(jù)批次依賴關(guān)系維護(hù)等。

在數(shù)據(jù)管理能力上,將數(shù)據(jù)開發(fā)的規(guī)范和數(shù)據(jù)治理要求內(nèi)嵌至數(shù)據(jù)開發(fā)過程,作為強(qiáng)制執(zhí)行要求進(jìn)行約束,進(jìn)行指標(biāo)管理、元數(shù)據(jù)管理、數(shù)據(jù)依賴關(guān)系維護(hù)等。每一份數(shù)據(jù)接入即約定了數(shù)據(jù)生命周期,數(shù)據(jù)開發(fā)工具定期將過期的數(shù)據(jù)、指標(biāo)進(jìn)行清理,確保嚴(yán)格按數(shù)據(jù)生命周期管理數(shù)據(jù);通過維護(hù)數(shù)據(jù)質(zhì)量檢核規(guī)則,定期出具數(shù)據(jù)質(zhì)量簡報,確保能及時發(fā)現(xiàn)數(shù)據(jù)加工過程中的潛在問題。

四、一個典型的業(yè)務(wù)應(yīng)用場景

業(yè)務(wù)場景:針對新發(fā)卡營銷活動,實時向達(dá)到活動資格的新用戶發(fā)送營銷信息。

相關(guān)角色:營銷活動策劃人員、數(shù)據(jù)分析人員、數(shù)據(jù)開發(fā)人員、應(yīng)用開發(fā)人員。

這個場景中,不同角色利用大數(shù)據(jù)平臺提供的能力和服務(wù),將數(shù)據(jù)采集整合加工、業(yè)務(wù)數(shù)據(jù)探索和分析、業(yè)務(wù)系統(tǒng)對接工作等基于大數(shù)據(jù)平臺形成閉環(huán)。

某銀行大數(shù)據(jù)平臺的技術(shù)架構(gòu)設(shè)計實踐與應(yīng)用

1)營銷活動策劃人員提出營銷活動的idea,通過大數(shù)據(jù)平臺的數(shù)據(jù)探查能力了解idea落地執(zhí)行是否具有可行性。

2)應(yīng)用開發(fā)人員根據(jù)業(yè)務(wù)需求,制定數(shù)據(jù)對接方案。通過實時決策能力進(jìn)行指標(biāo)實時加工,并準(zhǔn)實時將決策結(jié)果通知給營銷信息觸達(dá)的應(yīng)用發(fā)送活動達(dá)標(biāo)信息。

3)數(shù)據(jù)開發(fā)人員基于數(shù)據(jù)開發(fā)能力完成營銷效果統(tǒng)計所需數(shù)據(jù)采集工作。

4)營銷活動策劃人員通過數(shù)據(jù)開發(fā)能力設(shè)計支持營銷活動需要的指標(biāo)及指標(biāo)統(tǒng)計口徑,以及設(shè)計營銷效果統(tǒng)計需要的指標(biāo)及口徑;

5)數(shù)據(jù)分析人員通過自助分析能力分析營銷活動效果,并將分析結(jié)果分享給營銷活動策劃人員。

6)營銷活動策劃人員根據(jù)活動的效果,及時調(diào)整營銷策略和廣告資源投放策略,提升營銷活動效果。

五、成效總結(jié)

基本實現(xiàn)預(yù)定的技術(shù)目標(biāo)

經(jīng)過近幾年不斷地摸索和實踐,大數(shù)據(jù)團(tuán)隊整合了客戶、產(chǎn)品、風(fēng)險管控、經(jīng)營決策等各維度的數(shù)據(jù),大數(shù)據(jù)平臺具備了批量數(shù)據(jù)加工和實時決策等基礎(chǔ)能力,實現(xiàn)業(yè)務(wù)系統(tǒng)與平臺的快速對接快。數(shù)據(jù)服務(wù)能力顯著增強(qiáng),業(yè)務(wù)人員對于數(shù)據(jù)使用和理解更加深入,在不同的應(yīng)用場景中均發(fā)揮了大數(shù)據(jù)的價值。

提升數(shù)據(jù)能力發(fā)揮業(yè)務(wù)價值

大數(shù)據(jù)平臺對行內(nèi)業(yè)務(wù)系統(tǒng)的支撐作用,主要有幾個方面。一是基于大數(shù)據(jù)平臺加工的客戶360°視圖對行內(nèi)業(yè)務(wù)創(chuàng)新的支撐作用,為客服部門提升了用戶滿意度,為電營部門提高了電話營銷的成功率,為風(fēng)控部門提供了新的解決思路。二是基于實時數(shù)據(jù)接口,為渠道類系統(tǒng)優(yōu)化用戶體驗提供數(shù)據(jù)支持。通過實時決策服務(wù),為營銷和推薦提供了非常有效的技術(shù)支撐,用戶體驗也有了很大提升;為風(fēng)控提供了新的思路,真正做到了事中阻斷攔截,減少用戶損失。

    本站是提供個人知識管理的網(wǎng)絡(luò)存儲空間,所有內(nèi)容均由用戶發(fā)布,不代表本站觀點(diǎn)。請注意甄別內(nèi)容中的聯(lián)系方式、誘導(dǎo)購買等信息,謹(jǐn)防詐騙。如發(fā)現(xiàn)有害或侵權(quán)內(nèi)容,請點(diǎn)擊一鍵舉報。
    轉(zhuǎn)藏 分享 獻(xiàn)花(0

    0條評論

    發(fā)表

    請遵守用戶 評論公約

    類似文章 更多