銀行業大數據應用面臨的四大挑戰

隨著大數據時代的開啟,如何通過大數據技術推動業務發展和創新已成為銀行業最近重點關注和討論的話題。雖然已有部分銀行啟動了相關工作,但仍普遍存在數據來源和存儲模式不能有效支撐大數據分析、數據分析模型和工具不成熟、專業人才匱乏和新增投入較大等問題,在一定程度上阻礙了大數據技術在銀行業的全面推廣和應用。

一、面臨的主要挑戰

1.數據來源和存儲模式不能有效支撐大數據分析

近年來大部分銀行已上線了ODS(Operational Data Store)系統或數據倉庫系統,通過將分布在各個源系統中的原始數據進行清洗、抽取和轉換后按照一定的主題分類將數據進行了集成和存儲,后續的數據挖掘和分析工作也大多是基于入倉數據開展的。雖然使數據的精確性和一致性得到了提升,但同時在一定程度上消除了數據的混雜性和關聯性。而根據大數據理論,源數據適度混亂并不是缺點,反而能創造更多價值。如果因為追求數據來源的精準和純凈,而犧牲了原始數據的多樣性,反而可能會造成趨勢預測的延遲或誤判。此外,現有的數據倉庫是按照主題分類對入庫數據進行索引,雖然可以提高既定主題的檢索效率和分析效率,但對于其他新增屬性的檢索和分析則變得較為困難(注:海量數據一旦按照A、B、C三個屬性建立了索引并進行了存儲,如果要求對D、E、F屬性進行檢索和排序,則需要遍歷所有數據,效率會變得極低。臨時增加新的主題或索引,則需要改變底層設計)。由于大數據應用的需求具有多樣性和易變性,傳統的存儲模式很難滿足不斷變化的應用需求。

2.缺少成熟的數據分析模型和工具

大數據應用的核心是把數學算法運用到海量數據上來預測事件發生的可能性,因此強有力的數學工具和數學模型至關重要。但對于采用哪種數據算法或分析模型來實現特定的預測目標,銀行業內尚缺少最佳實踐案例,也很難找到一個具有普遍適用性的模型。如何準確把握或預測銀行客戶潛在的金融需求,到目前為止還沒有任何技術能替代銀行的客戶經理。為了使一個數據模型具有可用性或是達到商務智能化,必須要經過大量的測試應用、反復進行差錯分析、不斷地調整修訂,不可能一蹴而就。在這方面,各家銀行機構仍處于起步探索階段,還有很長的路要走。

3.專業的數據分析人員匱乏

大部分銀行尚未建立專業的數據分析團隊,也缺乏數據分析的專業能力和經驗。成熟的數據分析團隊應具備4個條件:熟悉銀行的業務細節、掌握數據分析工具操作、對數據價值的敏感度和對數據提煉融合的能力。目前很多數據分析師較擅長的是通過數據分析對已發生的問題查找原因,但缺乏發掘未知問題的能力也缺少對趨勢預測的把握,而大數據的價值恰恰在于預測未來。如果只熟悉數據分析工具操作,卻不熟悉銀行的業務和運作細節,就無法從既有數據中挖掘出新的價值,達到推動銀行業務發展的目的。從業內目前的情況看,同時符合上述條件的復合型人才少之又少,專業分析團隊的建設任重道遠。

4.新增成本投入較高

大數據技術對系統性能要求非常高,對于銀行機構而言,既要滿足應用系統聯機交易的實時性(OLTP),又要滿足數據倉庫聯機分析的處理效率(OLAP),以及關鍵業務應用的高可用性需求,不僅需要增加CPU數量、內存空間、海量存儲、網絡帶寬等硬件投入,甚至需要改變銀行的IT基礎架構(例如:數據存儲方式),這將產生大量的新增開支,包括:硬件的采購成本、系統的運維成本、占地空間成本和架構改造的時間成本,而且在某些情況下還容易造成資源的閑置。在短時間內,技術上的高投入未必會在業務上帶來立竿見影的高收益,投入和產出的不平衡,在一定程度上會給相關團隊帶來較大的心理壓力,也可能影響決策層對大數據技術的支持力度。

二、監管建議

一是嘗試從多個數據源系統直接抽取原始數據進行分析和應用,平衡數據的精準性和混雜性,提高數據模型和工具對數據質量的“容忍度”,通過提升分析效率、縮減數據處理時間來彌補因部分信息缺失或不一致帶來的價值損耗。此外,各銀行應積極探索適合銀行業大數據應用的數據存儲架構,可以通過采用集群存儲和分布式處理技術(例如Hadoop)和創新性的索引機制等手段,在保證業務連續性的同時,增強數據存儲的可擴展性和靈活性。

二是建議銀行機構采用與科研單位聯合或是業內多家機構合作的方式,開展大數據分析模型和工具的研發工作,加快推出一些基本成熟的、具有實用性的應用模型,以便總結相關經驗,起到示范引領作用。

三是盡快建立一支融市場營銷、產品推廣、客戶關系和技術支持等人才于一體的數據分析團隊。該團隊應該獨立于IT范疇之外,跳出專業局限,更多地從業務發展和經營決策方面考慮問題,使數據挖掘真正達到服務經營決策、推動業務創新的目標。

四是通過存儲容量優化、內存計算技術、資源虛擬化等手段,在保證數據分析處理性能的同時,盡量降低成本投入,并可以利用現有災備中心資源和云計算等方式,提高固有IT資源的利用率。銀行機構的決策層也應給予大數據應用更多的耐心和發展空間。

银弹游戏 红包麻将微信 闲来麻将官网网址是多少 安徽快三预测软件 最近传奇赚钱的 河南快三 澳洲pk10人工免费计划 福建快3带线基本走势图 购买浙江十一选五 河北时时彩群 500万网即时比分 陕西快乐10分开奖 电脑可以赚钱的工作 贵州麻将规则图解 重庆时时分析软件老版 手机彩票计划软件哪个好 贵州快三走势图一定牛快三