form-Load,ETL)集群平台。ETL集群平台是数据价值链中控制数据流动的中枢,是所有内外部数据管道的咽喉。主要职责是各种类型的内外部源数据的抽取、脏数据的清洗、根据既定的规则进行标准化的转换和有效数据的装载与分发。为了确保数据价值链中数据流动的效率和质量,ETL必须具有强大的容错能力,支持源数据重新整合、断点续传等,任务能够智能调度,过程必须智能监控。Р 2.数据流程中间平台。经过ETL平台进入金融大数据平台的数据有两个渠道提升数据的价值:一个是利用大数据平台本身的技术,应用数据挖掘相关技术主动创造价值;另一个是把源数据直接输送到数据供应链的下游系统中再利用。其中,主动创造价值分为支撑业务发展和引领业务发展两种类型:第一种是根据业务需求定制化的创造业务需求的数据,帮助指导业务部门开展工作;第二种是应用大数据相关技术挖掘分析存量数据可能具有的价值,并把分析结果提供给业务部门,验证和指导业务创新。下游系统关键的是客户关系管理、绩效管理、银监监管和资产内部转移定价等。这些系统通过对接受的数据进行主动分析,帮助金融行业提高管理效率和质量、客户服务质量和接受银监监管,最大化数据资产的价值。目前,金融企业中该平台传统的数据展现形式是ODS(Operational Data Store,ODS)和EDW(Enterprise Data Warehouse,EDW)平台。ODS中的数据保持与源数据的比为1:1,有利于下游系统对源数据的重用,保持数据资产本身最原始的价值和特征。然后,各个金融企业结合自己业务特征和战略规划,通过一系列的技术手段促进数据资产在平台中持续循环的流动,实现数据价值的转移和增值。这种数据持续流动的方式有利于数据价值链的横向和纵向延伸,技术有效地表现手段是EDW。随着业务发展和技术创新的快速推进,为了更加有效的传递数据价值,EDW的内容和形式可以持续迭代的丰富。
全文预览
