金融行业和大数据的那些事

共建新一代“数据驱动型”金融企业,优化运营效率,提升管理水平,最大程度降低金融风险。

金融业的现状如何?

大数据是继云计算、物联网之后IT产业的又一次技术变革。所谓“大数据”,就是公司在日常运营中生成、累积的用户网络行为的数据。这些数据的规模庞大,以至于不能用GB或TB来衡量。

随着金融企业数字化转型,金融企业对于自身大数据的需求越来越明显,场景也越来越具体化。虚拟化及电子化交易,成为大数据时代金融行业发展的特征。能否充分利用自己的数据优势,将成为金融机构转型升级的关键。

因此,积极针对大数据布局,从战略层面应对大数据时代的挑战,推进并建立起数据驱动型发展方式的金融机构,将获得比同业更高的效率。从而,有效提升交叉销售、投资管理市场份额及能力,并由此培育出自己的信息核心竞争力。

“大数据”为金融企业带来什么?


金融行业和大数据的那些事


以前,人们只把“数据”看做是客户来办理业务过程中所产生的一种附属物。

现在,在客户办理业务的信息中,蕴含着客户各种各样的需求,如果把成千上万条这类的信息积累下来,就能精准地洞察客户需求,从而设计出满足客户需求的新产品,实现个性化营销。

可见,数据已成为企业的核心资产,掌控数据就可以深入洞察市场,从而做出快速而精准的应对策略,这也就意味着巨大的投资回报。企业战略也将从“业务驱动”转向“数据驱动”,数据化决策是企业未来的发展方向。对数据进行有效的管理和运用,能使企业在转型变革过程中拥有绝对的核心竞争力。

过去很多企业对自身经营发展的分析只停留在数据和信息的简单汇总层面,缺乏对客户、业务、营销、竞争等方面的深入分析。如果决策者只凭主观与经验对市场进行评估而制定决策,将导致战略定位不准,存在很大风险。在大数据时代,企业通过收集、分析企业内部和外部的数据,获取有价值的信息。通过挖掘这些信息,企业可以预测市场需求,进行智能化决策分析,从而制定更加行之有效的战略。

大数据最至关重要的方面,就是它会直接影响企业怎样做决策、谁来做决策。

在信息有限、获取成本高昂的时代,让身居高位者凭借个人经验和直觉做决策,情有可原。但是,在大数据时代,就要让数据说话!

永洪的解决方案

永洪为金融企业提供战略与战术兼备的解决方案。

(一)业务架构

面对大数据的挑战,在战略层面上,金融企业应当建立“数据驱动型”发展模式,完善数据运营体系,落实大数据运营中心;在战术层面上,通过运营优化、管理提升、风险控制等应用,全面提升金融核心价值和竞争力。


金融行业和大数据的那些事


图 | 银行大数据运营中心建设架构图

银行大数据运营中心建设的当务之急应该围绕运营优化、管理提升、风险控制三大建设目标,主要体现为:

1、以用户数据为核心的运营优化,通过客户画像、精准营销、产品优化、舆情分析、市场和渠道分析,全面提高运营效率。

2、以投入产出与价值贡献为导向的管理提升,通过绩效考核、领导驾驶舱、管理会计平台等应用真正实现精细化管理。

3、利用多维度的安全判断和更细粒度的建模及预判,实现中小企业货款评估、实时欺诈交易分析、反洗钱业务分析等应用,加强对商业银行风险的识别、评价和预答,有效防范金融风险。

(二)技术架构


金融行业和大数据的那些事


图 | 永洪科技MPP数据集市架构图

从数据源到最终展现分成如下几层——

·ETL层:采用PC server作为ETL前置机,将数据清洗、转换、装载。

·离线分析计算平台:采用Hadoop分布式存储,支持结构化和非结构化数据存储,并且当数据量增大时方便横向扩展(Scale-out),可将存储层的数据进行加工。根据分析需要,可进行数据模型计算、挖掘分析等时效性低的大规模批量计算任务。

·实时在线分析平台:采用永洪高性能MPP数据集市作为介质。MPP分布式的数据集市支持高并发和高可用,每个数据集市是基于一个主题做好轻量建模的细节数据,数据被分布式存储在每个节点上,同时又做好了备份。数据按照列存储的方式,被高效压缩,打好标签,存储在磁盘中。当需要查询计算时,采用内存计算来进行数据计算,并且每台机器节点会同时计算,最终会将结果送应用层做展现。

·应用层:利用永洪敏捷BI提供自服务分析工具,对离线和在线分析平台中的数据进行自服务可视化展现。无论是终端用户还是IT开发人员都可以通过主流浏览器来访问BI系统,用户还可通过移动终端来访问系统。BI系统提供系统监控、权限多级管理、多维数据分析等功能,同时还支持自服务式报表设计和数据分析。

永洪方案的价值

1.高性价比,低TCO

整个系统架构,摒弃了传统系统常见的向上升级(Scale-Up)思想,不管是数据集市还是BI前端,都支持横向升级(Scale-Out)。随着企业的业务增长,数据分析需求都会大幅增长,基于X86 PC Server集群的平台架构十分关键。在这种架构下,我们不用采购昂贯的小型机去支撑高并发、海量数据计算和数据分析业务的发展,而是采购多台普通的PC Server搭建集群,建设高性价比的分析平台。

2.敏捷:快速发布,持续迭代,拥抱变化

数据层敏捷:数据层无需做数据的预先汇总计算,只要将数据关联做好,导入的数据还是细节数据,所有的计算都是在用户点击时发起的实时计算。因此,数据层只需再建立一个轻量模型,导入新需求的细节数据即可。

应用层敏捷:采用灵活的ROLAP机制,每个点击发起的需求都会实时拼出SQL,送给计算层去计算,比较容易适应业务变化。模块层次少,建模完就可以直接设计报表和Dashboard,或进行探索式分析。对终端用户来说,也非常简单易用。

3.自服务式和探索式多维分析

基于主题的集市,已经将物理表结构在语义上转义成便于理解的逻辑结构,终端用户通过拖拉拽的方式可以轻松自定义报表或仪表盘。前端系统具备过滤、钻取、缩放、关联、变换、动态计算、链接等交互和分析能力,用户可以通过其发现问题、找到答案,做出商业决定,形成探索式的分析。

4.高可用性

离线分析平台和在线分析平台都是分布式架构。数据存储是分布式的,数据的计算也是分布式的,还带有备份机制和监控机制。当某一台机器宕机,其他机器会自动承担所有计算。该分析计算平台应用广泛,即使客户数据量达到上百T,依旧运行稳定可靠。该分布式数据集市支持对计算和存储节点进行热插拔扩展,可以从一个节点扩展到几十个甚至上百个节点。

5.高并发性

在线分析平台支持高并发。永洪的分布式数据集市,是列式存储的,采用良好的内存计算技术,可基于多台存储和计算节点并行工作,非常适合海量数据的实时数据分析。

“永洪BI操作起来十分简单,只需点击拖曳几下分析指标,系统就自动生成了所需报表。这极大地方便了该行那些没有技术背景的业务人员和运营人员独立自主地完成大数据分析操作,让决策者的任意需求都可以在一天内实现。它真是一个高性能的行长驾驶舱系统。”


分享到:


相關文章: