中国XX银行华为大数据平台系统成功案例
案例概要:
本案例将介绍中国某大型银行使用华为FusionInsight HD 大数据平台实现机构员工、产品研发、定价管理、合约管理、客户结算、债券承分销、对公网银、客户信息管理、增值税管理子系统、电子印章、担保管理、新一代征信管理和会计档案等业务组件,需要使用非结构化数据的(包括:JPG、Word和PDF)存储、调阅与打印功能。
背景:
中国XX银行部分业务需要非结构化数据的上传、下载、调阅与打印由客户化开发的应用提供接口功能支持,但非结构化数据的存储与生命周期管理需要使用华为大数据平台软件FusionInsight HD,本方案基于客户需求制定。
亮点:
本项目采用的华为存储 华为FusionInsight HD是一个分布式数据处理系统,对外提供大容量的数据存储、查询和分析能力,可解决各大企业的以下需求:
1、快速地整合和管理不同类型的大容量数据
2、对原生形式的信息提供高级分析
3、可视化所有的可用数据,供特殊分析使用
4、为构建新的分析应用程序提供开发环境
5、工作负荷的优化和调度
技术特点
华为FusionInsight HD发行版紧随开源社区的最新技术,快速集成最新组件,并在可靠性、安全性、管理性等方面做企业级的增强,持续改进,持续保持技术领先。 FusionInsight HD的企业级增强主要表现在以下几个方面。
安全
• 架构安全
FusionInsight HD基于开源组件实现功能增强,保持100%的开放性,不使用私有架构和组件。
• 认证安全
基于用户和角色的认证统一体系,遵从帐户/角色RBAC(Role-Based Access Control)模型,实现通过角色进行权限管理,对用户进行批量授权管理。
• 支持安全协议Kerberos,FusionInsight HD使用LDAP作为帐户管理系统,并通过Kerberos对帐户信息进行安全认证。
• 提供单点登录,统一了Manager系统用户和组件用户的管理及认证。
• 对登录FusionInsight Manager的用户进行审计。
• 文件系统层加密
Hive、HBase可以对表、字段加密,集群内部用户信息禁止明文存储。
• 加密灵活
加密算法插件化,可进行扩充,亦可自行开发。非敏感数据可不加密,不影响性能(加密约有5%性能开销)。
• 业务透明
上层业务只需指定敏感数据(Hive表级、HBase列族级加密),加解密过程业务完全不感知。
可靠
• 所有管理节点组件均实现HA(High Availability)
业界第一个实现所有组件HA的产品,确保数据的可靠性、一致性。NameNode、Hive Server、HMaster、Resources Manager等管理节点均实现HA。
• 集群异地灾备
业界第一个支持超过1000公里异地容灾的大数据平台,为日志详单类存储提供了迄今为止可靠性最佳实践。
• 数据备份恢复
表级别全量备份、增量备份,数据恢复(对本地存储的业务数据进行完整性校验,在发现数据遭破坏或丢失时进行自恢复)。
易用
• 统一运维管理
Manager作为FusionInsight HD的运维管理系统,提供界面化的统一安装、告警、监控和集群管理。
• 易集成
提供北向接口,实现与企业现有网管系统集成;当前支持Syslog接口,接口消息可通过配置适配现有系统;整个集群采用统一的集中管理,未来北向接口可根据需求灵活扩展。
• 易开发
提供自动化的二次开发助手和开发样例,帮助软件开发人员快速上手。
金融领域典型应用场景如图1所示:
目的和受益
面对互联网金融的竞争压力,金融企业急需重构以大数据分析挖掘为基础的决策和服务体系,提升自身竞争力和客户满意度。在大数据时代,银行将从以交易为中心转向以数据为中心,以应对更多维、更大量、更实时的数据和互联网业务的挑战。
华为FusionInsight HD可以从不同方面解决金融企业的问题,提升其竞争力。例如:
• 历史交易明细实时查询业务
实时查询用户的历史交易明细,能够将查询范围从1年提升到7年以上;能够实现百TB级历史数据表的毫秒级查询。
• 实时征信业务
用户信用卡征信时间由3天左右减少到10分钟以内。
• 小微贷业务预测
TOP 1000小微贷倾向用户预测准确率比传统模式提高40倍以上。
• 精准营销
• 极大缩短分布式网银日志的收集周期,基于网银日志的用户行为统计与分析,提供精确营销,极大提升了网银用户体验效果。
• 只需不到原来20%的推荐短信,就可基本覆盖原来全部的有效购买用户,实现精准营销。