浪潮天梭K1系统最佳实践--大连银行新一代基础数据平台

　　大连银行是一家由大连市国有股份、中资法人股份及个人股份共同组成的地方性股份制商业银行。大连全行总行下设27个管理部门，4家中心支行，8家异地分行，全国共130多个营业网点，总资产增长率一直保持在10%-30%。

　　大连银行基础数据平台是大连银行信息系统架构的枢纽，是业务源系统与管理分析类系统数据流转的桥梁，是实现全行信息共享、数据治理和管理分析的关键引擎。基础数据平台通过整合各应用系统数据，实现所有业务数据的集中处理与分发，并基于信息模型将各业务系统数据按主题进行梳理、整合和汇总，以满足不同应用系统不同层次的数据需求。同时，结合最新的IT技术，为了提高银行基础数据处理的效率与准确性，保障未来的基础设备易扩展的需求，大连银行提出了基础数据平台建设的需求。

　　原大连银行基础数据平台情况及挑战

　　原大连银行基础数据平台由IBM小型机和Oracle数据库共同组成基础软、硬件平台，系统拓扑图如图1所示。系统通过ETL层抽取各交易系统（核心系统、信贷系统、中间系统）数据进行加工整合和处理，并输出供企业管理系统使用。此基础数据平台的特点有：（1）输出平台为报表平台、风险管理等分析系统提供标准数据，业务功能较为单一；（2）采用传统关系型数据库，基于Share-Disk架构；（3）仅保留近期业务数据，没有实现对累积历史数据的管理；（4）业务与系统整体架构按照OLTP业务设计，没有针对数据仓库等OLAP业务及海量数据分析场景进行优化。

　　图1 原大连银行基础数据平台架构图

　　此外原大连银行基础数据平台面临着一系列的挑战，包括：（1）计算资源瓶颈：随着大连银行总资产一直保持在近30%的年增长率，不断推出“九钻完美贵宾卡”等金融业务，分行数量不断增多，原平台硬件架构过老，计算资源不足，随之而来的是计算资源性能下降，并且计算资源不能实现平稳扩展，故障率较高，运维难度大等一系列挑战。（2）业务性能瓶颈：在原数据平台架构下，业务流程、作业依赖、调度及执行等多方面设计不合理，严重影响整体性能。原有数据平台不能满足系统业务性能需求，综合信息服务平台跑批时间历时13个小时，汇总层业务历时近11个小时，远远不能满足业务对性能的要求。

　　大连银行新一代基础数据平台解决方案

　　针对原平台的需求及挑战，浪潮与IBM在天梭K1系统中合作，联合文思海辉，为客户带来独特的价值，提供了一体化交付、端到端的解决方案。解决方案拓扑图如图2所示，其中主要硬件平台及操作系统由浪潮天梭K1系统承载，结合IBM DB2 DPF数据库分区功能作为数据库，并由国内金融行业解决方案领先供应商文思海辉提供上层应用平台提供全面支持。

　　图2 大连银行新一代基础数据平台拓扑图

　　与原基础数据平台相比，新一代基础数据平台做了一系列针对性的优化方案，包括：（1）基于当前大连银行数据仓库处于分析期到预测期过渡的关键阶段，解决当前系统载入、卸载缓慢的现状，提高系统对数据分析的效率问题：利用浪潮天梭K1系统强扩展性和高稳定性，DB2数据库的MPP数据库功能，配合文思海辉领先的解决方案，实现数据仓库分析功能的高效稳定。（2）建立完善的数据仓库系统，实现预测功能的完美实现：以当前新一代基础数据平台为基础，在满足当前数据分析功能的基础上，实现管理者对预知系统未来的需求，当前系统配合历史数据，通过预测算法让决策者从被动转向主动的战略决策。

　　通过一系列优化，对新一代基础数据平台进行了测试，测试结果显示新一代基础数据平台性能均大幅优于原系统。测试结果对比如下表所示。

　　其中，4.2倍的文件加载速度提升加快系统响应能力，减少数据集成过程中数据变化和不稳定的窗口期。2.5倍的数据平台处理速度提升带来技术性清洗、维度标准化、数据加工工作的加速。整合处理有9倍多的提升，明显提高数据接收和数据处理的衔接速度，降低系统整合瓶颈。汇总处理效率提升1.5倍左右，减轻系统汇总层和服务层压力，加速存放计算结果。针对储蓄分户、协议余额历史的测试项目，明显提升数据卸载速度，减轻整个基础数据平台压力。

　　浪潮天梭K1系统+IBM DB2 DPF+文思海辉上层平台整体解决方案的技术特点主要有：（1）依靠高可靠的基础硬件K1平台以及基础软件及高可用部署方案实现系统多维保障。在硬件层面，天梭K1系统各个软硬件多层冗余，全模块热插拔，在软件层面，浪潮K-UX操作系统具有多重容错机制保障系统稳定性，数据库DB2采用share-nothing架构，提高了系统性能和扩展性，BCP双机高可用实现了双机互备。（2）弹性伸缩的计算资源，依托软硬多维调度机制，可依业务需要实现近线性的纵向和横向伸缩。（3）通过调度机制将源系统串行加载方式，调整为并发加载，并进行重构加速，从软硬件架构、作业设计等层面实现重构，提高数据加载、处理和卸载速度。（4）针对存储过程内部顺序调用重量级处理进行优化，降低作业间顺序依赖，避免重量级存储过程串行调用，并充分利用重构加速系统。（5）依托于强大的技术团队和全面的综合保障力量，浪潮“K迁工程”专业服务，迁移过程有一套完善的方法论作为指导，历经评估、计划、验证、测试、上线五大阶段，可保障操作系统、数据库以及上层应用的平滑切换，整体平台移植代码修改量少于1%，实现快速上线。

　　大连银行新一代基础数据平台解决方案客户收益

　　管理提升，业务洞察

　　通过构建商业智能数据仓库平台，实现了业务数据收集、管理与分析；挖掘数据知识与价值，洞察业务，提升了业务管理与决策水平。

　　迅捷决策，精准营销

　　高性能、高扩展的解决方案架构助力大连银行商业智能分析平台3.5倍以上效率提升；借助商业智能，实现了即席查询与预测分析，精准定位，主动营销。

　　风险管控，降低TCO

　　高可用的方案架构，专家专业的服务运维保障，助力银行从容实现风险管控；可用性99.9994%以上，配合高可用解决方案，保障系统实时在线，“零”计划外宕机；高性价比、端到端交付软硬件平台创新，降低了TCO。

　　创新加速，驱动未来

　　K1硬件分区与DB2 DPF技术的方案创新，可扩展到1000个节点，实现资源随需调度，性能近线性增长；基于BI平台，银行可实现业务快速开发与创新；浪潮、IBM、文思海辉多年的行业积累，满足大连银行每年30%的业务增长，共赢未来。

　　为什么选择浪潮天梭K1系统

　　浪潮天梭K1系统是我国首款自主研发的关键应用主机，打破了国外厂商的垄断，使中国成为继美国、日本之后全球第三个掌握关键应用主机技术的国家。

　　浪潮天梭K1系统总共申请了包括3项国际专利在内的346项专利及软件著作权，突破了多项核心技术，建立了完整的自主化技术体系。浪潮K-UX是中国唯一通过Unix 03标准认证的Unix操作系统，并且是唯一通过国内等保三级的Unix操作系统。

　　2015年1月9日，浪潮天梭K1系统被授予国家科技进步一等奖，是近年来计算机领域获得的第一个国家科技大奖，表彰其在推进国家信息化建设和保障关键信息安全方面起到的关键性作用。

　　目前浪潮天梭K1系列具有包含K1 910、K1930、K1950的完善的产品线，满足客户从低端到高端的全部需求。系统最大支持32颗处理器，256个计算核心，4TB内存，凭借独特的体系结构、监控系统、散热系统、热插拔冗余设计及容错操作系统完美展现了极高的可靠性、可扩展性、灵活性、可用性、安全性和可管理性，整体性能达到国际先进水平，可完全满足关键行业应用的需求，并已在政府、金融、电信、能源、公安、企业、交通等13大关键行业实现广泛应用。