OceanStor助中国建行会计档案管理系统的大数据压力

我们已经跨入了大数据时代，仅从数据量的增长这一指标来看，我们面临的大数据处理压力已经非常巨大。IDC的预测数据显示，2020年，全球数据总量将达到40ZB，数据每年的增长速度为55%。数据与人们的工作、生活正变得密切相关，尤其是在像金融、电信等关系国计民生的行业，数据正成为其业务发展的核心。

中国建设银行（以下简称建行）就是一例，由于需要归档的票据影像数据急剧增加，而原有的光盘归档系统不仅归档速度慢、查询周期长，而且不易扩展，满足不了数据日益增长的需求，建行急需一套高效且具有弹性的新型归档解决方案。经过多方调研和评估，建行最终选择了华为OceanStor 9000大数据存储系统，该系统采用全分布式架构，不仅具备良好的弹性，符合银行未来业务发展的趋势，而且单一文件系统具有高达40PB的扩展能力，可以满足建行数据存档15年的容量需求。OceanStor9000存储系统以磁盘替代光盘塔的归档方式，提升了检索和查询速度，大大减少了人工成本。

PB级数据处理带来挑战建行是我国5大国有商业银行之一，在全球和国内设有众多分支机构。截至2013年6月底，建行总市值为1767亿美元，居全球上市银行的第五位，它管理的资产规模超过12万亿元。在《福布斯》2014全球企业2000强榜单中，建行名列第二。

建行现有的会计档案管理系统（以下简称ADMS），通过WebService方式对外围系统提供内容归档、获取、修改和删除等服务，总行与分行的ADMS系统之间形成交互访问。截至2013年6月，建行分行的ADMS系统管理的在线数据量已经达到1850TB，近线数据量也突破了1700TB大关。面对如此庞大的数据存储量，建行以前用于数据归档的光盘塔已经捉襟见肘。

据建行的有关人员介绍，目前建行每天处理的交易量达到2000万笔，分布在总行和全国38个分行，当天对交易记录进行扫描，然后通过ADMS系统进行处理。所有的数据内容存储分为在线和近线两部分，按照既有的分层存储策略，在线数据通常要保留3年，期满后数据则要归档到光盘塔中进行长期保存，以便后续的检索和查询。

随着业务量的增加，存储的数据总量已经达到PB级，原来针对TB级数据量设计的归档方式已经无法满足业务发展的需要，瓶颈主要表现在以下3方面：

数据写入压力越来越大。建行总行与38个分行每天需要归档的交易量达2000万笔，这些交易涉及的票据影像数据需要快速导入到归档系统中，然而原有的光盘归档方式速度非常慢，数据导入时间长，严重影响了工作效率。

归档后的查询压力增加。3年需要归档的交易纪录已达到100亿条，仅靠现有光盘归档方式已不能满足快速检索和查询的要求，影响了服务质量。按照建行的发展目标，未来总的交易记录可能会上升到400亿条，现有的归档方式显然无法担此重任。

存储压力倍增。归档的数据需要至少保存15年。建行预测，未来全国各分行的数据总量将超过60PB，但是现有的归档系统并不具备大规模扩展的能力，很难适应业务快速发展的要求。

快速增长的海量数据使得建行ADMS的原有近线存储（光盘塔设备）归档速度慢、查询响应时间长、无法大规模扩容等缺陷暴露无疑。为了化解大数据增长与传统归档系统低效率之间的矛盾，同时满足建行快速发展的业务需求，2013年11月，建行宣布将进一步强化数据大集中，在总部建立4个归档大区，方便总行直接检索和查询；在总行及各一级分行采用华为OceanStor 9000大数据存储解决方案，逐步替换原有的光盘塔。OceanStor 9000采用全分布式架构，其性能、容量和扩展能力均在业界同类产品中处于领先地位，不仅可以解决建行在存储扩展性方面的后顾之忧，而且可以将数据的查询速度由原来的30分钟响应提升至即时响应。

OceanStor 9000：为大数据而生大数据的出现对于数据的存储、管理、分析等提出了前所未有的挑战。企业需要一个融合、高效、易扩展的大数据存储平台来解决当前难题。OceanStor 9000是华为针对大数据推出的一款集存储、归档和分析能力于一体的存储系统，它采用全对称分布式架构，具备业界领先的卓越性能、大规模的横向扩展能力和超大单一文件系统，可广泛应用于广电媒资、卫星测绘、基因测序、能源勘探、科研教育等多种大数据业务场景。

华为OceanStor 9000在以下几方面拥有突出的能力。首先，华为OceanStor9000是一款具有强大性能的分布式存储系统，这让它在大数据处理时游刃有余。OceanStor 9000基于Share Nothing全对称分布式架构，文件数据和元数据均匀分布在各个节点上，支持多个节点并发访问，最大可支持55TB的全局缓存，为用户带来极速的性能体验，消除了系统的性能瓶颈。此外，其单一文件系统的存储容量高达40PB；其次，华为OceanStor 9000支持线性的容量与性能扩展。华为OceanStor9000的横向扩展架构可以支持从3个节点到288个节点的平滑扩展，容量和性能均随节点数量的增加呈线性增长；最后，华为OceanStor 9000大数据存储采用单一文件系统，同时整体方案中设备集中统一管理，使用和管理都很简单；软件平台可自动化部署和配置，实现一键式快速扩容，单节点扩容60秒之内即可完成。正是因为华为OceanStor 9000在大数据处理方面的优异表现，才最终赢得了建行的青睐。

为应对大数据的挑战，存储系统应以更快、更大、更灵活扩展的存储基础架构为出发点，增强融合的数据挖掘和数据归档能力。华为OceanStor 9000正是致力于在这些方面进行持续创新，以满足日益增加的大容量和高性能的存储需求，帮助客户打造效率更高的大数据存储平台。OceanStor 9000大数据存储系统已经在国内外的金融票据影像归档、广电媒资、卫星测绘、智慧城市视频监控存储分析等领域得到了广泛应用和验证。

客户的声音

“华为OceanStor 9000采用先进的Scale-out全分布式架构，在可靠性、可扩展性、性能和可维护性上处于业界领先水平， 多个节点并发访问，可提供高并发、高带宽、低时延的存储性能，满足建行的应用需求。”

——中国建设建行工程师

重庆面部填充医院

济南磨骨

重庆磨骨价格