阿胶厂家
免费服务热线

Free service

hotline

010-00000000
阿胶厂家
热门搜索:
技术资讯
当前位置:首页 > 技术资讯

OceanStor助中国建行会计档案管理系统的大数据压力

发布时间:2020-07-21 19:31:32 阅读: 来源:阿胶厂家

我们已经跨入了大数据时代,仅从数据量的增长这一指标来看,我们面临的大数据处理压力已经非常巨大。IDC的预测数据显示,2020年,全球数据总量将达到40ZB,数据每年的增长速度为55%。数据与人们的工作、生活正变得密切相关,尤其是在像金融、电信等关系国计民生的行业,数据正成为其业务发展的核心。

中国建设银行(以下简称建行)就是一例,由于需要归档的票据影像数据急剧增加,而原有的光盘归档系统不仅归档速度慢、查询周期长,而且不易扩展,满足不了数据日益增长的需求,建行急需一套高效且具有弹性的新型归档解决方案。经过多方调研和评估,建行最终选择了华为OceanStor 9000大数据存储系统,该系统采用全分布式架构,不仅具备良好的弹性,符合银行未来业务发展的趋势,而且单一文件系统具有高达40PB的扩展能力,可以满足建行数据存档15年的容量需求。OceanStor9000存储系统以磁盘替代光盘塔的归档方式,提升了检索和查询速度,大大减少了人工成本。

PB级数据处理带来挑战建行是我国5大国有商业银行之一,在全球和国内设有众多分支机构。截至2013年6月底,建行总市值为1767亿美元,居全球上市银行的第五位,它管理的资产规模超过12万亿元。在《福布斯》2014全球企业2000强榜单中,建行名列第二。

建行现有的会计档案管理系统(以下简称ADMS),通过WebService方式对外围系统提供内容归档、获取、修改和删除等服务,总行与分行的ADMS系统之间形成交互访问。截至2013年6月,建行分行的ADMS系统管理的在线数据量已经达到1850TB,近线数据量也突破了1700TB大关。面对如此庞大的数据存储量,建行以前用于数据归档的光盘塔已经捉襟见肘。

据建行的有关人员介绍,目前建行每天处理的交易量达到2000万笔,分布在总行和全国38个分行,当天对交易记录进行扫描,然后通过ADMS系统进行处理。所有的数据内容存储分为在线和近线两部分,按照既有的分层存储策略,在线数据通常要保留3年,期满后数据则要归档到光盘塔中进行长期保存,以便后续的检索和查询。

随着业务量的增加,存储的数据总量已经达到PB级,原来针对TB级数据量设计的归档方式已经无法满足业务发展的需要,瓶颈主要表现在以下3方面:

数据写入压力越来越大。建行总行与38个分行每天需要归档的交易量达2000万笔,这些交易涉及的票据影像数据需要快速导入到归档系统中,然而原有的光盘归档方式速度非常慢,数据导入时间长,严重影响了工作效率。

归档后的查询压力增加。3年需要归档的交易纪录已达到100亿条,仅靠现有光盘归档方式已不能满足快速检索和查询的要求,影响了服务质量。按照建行的发展目标,未来总的交易记录可能会上升到400亿条,现有的归档方式显然无法担此重任。

存储压力倍增。归档的数据需要至少保存15年。建行预测,未来全国各分行的数据总量将超过60PB,但是现有的归档系统并不具备大规模扩展的能力,很难适应业务快速发展的要求。

快速增长的海量数据使得建行ADMS的原有近线存储(光盘塔设备)归档速度慢、查询响应时间长、无法大规模扩容等缺陷暴露无疑。为了化解大数据增长与传统归档系统低效率之间的矛盾,同时满足建行快速发展的业务需求,2013年11月,建行宣布将进一步强化数据大集中,在总部建立4个归档大区,方便总行直接检索和查询;在总行及各一级分行采用华为OceanStor 9000大数据存储解决方案,逐步替换原有的光盘塔。OceanStor 9000采用全分布式架构,其性能、容量和扩展能力均在业界同类产品中处于领先地位,不仅可以解决建行在存储扩展性方面的后顾之忧,而且可以将数据的查询速度由原来的30分钟响应提升至即时响应。

OceanStor 9000:为大数据而生大数据的出现对于数据的存储、管理、分析等提出了前所未有的挑战。企业需要一个融合、高效、易扩展的大数据存储平台来解决当前难题。OceanStor 9000是华为针对大数据推出的一款集存储、归档和分析能力于一体的存储系统,它采用全对称分布式架构,具备业界领先的卓越性能、大规模的横向扩展能力和超大单一文件系统,可广泛应用于广电媒资、卫星测绘、基因测序、能源勘探、科研教育等多种大数据业务场景。

华为OceanStor 9000在以下几方面拥有突出的能力。首先,华为OceanStor9000是一款具有强大性能的分布式存储系统,这让它在大数据处理时游刃有余。OceanStor 9000基于Share Nothing全对称分布式架构,文件数据和元数据均匀分布在各个节点上,支持多个节点并发访问,最大可支持55TB的全局缓存,为用户带来极速的性能体验,消除了系统的性能瓶颈。此外,其单一文件系统的存储容量高达40PB;其次,华为OceanStor 9000支持线性的容量与性能扩展。华为OceanStor9000的横向扩展架构可以支持从3个节点到288个节点的平滑扩展,容量和性能均随节点数量的增加呈线性增长;最后,华为OceanStor 9000大数据存储采用单一文件系统,同时整体方案中设备集中统一管理,使用和管理都很简单;软件平台可自动化部署和配置,实现一键式快速扩容,单节点扩容60秒之内即可完成。正是因为华为OceanStor 9000在大数据处理方面的优异表现,才最终赢得了建行的青睐。

为应对大数据的挑战,存储系统应以更快、更大、更灵活扩展的存储基础架构为出发点,增强融合的数据挖掘和数据归档能力。华为OceanStor 9000正是致力于在这些方面进行持续创新,以满足日益增加的大容量和高性能的存储需求,帮助客户打造效率更高的大数据存储平台。OceanStor 9000大数据存储系统已经在国内外的金融票据影像归档、广电媒资、卫星测绘、智慧城市视频监控存储分析等领域得到了广泛应用和验证。

客户的声音

“华为OceanStor 9000采用先进的Scale-out全分布式架构,在可靠性、可扩展性、性能和可维护性上处于业界领先水平, 多个节点并发访问,可提供高并发、高带宽、低时延的存储性能,满足建行的应用需求。”

——中国建设建行工程师

重庆面部填充医院

济南磨骨

重庆磨骨价格

相关阅读