智慧之城:曙光公司2013年大数据创新应用盘点

来源:kaiyun体育官方人口   
2013/12/2 13:49:31
在大数据时代,行业大数据应用已然构建出一张四通八达的智慧网络,并赋予城市建设和管理者拥有大规模数据存储、活性以及解释、运用数据的能力。

 
中国某银行大数据平台:实现PB级跨越,历史数据再获新生
 
 
图3:某银行的大数据处理平台
 
之前,该银行运营多年累积下的数据量早已经过PB,但规划的存储量则是500TB,在传统架构下只能直接将数据备份到磁带库,数据的价值无法体现。但若采用传统的数据仓库技术让然无法快速、智能的处理这些数据,并且其投入成本也超出了预算。为此,基于XData-Hadoop构建的大数据处理平台,曙光为该行提供了海量记录快速查询能力,完成了历史数据查询系统的应用落地。在利用XData替代了传统数据仓库架构之后,成功实现了历史数据从TB向PB级的跨越式发展,而其海量数据分析能力更支撑了该银行反洗钱系统的成功应用。
 
中国银联离线数据分析系统:数据保存时限提升一倍,大数据发挥“毫秒级”查询
 
 
图4:基于曙光XData大数据一体机的离线数据分析系统
 
银联之前的关系型数据库存储能力非常有限,只能保存三个月的数据,造成大量历史数据堆积且管理困难。面对刷卡交易量激增,商户评分,持卡用户兴趣分析等新业务需求,银联构建了50台双路x86服务器规模的XData大数据一体机。利用支持海量数据访问的Hbase和分布式文件系统(HDFS)打造了高并发、高可靠的网络传输和存储层,并将数据保存时限提升了一倍。另外,该系统还支撑了350TB原始刷卡信息存储容量、实现了50万每秒的记录稳定导入速度,以及随机单条记录“毫秒级”返回,万级别查询5秒内返回的惊人速度。
责编:王雅京
vsharing微信扫一扫实时了解行业动态
portalart微信扫一扫分享本文给好友

著作权声明:kaiyun体育官方人口 文章著作权分属kaiyun体育官方人口 、网友和合作伙伴,部分非原创文章作者信息可能有所缺失,如需补充或修改请与我们联系,工作人员会在1个工作日内配合处理。
最新专题
IT系统一体化时代来了

2009年Oracle 用Exadata服务器告诉企业,数据中心的IT服务一体化解决方案才是大势所趋,而当前企业对大数据处理的..

高性能计算——企业未来发展的必备..

“天河二号”问鼎最新全球超级计算机500强,更新的Linpack值让世界认识到了“中国速度”。但超算不能只停留于追求..

    畅享
    首页
    返回
    顶部
    ×
      信息化规划
      IT总包
      供应商选型
      IT监理
      开发维护外包
      评估维权
    客服电话
    400-698-9918
    Baidu
    map