IBM李剑：大数据时下下的数据分析

来源：存储在线作者：Hebrews

2012/9/4 10:14:36

IBM智慧存储蜂巢理论发布会于8月31日在上海召开，该IBM的最新战略，旨在为用户在大数据时代提高存储效率、部署存储虚拟化和适应信息模式的变化而做出的更细致、更全面、更适合的策略。IBM研究院大数据系统首席架构师李剑博士发表了精彩演讲。

李剑认为大数据时代中，数据不仅规模大，而且数据的来源多种多样，有结构化的，还有非结构化的，现在原始数据并不重要，关键是从大量的数据中挖掘有用的信息，让商务操作更加高效率是数据处理的关键，对存储的要求也要存储智能化。他表示其实很多的数据挖掘和商业智慧在传统方式上面已经有了，其实数据还有一些传统的已经开始做一些商业计算的东西，它们的问题第一只能接受结构化的数据，现在大量的数据反而是非结构化的，我们要用大数据来解决非结构化数据挖掘的问题。

李剑谈到了IBM三项比较核心的数据分析技术，即MapReduce、离线计算和在线的流计算。

MapReduce实际上就是把它分布到各个计算机上面，Reduce实际上是把最后的数据再减少，核心的就是所谓的MapReduce。这一技术是性能优化中的亮点。

离线计算方面，李剑提到大数据解决非结构化数据挖掘的问题。其实整个平台还是一个软件的构建方式，在硬件上面IBM不仅在X86上面，从整个系统集成都有大数据非常非常良好的集成，从硬件到数据信息的集成再到核心，一个是所谓的离线大数据深度的挖掘，用的是以开元系统为核心的产品。

之后李剑谈到了流计算的优点，他认为计算无非是三个，一个是计算一个是存储，还有计算和存储之间的交互。传统计算要把我的计算放到数据那里，流计算的好处，数据进来，直接进来，然后我做查询，所以它的速度非常快。另外流计算还有非常大的扩展性，还有很多功能，除此以外流计算还有非常强的IDE的支持，IBM有非常完善的系统，让很多都可以在流计算方面得到非常非常好的支持。

责编：赵龙

微信扫一扫实时了解行业动态

微信扫一扫分享本文给好友

收藏到畅享打印全文复制链接添加到收藏投稿邮箱

分享到：新浪微博腾讯微博

著作权声明：kaiyun体育官方人口文章著作权分属kaiyun体育官方人口、网友和合作伙伴，部分非原创文章作者信息可能有所缺失，如需补充或修改请与我们联系，工作人员会在1个工作日内配合处理。

IBM李剑：大数据时下下的数据分析

通过咨询项目或年度顾问方式，帮助您架起业务和IT的桥梁，解决业务和IT创新融合、现有系统取舍难、IT架构、建设路径、IT治理、IT支出优化等IT策略问题。

与您签订总包或三方合同，帮您解决业务和IT规划落地走样、IT详细设计缺失、难以寻觅靠谱的技术供应商、多个供应商协调难、维护升级服务保障难等棘手问题。

与您签订监理合同，以里程碑专家评审、项目变更协调、风险控制研讨、供应商关系协调、CIO智力网络等为主要服务内容，与甲乙方一起实现上线成功。

畅享IT帮助寻找可靠的、性价比高的开发力量，签订外包合同或三方合同，为企业提供可信赖的开发量，为IT供应商解决开发力量不足的问题。

畅享IT帮助寻找靠谱的、性价比高的维护力量，签订外包合同，对客户满意度负责，为客户解决维护运营服务保障难的问题。

对IT系统、IT项目或IT管理进行评估，出具中立评估报告，解决IT评价难、取舍难的问题。