云计算是挖掘大数据价值的核心基础

来源: IT专家网作者:杜宇健
2014/4/28 15:22:39
在由D1Net举办的第七届CCS云计算高峰论坛上,中国移动通信有限公司研究院云计算系统部资深研究员杜宇健分享了《中国移动云计算技术和研究和应用》。

分享到: 新浪微博 腾讯微博
本文关键字: 云计算 大数据
我这里还想强调的是中国移动,在整个云计算的研发与应用过程中,是非常重视跟产业各方进行配合合作的。一个是有开源的合作,开源在云计算无论研发和合作是非常重要的平台,我们研发会注重借鉴这个平台,另一方面我们把一些成果积极布置下去。另外我们跟商业化的软件非常注重跟他们去配合,比如说我们也是跟 SAP。SAP的性能分析数据库性能非常出色的,除了贵一点。但这块我们探讨比较流行混搭的模式,跟我们的体系进行混搭起来,一个平台是容量优化,处理大规模的变形化的一些处理。HANA是性能方面的优化,把实时率要求高的数据放到这里面去做,这样混搭架构体系之下我们积极做一些验证和产品的尝试,未来将会在集中化的数据仓库体系之下有一个广泛的应用。
开源方面我想多提一点,我们这里面建立了自己的开源社区。其实驱动力也是比较明显的,我们现在各个省公司,包括集团层面都建自己大数据平台,这一块面临非常多的选择,有很多版本,这些版本应用在现有的招标模式之下,一个项目一个项目建立起来的话,非常麻烦的一个数据模式,给我们后续省公司,以及省公司内部分享和运营带来很大的障碍和促进。这里我们考虑充分联合产业的力量去推一个适合我们运营商的版本,这个开源社区我们去年年底的时候已经正式发布了,这里有一个链接,大家可以上去访问。我们主要团结运营商和科研单位的力量去推动这样开源版本的建设。
讲完了开源以后再讲讲标准化。其实标准化这块我们中国移动也是很积极的态度去参与,去推动的。除了标准化也包括可信云的计划,可信云我们也是很积极参与的单位之一。标准化这里我刚才提到了,我们这里目前有两个主要在做的IS的标准化,咱们国家来说,我们重点参与了 SOA云计算标准工作组,里面对于弹性计算和对象存储这两个最重要的标准化工作的制定。
我们产品研发过程中也会遵循这样的国家标准,而且会积极参与标准相关的一些测试的制定和具体的测试工作。我们要重复一下,标准化的工作我们还是需要去产业各方合作,共同去推动这样一个情况。 前面讲了中国移动在总体的战略,自主研发方面的一些举措,下面结合大云的应用谈具体的案例。产品线应用在移动的内部包括外部做比较广泛的应用,比如大数据的分析,资源池的建设还有对外教育的支持上。一个是我们的公众服务云,公众服务云这里主要运用到核心产品,刚才提到BCEC和BC-oNest提供一些服务,目前我们在南方基地已经部署了1000个物理 服务器的节点和规模,目前处在试商用的阶段。
下一步我们想在这个基础之上还进一步丰富在IS层面的一个服务,甚至跟厂商合作起来,我们会进行整合性的服务。我们客观上也必须承认,我们的服务确实处于刚起步,跟其他产品还是有一些差距的。 第二个层面想举比较突出的运营商做的事情,就是大数据领域。大数据领域我们主要的切入点是几点,一个是ETL,ETL是从生产库里面数据调到分析库进行分析,传统我们是通过小型机ETL工具去实现,传统我们是ELT,到数据库再去操作,给主库压力非常大。现在很主要我们在中间建立一个集群,真正实现ETL中间的转化,然后加载到仓库,无论从性能还是减轻组合压力方面都有非常明显的效果。
第二是帐详单云,我们很大的是各自的通信帐单,一般的量级中等省份一千有几亿条规模的量级,上面我们主要的动作是查询工作,它就非常适合用帐祥单查询,很多省份在这样做。第三个是互联网内容分析平台,这个我们把上网数据采集下来,抓取一下看看到底访问是什么类型的业务数据,这里面一个是查询的技术,一个是日志存储的技术,这里面也是运用我们的分析能力。这是我们运营商资源池跟大数据方面的典型应用。
最后谈一谈我们在政府方面政务云的合作。各个地方对于政务电子化,云化办公还是推动比较快速的,包括我们参与了电子政务标准化的编制工作。目前我们在福建、天津、扬州这样的地方做了一些,这主要是跟“大云”,BC、EC相关的,其实跟中国移动合作的电子化远远不止这三个点。帮他们构建一个IS资源池,他们合理快速的去部署上线他们政务云的应用。
还有一个比较突出的是我们跟教育部的合作,合作建设国家数据教育云平台,主要通过教育的公平化、均衡化和现代化。在这个项目里面我们也是提供底层IS的平台资源,提供一个云存储,云主机的能力,之上支撑教育开发的应用。目前教育云上线接近一年多的时间,目前起到比较好的社会效益。
最后去展望一下,我们希望能够跟产业链的各方合作,共同推动整个云计算在中国产业的发展。
共4页: [1] [2] [3]4 下一页
责编:李玉琴
vsharing 微信扫一扫实时了解行业动态
portalart 微信扫一扫分享本文给好友
著作权声明:kaiyun体育官方人口 文章著作权分属kaiyun体育官方人口 、网友和合作伙伴,部分非原创文章作者信息可能有所缺失,如需补充或修改请与我们联系,工作人员会在1个工作日内配合处理。
最新专题
IT系统一体化时代来了

2009年Oracle 用Exadata服务器告诉企业,数据中心的IT服务一体化解决方案才是大势所趋,而当前企业对大数据处理的..

高性能计算——企业未来发展的必备..

“天河二号”问鼎最新全球超级计算机500强,更新的Linpack值让世界认识到了“中国速度”。但超算不能只停留于追求..

    畅享
    首页
    返回
    顶部
    ×
    畅享IT
      信息化规划
      IT总包
      供应商选型
      IT监理
      开发维护外包
      评估维权
    客服电话
    400-698-9918
    Baidu
    map