星环Hadoop发行版助快递业迎战“双十一”

来源:企业网D1Net  
2014/11/27 16:09:08
我国快递行业的规模随着电子商务的井喷出现了快速的扩张。据统计,全国现在已有上百万快递从业人员、十几万营业网点、几十万辆快递货车和一年近百亿件业务量。这些数字还在以每年超过40%的速率增长。天文数字的市场需求给快递公司带来了巨大的商机和前所未有的挑战。

本文关键字: 星环 Hadoop TDH 大数据

Transwarp Hyperbase 实时在线数据处理引擎以Apache HBase为基础,是企业建立高并发的在线业务系统的最佳选择。它拥有:

●多种数据类型的支持: 支持结构化、半结构化和非结构化数据

●高速处理能力: 延时在数毫秒到数百毫秒级,上亿并发

●OLAP和批量统计: 支持高速的OLAP统计和SQL离线批处理

●高效的图形计算: 提供图形构造API和专有的高效图算法

Transwarp Inceptor 内存分析引擎提供大数据的高速交互式SQL统计和R语言挖掘。它拥有:

●更快的性能: 比Hadoop快10倍到100倍,比MPP快2倍到10倍

●更强SQL支持: 兼容Oracle PL/SQL和HiveQL语法

●更强分析能力: 支持R语言,提供更多的并行化算法

BI和报表工具:支持Tableau,SAP BO, Oracle OBIEE

●超高扩展能力:线性扩展,支持GB到PB数据的快速处理

●超强稳定性:经过验证的稳定版本,7x24小时不间断运行

这三大组件在快递公司项目中的工作流程为(如下图所示):从ESB总线和网络文件加载数据到Transwarp Stream 集群中进行处理;处理完毕后存入Transwarp Hyperbase;提供API给上层J2EE应用实时查询数据;也可以提供JDBC接口给上层J2EE应用从基于Hyperbase建立的Inceptor外表中实时查询数据。

TDH通过此项目在国内乃至全球的快递行业中首次用大数据Hadoop发行版实现了生产环节数据的实时监控。双十一期间完全支持住了年度峰值般巨量包裹数据的实时监测。即便如此,产品的技术性能并未完全用满,这为后续业务的不断增长留下了广阔余地。具体效果如下:

●数据实现实时导入:数据从ESB总线上流入、TDH处理完毕到查询结果显示的整个过程不超过1秒,导入平均速度为每秒1700条,仅需要用到TDH最高性能的1/500。

●数据处理时间迅速:Transwarp Stream对单条数据的处理在毫秒级完成,平均一条记录从处理到进入Transwarp Hyperbase只需要1-2毫秒左右。

●数据查询简单高效:合作方的J2EE应用要求的秒级查询能由TDH平台轻松胜任。而TDH提供的Java API和JDBC接口可以非常简单地与现有系统进行集成从而实现数据查询,对于现有的企业级开发环境极其友好,应用迁移难度很小,快递公司的工作人员可以无学习成本地上手使用。

TDH可毫无延迟地反映快递公司遍布全国的海量业务的最真实情况,给了快递公司简单易用的工具来对业务的每个环节实时监控,使得快递公司在海量的快递业务中都可以快速精准地发现问题,如快件的积压、遗失、破损等,进而提高服务质量。TDH也可以根据最新的生产数据帮助快递公司随时调整优化投递计划,为公司降低成本。TDH更可以帮助快递公司分析趋势,为“双十一”和其他节假日带来的压力提前做好准备。

共2页: [1]2 下一页
责编:李玉琴
vsharing微信扫一扫实时了解行业动态
portalart微信扫一扫分享本文给好友

著作权声明:kaiyun体育官方人口 文章著作权分属kaiyun体育官方人口 、网友和合作伙伴,部分非原创文章作者信息可能有所缺失,如需补充或修改请与我们联系,工作人员会在1个工作日内配合处理。
畅享
首页
返回
顶部
×
    信息化规划
    IT总包
    供应商选型
    IT监理
    开发维护外包
    评估维权
客服电话
400-698-9918
Baidu
map