当前位置：首页> 存储> 存储案例> 正文

Twitter:我们已经亲手打造自己的数据库解决方案

来源： ZDNet存储

2014/4/8 17:27:55

大中小

Twitter已经步步发展并且走向成熟，因此在即时可用性之外、他们也开始意识到数据一致性保障的重要意义。该公司已将打造全新的“曼哈顿”数据管理软件这一诉求摆上了核心地位，并在上周的博文中正式披露了这套基础存储系统的诞生。

分享到：新浪微博腾讯微博

本文关键字： Twitter 数据库 Cassandra

Twitter公司已经步步发展并且走向成熟，因此在即时可用性之外、他们也开始意识到数据一致性保障的重要意义。

至少该公司通过打造的全新“曼哈顿”数据管理软件将这一诉求摆上了核心地位，并在本周三的一篇博文中正式披露了这套基础存储系统的诞生。

虽然博文并没有提到，但根据我们掌握的消息、Twitter正在开发一套所谓次级索引方案。这是一项被囊括在曼哈顿软件中、具备巨大潜力的功能，能够帮助公司员工在搜索社交网络的庞大存储数据时提供出色的灵活性，足以成为这家上市公司进一步推进商业运作的重要利器。

我们首先来分析Twitter本周在博文中所公开的相关信息。

“在过去几年当中，我们发现自身对于一套能够每秒处理百万级别查询并能在实时环境下实现极致低延迟的存储系统的需求正变得愈发迫切。系统的可用性及速度当然同样非常重要，不过这套存储系统不仅要具备出色的性能表现、同时也需要拥有跨越全世界多个地区的卓越可扩展能力，”Twitter在其网站上写道。

曼哈顿是一款由该社交网络自家工程师所打造的软件方案，旨在应对每秒接近六千条推文所带来的巨大系统压力。尽管六千条推文本身所涉及的数据量并不是很大，但这部分信息存在多种复杂特性，因为曼哈顿软件还需要处理与之相关的回复以及针对每条推文的转发——如果某位名人发布了新动态，数百万关注者的回复将立即汹涌而来，这就让原本看似简单的问题变得复杂起来。

在这项技术的帮助下——也许曼哈顿软件最终会走上开源道路——Twitter得以利用Cassandra的最终一致性功能外加其它工具通过单一大型系统实现坚实的一致性保障，而这也正是推动社交网络下决心更替存储系统的主要理由。根据我们掌握的情况，曼哈顿的开发工作已经持续了一年以上。

开发人员可以在从曼哈顿中读取或者向其写入的过程中选择数据一致性级别，从而通过创建新服务的方式在可用性（即如何快速实现访问）与一致性（即如何确保查询结果的准确性）之间找到平衡点。

有鉴于此，Twitter的程序员们能够访问“高一致性服务”，它会将一致性算法与副本日志结合起来、从而确保事件按照实际顺序对副本产生影响。

到目前为止，Twitter已经推出了LOCAL_CAS（单一数据中心内部的高一致性）与GLOBAL_CAS（跨越多个设施间的高一致性）。它们将“在应用程序以及数据建模方面采取不同的平衡点选取方式，”Twitter在一篇讨论曼哈顿项目的博文中指出。

责编：李玉琴

微信扫一扫实时了解行业动态

微信扫一扫分享本文给好友

收藏到畅享打印全文复制链接添加到收藏投稿邮箱

分享到：新浪微博腾讯微博

著作权声明：kaiyun体育官方人口文章著作权分属kaiyun体育官方人口、网友和合作伙伴，部分非原创文章作者信息可能有所缺失，如需补充或修改请与我们联系，工作人员会在1个工作日内配合处理。

Twitter:我们已经亲手打造自己的数据库解决方案

通过咨询项目或年度顾问方式，帮助您架起业务和IT的桥梁，解决业务和IT创新融合、现有系统取舍难、IT架构、建设路径、IT治理、IT支出优化等IT策略问题。

与您签订总包或三方合同，帮您解决业务和IT规划落地走样、IT详细设计缺失、难以寻觅靠谱的技术供应商、多个供应商协调难、维护升级服务保障难等棘手问题。

与您签订监理合同，以里程碑专家评审、项目变更协调、风险控制研讨、供应商关系协调、CIO智力网络等为主要服务内容，与甲乙方一起实现上线成功。

畅享IT帮助寻找可靠的、性价比高的开发力量，签订外包合同或三方合同，为企业提供可信赖的开发量，为IT供应商解决开发力量不足的问题。

畅享IT帮助寻找靠谱的、性价比高的维护力量，签订外包合同，对客户满意度负责，为客户解决维护运营服务保障难的问题。

对IT系统、IT项目或IT管理进行评估，出具中立评估报告，解决IT评价难、取舍难的问题。