10月15-17日,由InfoQ主办的QCon全球软件开发大会在上海光大会展中心国际大酒店举办,活动邀请了100余位国内外技术专家依据热点话题进行专题演讲。美团云架构师李慧霸也受邀前往,分享了分布式存储系统的设计与实现。这位曾就职于国防科学技术大学的博士毕业生的精彩演讲引起了听讲嘉宾的浓厚兴趣,大家在提问环节尊敬地称之为“老师”,并就美团云采用的分布式存储系统进行热烈地探讨。
美团云倍受欢迎,前来咨询的嘉宾络绎不绝。
经过粗略统计,嘉宾们咨询排名前3的问题分别是:1.美团云是美团网的吗?2.美团也做云?3.美团云的优势是什么?对于每个前来咨询的嘉宾,美团同事都热情地给予作答。美团云是美团的事业部之一。早已在2012年11月美团便上线私有云,处理自家业务,直至2013年5月正式对外开放计算资源,即美团云公有云。美团云目前包括云主机、存储、网络、缓存、数据库、负载均衡、大数据解决方案等产品,拥有稳定、高性价比、高技术服务等优势。目前,美团所有业务跑在自家云平台上,日均承载500T网络流量、200T数据。公有云更是获得了“可信云”认证及IDC牌照,并将“电商云”奖项收入囊中。美团云正在和更多的企业合作,拓展大数据解决方案。除了已经提供的hadoop服务之外,美团云将会有更丰富的数据接入方案,帮助企业实现平台化任务提交及更加自动化集群管理。
美团云架构师李慧霸发表演讲
李慧霸首先回顾了美团云的发展历程以及云计算在美团内部的应用情况。始于2012年,美团云从2013年开始便承载了美团的所有业务,时至今日一直稳定支撑美团多条不断演进的复杂的业务线。除了线上运营环境,美团云还支撑了美团的研发环境。美团的工程师可以在配额内自助使用资源,极大提高了工作效率。美团在公有云市场也取得了不错的成绩。同时,李慧霸还分析了云平台对存储系统的依赖和需求,以及已有系统现状与需求之间的巨大差异,论述了针对需求全新研发存储系统的必要性。在接下
来的演讲中,李慧霸分别阐述了美团云分布式存储系统的设计理念、存储结构、并发模型、系统架构、写入策略、模块组织、热升级支持、错误防护等方面的内容。
演讲最后李慧霸展示了系统的性能评测情况。结果表明美团云分布式块存储系统的读写吞吐率性能可以轻易达到万兆网络的理论带宽,IOPS性能可以达到本地SSD水准,读写延迟与ping值相当。除了高性能以外,美团云分布式块存储系统的运行效率也非常高(即CPU消耗低),在读操作IOPS测试中的服务端、客户端效率比Ceph RBD分别高出14倍和21倍。
演讲结束后,李慧霸还与嘉宾进行了深刻地交流。他表示,相较于本地磁盘存储和集中共享存储,分布式共享存储具有高可靠性、高可用性以及VM易于迁移的优势,虽然在技术上比较困难,但美团强大的技术团队是业界出名的,有信心在这方面做到最好。