您当前的位置: 首页 > 

凌云时刻

暂无认证

  • 0浏览

    0关注

    1437博文

    0收益

  • 0浏览

    0点赞

    0打赏

    0留言

私信
关注
热门博文

钉钉轻松顶住信息洪流的原因,竟然是它

凌云时刻 发布时间:2020-09-22 18:30:00 ,浏览量:0

 

凌云时刻 · 故事

导读:表格存储 Tablestore 如何助力钉钉消息存储架构的升级,帮助钉钉顶住持续增长的流量。

来源 | 阿里云存储

前言

今年的疫情来势汹汹,新冠病毒作为 2020 最具代表性的黑天鹅事件,虽然引起了一系列不良的连锁反应,但是却让“停工不停业、停课不停学”成为了疫情时期的刚需。

在疫情期间钉钉下载量激增,直冲各大应用商城下载量榜首,同时在线人数最多达到了 2 亿人。即使现在各行业已经正常复工,但钉钉的下载与使用量仍保持一个高速的提升,截至目前为止已有 3 亿的用户和 1500 万的企业组织在上面进行工作和学习。

但在这飞速发展的背后,对于技术也自然提出了更高的要求,尤其 IM 作为钉钉的核心功能,随着用户应用的不断深入,因此在业务和系统上也迎来了更大的机遇和挑战。

在 9 月 18 日云栖大会上,阿里云智能高级技术专家木洛就为我们详细介绍了,表格存储 Tablestore 是如何助力钉钉消息存储架构的升级,帮助钉钉顶住持续增长的流量。

钉钉 IM 消息存储面临的业务挑战

1. 用户对于产品的品质要求越来越高。在功能上,要求场景化、定制化;在体验上,需要多设备状态同步,历史消息漫游。另外,为了满足一些大型企业的沟通需求,还需要支持人数超过万人的大群。这些要求,都是一个企业级 IM 必须能够满足的。

2. 疫情过后,钉钉 IM 系统规模快速扩大,日均消息突破千亿,高峰期消息发送 TPS 超过千万,消息的存储大小更是突破 1 个 P,系统的水平扩展性和成本控制已经成为了目前的核心需要解决的问题。

3. 企业经常会面临一些大规模复杂场景下的业务,如何能在这种情况下提供全年 99.995% 可用性,也是我们需要攻克的重要课题。

什么是表格存储

表格存储 Tablestore 是提供集存储、搜索和分析多功能一体的一站式结构化数据存储平台,覆盖物联网和互联网下的多场景应用。表格存储 TableStore 采用与 Google Bigtable 类似的宽表模型,天然的分布式架构,能支撑高吞吐的数据写入以及 PB 级数据存储。同时其简单可靠的数据模型和架构,帮助企业数据在存储和计算系统之间自然地流转。

表格存储如何帮助钉钉实现升级

钉钉整个消息系统架构可以分为三层,分别是:消息端、接入层以及消息系统。在一个完整的信息流写入过程中,消息首先会从端发送到接入服务器,接入层将消息投递到消息系统后,消息系统会通过一个 MQ(消息队列)来对消息进行异步处理,最后则会有一组消息处理服务器来处理消息。

而在消息处理阶段,又能分为存储、同步和通知三个步骤。首先系统会将消息持久化存储到存储库内以支持消息漫游,之后再通过写扩散或者读扩散的方式写入同步库内,最后消息索引库会异步地对消息存储库内的消息进行全文索引以支持消息在线检索。

这个架构下存储层的核心是三个库,也就是存储库、同步库和索引库。存储库存储全量消息,根据数据的冷热进行分层存储。同步库支持消息读写扩散写入,支持多端多位点实时拉取消息。索引库对消息及元数据进行索引,支持模糊查询以及消息全文检索。

而表格存储 Tablestore 之所以能承担了这三个库的存储,核心优势是:

一,表格存储 Tablestore 设计实现了 Timeline 模型,是专为 IM/Feeds 场景设计,可简化模型抽象和开发。

二,表格存储 Tablestore 单表能支持海量数据规模存储,冷热分层,支撑消息场景下 PB 级、万亿行规模低成本存储。

三,表格存储 Tablestore 分布式存储计算分离架构,可支撑每秒千万 TPS 扩散消息写,同时能达到毫秒级查询性能。

四,表格存储 Tablestore 具有 Serverless 服务形态,极致弹性,存储和计算按需扩容,满足低成本诉求。

达到的效果

在 2020 年,钉钉把原来的存储系统全量升级到表格存储 TableStore,而表格存储 Tablestore 为钉钉提供了强大的建模能力和检索能力,高效地支撑复杂多样的业务功能实现。同时,其良好的水平拓展能力,也极好地满足了钉钉业务快速发展的需求。

另外,在成本控制上,表格存储 Tablestore 可根据 IM 的业务特性,实现冷热数据的分层存储以及弹性扩缩容能力,降低存储系统的运行成本,实现业务的可持续发展。

END

往期精彩文章回顾

阿里云张献涛:一切从场景出发,实现计算的全场景覆盖

对话猿辅导:阿里云远程办公零信任落地创新安全

Service Mesh 在超大规模场景下的落地挑战

百亿独角兽爱学习教育集团:如何在半个月内搭建一套完整的课堂互动系统?

阿里CTO鲁肃:技术的想象力不应设限,未来所有应用的核心都离不开数据和智能

将公共云延伸至本地,阿里云推出本地化部署服务云盒Cloud Box

未来的云计算基础设施长什么样?

阿里巴巴集团 CTO 约你聊聊这些事

2020年容器应用的新思考

您有一份来自阿里云达摩院的邀请函待查收!

长按扫描二维码关注凌云时刻

每日收获前沿技术与科技洞见

关注
打赏
1663816507
查看更多评论
立即登录/注册

微信扫码登录

0.0418s