from infoq.com/cn
最近在Facebook工程师博客上
,软件工程师Eugene Letuchy写了一篇关于Facebook Chat项目的决策细节
的文章。
当产品的客户有可能在一夜之间从零增加到七千万的时候,可扩展性就变为从一开始就必须考虑的问题。
Eugene在文中指出了面临如此庞大的客户群会遇到的一系列挑战。首先的挑战是:
在用户上线或者下线时通知其所有好友的做法是非常幼稚可笑的,这么做
的代价是O(平均好友个数×高峰期用户数×上下线频率) 条短信/秒,
上下线频率是指用户平均每秒上线和下线的次数。当每个用户好友的平均数量大约在几百个,高峰期同时在线用户数在百万数量级的时候,这种实现方法的效率简直
低得无法忍受。
另外一个挑战是实时消息的发送。Facebook采用的是客户端直接从服务器将新消息“拉”的方式,跟Comet的XHR长时间轮询
(Comet's XHR Long Polling)
过程比较相似。
Facebook的页面会加载一个iframe用于用户间消息的传递, 这个iframe中的Javascript代码发出一个HTTP GET请求,这个请求将建立与服务器的一个持久连接,直到有消息返回给用户为止。
Eugene
接着又提到了“大量长时间的同步请求使得LAMP组合中Apache这一部分成为不确定的实现因素”。在在集群和分区子系统上,Facebook选择了C
++和Erlang的组合。C++模块用户用于记录聊天信息,而Erlang模块“将在线用户的对话保存在内存中并且对长时间轮询(long-
polled)请求提供支持”。epoll
,Linux 2.6中出现的新系统调用,被用于驱动Erlang模块。Eugene 解释了决定选用Erlang的原因:
简单的说就是因为Erlang能很好地满足我们的要求。Erlang是一种面向同步的函数式语言,它具有极其轻量级的用户空间“进程”,无共享的消息传递语义,内置的分布式系统和一个被二十多年实时软件系统实践所检验过的灾难恢复系统。
用于“跨语言可扩展服务部署”的开源框架Thrift
(Facebook在去年愚人节发布)被用来将Facebook Chat中用到的各种技术结合起来,其中就包括Erlang的功能绑定。
启动这项服务的方式也比较有意思——利用所谓的“摸黑启动(dark launch)”
一夜间就将客户数由零变为七千万的秘密就在于避免一步到位地完成这个过程。我们会首先模拟很多用户访问的场景,这是通过一个叫做“摸黑启动”的阶段实现的.在这个阶段中Facebook的页面会在没有任何UI元素的情况下连接聊天服务器,询问在线信息和模拟信息发送过程。
Facebook选用Erlang是对此语言认可和肯定,具有重大意义。Erlang的资深布道使Yariv Sadan
感慨道:
人们长久以来都认为Erlang只是一个构建可扩展实时应用程序的平台,Facebook选用Erlang应该能消除人们这一偏见。
查看英文原文
:Facebook Chat Architecture
分享到:
相关推荐
Facebook Chat IM是Facebook的桌面Messenger。 有了它,您可以直接从桌面与所有Facebook朋友聊天。 它具有一个简单易用的界面,并提供了许多很棒的功能,例如表情符号,状态更新通知,声音警报,聊天记录等等。 它是...
区块链行业周报:Facebook将转型元宇宙公司,区块链合成资产监管趋严.pdf
facebook技术架构
Social Media Quick Guide: Facebook(Facebook快速指南),共11页,10分钟左右可读完的Facebook图文指导。
国外技术干货:facebook_architecture.zip
Facebook’s Distributed Data Store for the Social Graph
TMT行业日报:Facebook收购伦敦人工智能公司.pdf
facebook 網站架构 PDF 文件
Provide a data store with a graph abstraction (vertexes and edges), not keys/values Explicitly favor efficiency and availability over consistency
国外技术干货:facebook_performance_caching-dc.zip
Big Tech的策略:Facebook、亚马逊、微软、谷歌和苹果在哪里投Z和收购,以及它对未来的信号(英).pdf
在第六届中国云计算大会全体会议上,John Kenevey重点介绍了Facebook开源数据中心,尤其是Facebook主导的Open Compute Project。他回忆道:2010年,Facebook数据中心的PUE是1.9,而通过OCP,现在PUE已经降到了1.07。
java源码:Facebook个人资料导出工具 fbpwn.zip
阿灵顿:Facebook今年营业利润或超亚马逊.docx
营销良机:Facebook用社交算法改变排序规则.docx
广告商青睐社交平台:Facebook和Twitter居首.docx
传媒与互联网行业深度分析社交属性流量价值报告:Facebook$5000亿社交帝国的根基(49页),资源名称:传媒与互联网行业深度分析社交属性流量价值报告:Facebook5000亿社交帝国的根基(49页)传媒与互联网行业深度分析...
java源码:Facebook API 的 Java 封装请求处理组件 RestFB.zip
商业周刊:Facebook或被卷入新一轮专利大战.docx