MocoSpace.com 是一家移动社交网站，有1200多万注册用户，每个月30亿的 PV ，是美国最大的移动社区。我们来看看 MocoSpace 是如何来架构他们的网站的。先来看看他们的统计数据，注意他们只有1个系统管理员，8个程序员，14台服务器（数据和原文来自 MOCOSPACE ARCHITECTURE – 3 BILLION MOBILE PAGE VIEWS A MONTH）：
数据
每月30亿 PV
全美第4大流量的网站，继 MySpace, Facebook, Google 之后
75% 手机 Web, 25% Web
1200 万用户
每月600万独立访问
10万在线用户
每月上传1200万照片
每天接受和发送450万 email
8个程序员，2个测试员，1个系统管理员
平台和工具
CentOS + Red Hat
Resin application server, Java Servlets, JavaServer Pages, Comet
PostgreSQL
Memcached
ActiveMQ’s job + message queue，Red Hat 集群做 HA
Squid 静态内容缓存，曾试过 Varnish 但是 Varnish 不稳定
JQuery + Ajax
S3 用来存储用户照片和视频，现在用 Amazon S3 做外部存储是主流，EC2 用来做照片处理
F5 BigIP 负载均衡，用 gzip 压缩所有页面
Akamai CDN，每天 2TB 数据、2.5亿次请求。
Nagios 用来警告，Zabbix 用来监测
EMC SAN 用大量磁盘做 RAID 10 做需要高 IO 的数据库存储，用来替代高性能的 SSD，节省了大量成本
PowerMTA 做邮件传送，用Barracuda 做 spam 和 firewall
Subversion 做源代码控制，Hudson 做 continuous integration
FFMPEG 用来做视频处理
Selenium 用来自动测试浏览器
5x Dell 1950, 2x dual core, 16G RAM（Web 服务器）
5x Dell 6950/R905, 4x dual core, 32G RAM（Web 服务器）
2x Sun Fire X4600 M2 Server, 8x quad core, 256G RAM（数据库服务器）
2x Dell 6950, 4x dual core, 64G RAM（数据库服务器）
架构
他们的网站主要是面向手机应用的，所以他们遇到的一个大挑战是如何让他们的网站在几百种（从最新的 iPhone 到古董级的 Motorola Razrs）不同的手机设备上运行，屏幕大小、缺少相应的 Web 标准等都是问题。他们在几百种不同手机的数据上抽象出了一个表现层，只要用一套代码通过一个手机数据库（包括屏幕大小、允许的文件类型、允许打开的页面大 小等）把处理好的页面发到对应的手机上。
他们也是通过 shard 数据库来分担负载的，以用户 key 作为 shard 的依据，通过查找一张全局表来找到用户所在的 shard，他们自己写了查询层，可以用来在不同的 shards 之间自由查询和关联数据。他们 offline 的时候检查数据的一致性，他们认为如果不是做银行系统的话，一致性不是那么重要，牺牲一点一致性来换回性能还是值得的。他们把大表划分成了小表，这样分散 了锁表带来的问题。
他们使用多级缓存，从应用服务器里的缓存到分布式 memcached，当需要更新 memcached 的数据的时候，他们通过消息发送给每台应用服务器上的缓存，以做到数据一致。他们的服务器通过分布式消息队列来通讯，比如用户实时通过发消息告诉系统需要更新缓存等。
他们用专门的服务器来打造 social graph，并都放在内存里。
他们用 Kickstart 自动安装服务器，用 Puppet 来配置服务器，web 服务器、数据库服务器、cache 服务器等。
经验
- 在增加服务器之前先确定现有的服务器硬件还能不能往上升级，可以挑选一些二手的 4U 服务器。
- 理解瓶颈在那里？是 CPU 还是磁盘、网络 IO？数据库总是有磁盘 IO 问题。
- 扩展 web 服务器很容易也很便宜，扩展数据库服务器就很麻烦了，找出数据库系统查询最多的、查询执行时间最长的，尽早跟踪和测试这些查询找出数据库性能瓶颈。他们使 用 pgFouine log analyzer 和 PostgreSQL pg_stat_statements 工具来测量。
- 不要让用户等待，尽量在后台处理。避免异步通讯，比如数据等待积累一定程度后再一次提交给数据库；S3 存储的延迟和错误都可能会很大，把失败的请求放在队列里，等队列积累到一定程度的时候再试，而不是失败一个试一个，减少开销。
- 在设计阶段就考虑监测系统和性能，而不是到了部署的时候才开始监测。他们试过很多监测工具，Cacti, Ganglia, Hyperic, Zabbix, Nagios 等，最重要的是要找到自己用得顺手的工具。
- 网站变大以后就要做好防黑客、防垃圾的准备。
- 删除可能会开销很大，尽量软删除，而且用户删错了的话软删除容易恢复。
- N+1 设计，永远不要少于两种方案。
分享到：
相关推荐
提供的源码资源涵盖了安卓应用、小程序、Python应用和Java应用等多个领域，每个领域都包含了丰富的实例和项目。这些源码都是基于各自平台的最新技术和标准编写，确保了在对应环境下能够无缝运行。同时，源码中配备了详细的注释和文档，帮助用户快速理解代码结构和实现逻辑。 适用人群： 这些源码资源特别适合大学生群体。无论你是计算机相关专业的学生，还是对其他领域编程感兴趣的学生，这些资源都能为你提供宝贵的学习和实践机会。通过学习和运行这些源码，你可以掌握各平台开发的基础知识，提升编程能力和项目实战经验。 使用场景及目标： 在学习阶段，你可以利用这些源码资源进行课程实践、课外项目或毕业设计。通过分析和运行源码，你将深入了解各平台开发的技术细节和最佳实践，逐步培养起自己的项目开发和问题解决能力。此外，在求职或创业过程中，具备跨平台开发能力的大学生将更具竞争力。 其他说明： 为了确保源码资源的可运行性和易用性，特别注意了以下几点：首先，每份源码都提供了详细的运行环境和依赖说明，确保用户能够轻松搭建起开发环境；其次，源码中的注释和文档都非常完善，方便用户快速上手和理解代码；最后，我会定期更新这些源码资源，以适应各平台技术的最新发展和市场需求。
南京大学分布式系统课程实验.zip
MySQL作为一款广泛使用的开源关系型数据库管理系统，在软件开发中扮演着核心角色。以下是对MySQL开发教程、案例及相关项目概要的综合介绍： ### MySQL开发教程概览 **黑马程序员MySQL全套教程** - **目标群体**：适合零基础至进阶水平的学习者，特别是希望从事IT行业并期望通过MySQL技能提高薪资的学员。 - **课程内容**： - **学前须知**：要求学员具备Python基础知识及网络多线程知识。 - **开发工具**：使用Navicat（MySQL的图形化界面客户端）及MySQL自身的客户端与服务端（推荐版本5.0左右）。 - **课程重点**：涵盖MySQL的图形界面操作、终端CRUD操作，以及通过Python与MySQL交互实现黑马订单管理系统的开发，包括查询、增加、删除、修改订单等功能。 - **课程目标**： - 理解数据库分类、MySQL的应用场景。 - 安装并使用Navicat进行数据操作。 - 安装MySQL并进行终端的数据库操作。 - Python与MySQL的交互编程。 - 完成黑马订单管理系统的实战项目。
为了庆祝儿童节，我们可以用Python编写一个简单而有趣的程序，比如一个猜数字的小游戏，这非常适合孩子们玩耍。游戏规则很简单：计算机随机生成一个1到50之间的数字，玩家尝试猜测这个数字，计算机会根据玩家的输入给出提示（太高、太低或猜对了），直到猜中为止。下面是一个实现这个小游戏的Python代码示例： ```python import random print("我想了一个1到50之间的数字，你能猜到是多少吗？") # 生成一个1到50之间的随机数作为答案 secret_number = random.randint(1, 50) guesses_taken = 0 # 开始猜测循环 while True: try: # 获取玩家的输入并确保它是一个有效的整数 guess = int(input("请输入你的猜测：")) guesses_taken += 1 if guess < secret_number: print
MySQLTuner是一个用Perl编写的脚本,它允许你快速审查MySQL安装情况,并进行调整以提高性能和稳定性。它会检索当前的配置变量和状态数据,并以简洁的格式呈现,同时提供一些基本的性能建议。
JAVA+SQL办公自动化系统(源代码+论文+外文翻译)
VBA-N级弹出下拉菜单【选择一次输出结果】.xlsm 直接选择一级菜单后弹出下一级菜单，一直到最后一级，一次输出结果
Berkeley CS61B Data Structures 数据结构 课程实验和项目.zip
【作品名称】：基于 VC++实现的完整串口通信程序，TCPIP协议 UDP协议 短连接，长连接，定时器 等 【适用人群】：适用于希望学习不同技术领域的小白或进阶学习者。可作为毕设项目、课程设计、大作业、工程实训或初期项目立项。 【项目介绍】：基于 VC++实现的完整串口通信程序，TCPIP协议 UDP协议 短连接，长连接，定时器 等
五洲商城小程序前端源码/小程序模板。
本资源提供了一套精品PPT通用模板，设计优雅且功能全面，适合各种演讲和展示场景，包括但不限于商业提案、教育培训、个人品牌推广、激励演讲以及艺术和创意展示。这套模板的多功能性使其成为商务人士、教育者、艺术家及所有需要高质量演示材料的用户的理想选择。 模板特点： 多场景适用性：无论是商业环境下的提案、教室内的教育演讲，还是个人情感故事的分享，此模板均能提供合适的布局和设计。 设计元素：包括精心设计的幻灯片背景、图表、图形和文本框等元素，所有设计均旨在提升信息传达的清晰度和视觉吸引力。 易于定制：模板设计考虑到用户可能需要进行个性化调整，因此提供了高度可定制的布局和样式选项，使用户能够根据自己的需要轻松修改。 高质量视觉效果：采用现代设计理念，结合精美的色彩搭配和高分辨率图片，确保每一次演示都能给观众留下深刻印象。 使用场景详解： 商业提案：模板提供专业的商业图表和数据展示方案，帮助阐述复杂的商业逻辑和数据。 情感故事分享：通过情感化的背景设计和图片展示功能，让个人故事表达更加生动感人。 教育和培训：模板中的教育专用幻灯片设计，适合用于课堂教学和在线培训课程。 个人品牌推广：
这个完整工程给出基于人工智能模型U-net神经网络医学图像分割功能实现，适合基于机器学习和深度学习模型分析的学习资料，并有详细程序说明书。
提供的源码资源涵盖了安卓应用、小程序、Python应用和Java应用等多个领域，每个领域都包含了丰富的实例和项目。这些源码都是基于各自平台的最新技术和标准编写，确保了在对应环境下能够无缝运行。同时，源码中配备了详细的注释和文档，帮助用户快速理解代码结构和实现逻辑。 适用人群： 这些源码资源特别适合大学生群体。无论你是计算机相关专业的学生，还是对其他领域编程感兴趣的学生，这些资源都能为你提供宝贵的学习和实践机会。通过学习和运行这些源码，你可以掌握各平台开发的基础知识，提升编程能力和项目实战经验。 使用场景及目标： 在学习阶段，你可以利用这些源码资源进行课程实践、课外项目或毕业设计。通过分析和运行源码，你将深入了解各平台开发的技术细节和最佳实践，逐步培养起自己的项目开发和问题解决能力。此外，在求职或创业过程中，具备跨平台开发能力的大学生将更具竞争力。 其他说明： 为了确保源码资源的可运行性和易用性，特别注意了以下几点：首先，每份源码都提供了详细的运行环境和依赖说明，确保用户能够轻松搭建起开发环境；其次，源码中的注释和文档都非常完善，方便用户快速上手和理解代码；最后，我会定期更新这些源码资源，以适应各平台技术的最新发展和市场需求。
QT数据库大作业-登录页面
知识领域: 网络编程 技术关键词: socket、网络编程、异步IO、TCP/IP 内容关键词: 客户端、服务器、网络协议 用途: 学习使用Python构建网络应用和通信系统 资源描述: Python官方文档中提供了全面的网络编程指南和示例，涵盖了socket编程、异步IO和网络协议等方面的内容。
com.xunmeng.pinduoduo_Release_cd290ca9_ARM64.apk
提供的源码资源涵盖了安卓应用、小程序、Python应用和Java应用等多个领域，每个领域都包含了丰富的实例和项目。这些源码都是基于各自平台的最新技术和标准编写，确保了在对应环境下能够无缝运行。同时，源码中配备了详细的注释和文档，帮助用户快速理解代码结构和实现逻辑。 适用人群： 这些源码资源特别适合大学生群体。无论你是计算机相关专业的学生，还是对其他领域编程感兴趣的学生，这些资源都能为你提供宝贵的学习和实践机会。通过学习和运行这些源码，你可以掌握各平台开发的基础知识，提升编程能力和项目实战经验。 使用场景及目标： 在学习阶段，你可以利用这些源码资源进行课程实践、课外项目或毕业设计。通过分析和运行源码，你将深入了解各平台开发的技术细节和最佳实践，逐步培养起自己的项目开发和问题解决能力。此外，在求职或创业过程中，具备跨平台开发能力的大学生将更具竞争力。 其他说明： 为了确保源码资源的可运行性和易用性，特别注意了以下几点：首先，每份源码都提供了详细的运行环境和依赖说明，确保用户能够轻松搭建起开发环境；其次，源码中的注释和文档都非常完善，方便用户快速上手和理解代码；最后，我会定期更新这些源码资源，以适应各平台技术的最新发展和市场需求。
教师乡村支教申请表.doc
python爬虫案例
FPGA课程实验代码-简单时序电路.zip