目前,在线上环境中应用较多的负载均衡器硬件有F5 BIG-IP,软件有LVS,Nginx及HAProxy,高可用软件有Heartbeat、Keepalived,成熟的架构有LVS+Keepalived、Nginx+Keepalived、HAProxy+keepalived及DRBD+Heartbeat.
TFS(Taobao File System)
nginx
apache web server
squid cache (varnish)
LVS+HAProxy
(之前是NetScaler)
GM(GraphicsMagick)/IM(ImageMagick)
GraphicsMagick+im4java/JMagick.....java-image-scaling/thumbnailator
王速瑜:作为互联网技术架构师,您能简单总结一下海里互联网服务技术架构方面的理念、原则,方法吗?
林昊:我觉得eBay的五点总结基本已经够全面:
(1)“ 拆分”,数据库的拆分以及应用的拆分,当然这需要强大的技术的支撑,这点要做到的目标通常是便于应用的无限水平伸缩;
(2)能异步就异步,这需要业务的允许;
(3)能自动就自动,就像自动化的部署系统;
(4)记住所有失败的事情,这点非常重要;
(5)容忍不一致性,这句话的含义是尽量少用强事务,而是采用最终一致性这类方案。
当然,除了上面这五点之外,还有像多用缓存、自行实现关键技术(以控制稳定性、性能和做到及时响应)等
淘宝海量图片系统
http://wenku.baidu.com/view/cc597ef8941ea76e58fa04a5.html
淘宝平台架构师谈海量互联网服务技术架构
http://wenku.baidu.com/view/012e4c135f0e7cd184253646.html
分享到:
相关推荐
淘宝海量图片存储与CDN系统 淘宝海量图片存储与CDN系统
淘宝公司海量大规模数据存储产品的技术架构,公司内部文件。
“海量存储系统关键技术”重大项目 课题1. 海量存储系统总体研究 【课题研究目标】 根据项目总体目标,进行市场调研和关键行业应用需求调研、技术发展趋势调研、技术战略研讨、产业战略研讨、应用推广战略研讨,提出...
Taobao海量图片存储与CDN系统-v2-系统架构师.pdf
淘宝海量数据产品技术架构
文件系统技术内幕:大数据时代海量数据存储之道.docx
海量影像管理系统技术
Taobao海量图片存储与CDN系统 Taobao海量图片存储与CDN系统 Taobao海量图片存储与CDN系统
适用人群:适用于需要存储和处理海量图片数据的企业和组织,如影视公司、广告公司、图像识别技术研究机构等。 使用场景及目标:该系统适用于存储和管理大规模图片数据,提供快速的图像处理和检索服务。用户可以通过...
淘宝海量数据处理经验-几幅架构图: 1、海量数据产品技术架构 2、搜索引擎架构图 3、架构概览
海量存储系列-淘宝技术团队贡献
基于云计算平台的海量图片存储系统设计与实现,张路,吴建平,随着云计算的兴起、网络技术的飞速发展以及数据量的飞速增长,数据对于个人和企业的重要性日益凸现,存储技术在其中起到的作用日
淘宝海量数据技术收集.pdf
本文档详细的描述了如何采用HBase存储海量图片,以及如何将大批量的小文件写成sequenceFile文件格式。
淘宝海量数据处理产品技术架构.pptx
针对云计算应用的特点和需求,借鉴传统数据管理技术的理念,提出了一种基于CouchDB的高可扩展、高可靠的海量图片存储管理系统。系统采用分布式文件系统、分布式数据库等技术,支持海量数据存储、资源目录和交换体系...
系统的阐述了当前流行的网络存储技术DAS、NAS、SAN ,并做了比较分析,同时涉及了其他网络存储技术
海量数据挖掘技术探讨.pdf