最新文章列表

新老DataHub迁移手册

原文链接   DataHub服务用户迁移文档 前言   原Odps版内测DataHub(下文统称为老DataHub服务),于2016年11月21日起已经处于维护状态,新版DataHub届时已经开启公测,公测至今已有半年以上时间,我们决定开始逐步下线老DataHub服务,老版部分用户需要迁移至新版DataHub。 新版本具有更多的特性,性能功能都有不少提升,可以同时支持数据一份数据同 ...
Gamay 评论(0) 有16人浏览 2017-06-22 14:37

(转)浅谈分布式系统的基本问题:可用性与一致性

该文章来自于阿里巴巴技术协会(ATA)精选文章。 背景 可用性(Availability)和一致性(Consistency)是分布式系统的基本问题,先有著名的CAP理论定义过分布式环境下二者不可兼得的 关系,又有神秘的Paxos协议号称是史上最简单的分布式系统一致性算法并获得图灵奖,再有开源产品ZooKeeper实现的ZAB协议号称超越 Paxos,它们之间究竟有什么联系?在网络上没有文章将 ...
ChenghuiZ 评论(0) 有3612人浏览 2016-07-27 16:17

1:Hadoop安装环境搭建

                          第一次搭建Hadoop环境,可谓是千难万难。 难点1:自己完全是linux的菜鸟 难点2:个人有毛病,讨厌虚拟机,又 ...
梳子不爱头发 评论(1) 有1503人浏览 2016-04-03 19:49

大型分布式网站架构技术总结

本文是学习大型分布式网站架构的技术总结。对架构一个高性能,高可用,可伸缩,可扩展的分布式网站进行了概要性描述,并给出一个架构参考。一 ...
hongxuecn 评论(0) 有323人浏览 2015-11-19 13:39

大规模分布式系统架构与设计实战笔记之PageRank

在千峰老师的《大规模分布式系统架构与设计实战》一书中的有一个从赌钱游戏看PageRank算法,以下简称PR算法 首先我们来说下PR算法,PR(A)=(PR(B)/L(B)+PR(C)/L(C)+...+PR(X)/L(X))*q+1-q 其中q为逃脱因子,暂且不去理解它(取q=1),此时有公式PR(A)=PR(B)/L(B)+PR(C)/L(C)+...+PR(X)/L(X),说白了网页A的PR值 ...
臻是二哥 评论(1) 有2248人浏览 2014-08-02 10:19

《大规模分布式系统架构与设计实战》图书上市

感谢java图书出版权威机械工业出版社出版了《大规模分布式系统架构与设计实战》一书,该书相对于技术博客和指南更加详细完整的介绍了fourinone的设 ...
fourinone 评论(6) 有4654人浏览 2014-03-17 19:58

分布式存储系统设计经验谈(一)-常用理论

【本文仅代表作者个人观点,欢迎吐槽,欢迎转载(转载请标明来源)!】 最近一直在忙着搭建solr的分布式环境,对分布式系统的认识又多了一些,抽空总结一下: 在分布式系统设计过程中,常见的如使用客户端hash来进行sharding,使用replicaiton机制来实现backup和loadbalance,在这些东西的背后,设计一个分布式系统又需要考虑哪些东西呢? CAP理论是分布式设计设计的基础理论:C ...
soryokurin 评论(0) 有918人浏览 2012-10-10 17:05

分布式系统(学习笔记)

  系统模型 1. 分布式系统的困难和威胁    1.1  使用模式的多样性:系统组件会承受各种工作负载,例如有些Web页面每天会有几百万次的访问量,系统的有些部分可能断线或连接不稳定,例如当系统中包括移动计算机时,一些应用对通信带宽各延迟有特殊的需求,如多媒体应用。    1.2  系统环境的多样性:分布式系统必须能容纳异构的硬件、操作系统和网络。网络可能在性能上有很大不同,如无线 ...
treey041224 评论(0) 有1048人浏览 2012-08-15 00:09

【转】多版本并发控制(MVCC)在分布式系统中的应用

问题 最近项目中遇到了一个分布式系统的并发控制问题。该问题可以抽象为:某分布式系统由一个数据中心D和若干业务处理中心L1,L2 … Ln组成;D本质 ...
iamhungry 评论(0) 有718人浏览 2012-07-13 17:14

浅谈大型网站动态应用系统架构

浅谈大型网站动态应用系统架构 动态应用,是相对于网站静态内容而言,是指以c/c++、php、Java、perl、.net等服务器端语言开发的网络应用软件,比如论坛、网络相册、交友、BLOG等常见应用。动态应用系统通常与数据库系统、缓存系统、分布式存储系统等密不可分。 大型动态应用系统平台主要是针对于大流量、高并发网站建立的底层系统架构。大型网站的运行需要一个可靠、安全、可扩展、易维护的应用系 ...
snoopy7713 评论(0) 有1147人浏览 2012-04-24 16:06

CAP原理与最终一致性

CAP原理与最终一致性(转) 转于:http://www.ningoo.net/html/2010/cap_theorem_and_eventually_consistent.html
ohfanfan 评论(0) 有839人浏览 2012-04-01 11:09

海量数据的存储计算和查询--Google系列论文译

大概两年前,写过一篇<<大数据量,海量数据 处理方法总结>>,之后应该被转载甚多,估计很多人看到过。当时更多的解决的是面试场景的问题,介绍的都是些基础的数据结构。实际上与实际的海量数据处理还有些距离,可以用来准备下面试,但是真正的海量数据处理都是建立在很多系统之上的,当然它们底层也会用到各种数据结构。 进来比较流行的是云计算,NoSql。Hadoop也逐渐成为很多公司的生 ...
phylips 评论(8) 有15250人浏览 2011-08-07 21:45

最近博客热门TAG

Java(141744) C(73651) C++(68608) SQL(64571) C#(59609) XML(59133) HTML(59043) JavaScript(54919) .net(54785) Web(54514) 工作(54118) Linux(50905) Oracle(49875) 应用服务器(43289) Spring(40812) 编程(39454) Windows(39381) JSP(37542) MySQL(37267) 数据结构(36424)

博客人气排行榜

    博客电子书下载排行

      >>浏览更多下载

      相关资讯

      相关讨论

      Global site tag (gtag.js) - Google Analytics