`

PostgreSQL的集群技术比较

 
阅读更多

PostgreSQL 数据库的可用集群技术如下:

 

1、Bucardo 

   复制技术,主从复制,异步,基于 触发器。 

     详情: https://wiki.postgresql.org/wiki/Bucardo 

2、GridSQL

   一个开源的,我共享的集群数据库系统,可用于PostgreSQL数据仓库,具有智能的,平行的做到多个数据库之间的访问,最新的名称为:  Stado .

 

3、HadoopBD

   是 apache 下的项目,和 MapReduce 一起, 应用集群。

 

4、pgpool-II

     一个位于 PostgSQL  服务器和 client 之间的中间价,他提供了以下特性:

    连接池  (无需多说)。

    复制 : pgpool-II 可以管理多个 PostgreSQL服务器,利用复制功能可以实时的备份多个福利磁盘,保障了在磁盘失效情况下的连续服务。(最多128 数据节点))

    负载均衡:复制生效时,执行 select 命令时,无论那个服务其将返回相同的结果。pgpool-II 利用复制的优势来减少服务器的负载--在多个服务器之间选分发select指令,从而增加了系统吞吐量。 当大量的用户执行select 指令时候这一优势将得到充分的体现。

超过载链接:PostgreSQL 有一个最大的同时链接数,超过时就拒绝链接。设置大的链接数,增加了资源的消耗,影响系统的性能,. pgpool-II 有最大连接数限制,对超过的连接请求做队列处理,或者立即返回错误。 

平行的Query: 使用平行 Query 功能,数据可分配到多个服务器,所以 查询会同时在多个服务器执行,减少了总运行时间。平行查询在大规模数据查询时候体现出最好的表现。

 

PL/Proxy: 是一个数据库分区系统,用 PL 语言实现。 其思路是 一个远程功能调用时,会产生同一的签名,所以 在代理调用时只需要指定目标信息。

 

Postgres-XC : 基于无共享结构的,多主,写扩展的 PostgreSQL集群, 由 Postgres-XC 团队开发。

          其特性如下: 

  1. 写扩展的 PostgreSQL 集群,和纯PostgreSQL相比,用五个服务器可获得超过三倍的性能增强(1.0版本),提高扩展性的方法是众所周知的。
  2. 同步的多主配置,对主的任何更新对其他主都是可见的。
  3. 表位置是透明的,可以继续使用同一的应用,事物处理无需改变。
  4. 基于PostgreSQL。
  5. 使用和PostgreSQL相同的API。 V 1.2.1 已经可用了。

 

 PostgresForest 是针对商业智能应用设计的,这些应用是读敏感的。

  • 以 PostgreSQL JDBC 驱动为基础,修改了 JDBC 程序代码增加了集群特性。
  • 高可用性: PostgresForest用其复制能力实现了一个高可用性的数据库系统。
  • 平行的 Query 处理: PostgresForest在无共享的分布数据库系统中能理解和执行平行的查询。
  • 在线恢复: PostgresForest能恢复失效的节点而无需重启动服务。

 

SkyTools 是Skype中的一个软件包,用于数据库的灾难恢复和复制,包括一个队列机制。PgQ 和实用库用户  Python 脚本程序。其核心是基于消费队列的处理。
Slony-I  是一个  一主对多个从属的复制系统,支持层次级连和灾难恢复。最新版本 2.0 。
Stado 开源的,无共享的数据库系统,设计支持平行查询。2011-9-4 年发布了 2.5 版本。
Tungsten 企业版本包括提供下列功能的部件:数据可用,数据保护,扩展,容易集群管理和高级的对 PostgreSQL、MySQL、 Oracle 数据库系统 的监控,这些部件包括一个 PostgreSQL的复制器,多种的高可用性的代理、附加的管理工具。
 

我的判断:

对一般的业务要求,首选:pgpool-II , 因为其是官方的。
其次是 Slony 。
 选择的理由是:性能,易用,开源,在持续改进中。
 
 
分享到:
评论

相关推荐

    PostgreSQL集群技术资料.

    PostgreSQL集群技术资料.

    Postgresql 内存融合技术初探

    常规流复制数据库集群优缺点 • HighGo 的改进和探索之共享存储 •共享存储集群架构 •为什么要内存融合 • HighGo内存融合架构 • 内存融合 • 并行redo

    PostgreSQL多主复制Bi-DirectionalReplication.zip

    Bi-Directional Replication (BDR) 是 PostgreSQL 的异步多主复制系统,专门为允许地理上分布的集群而设计;支持最多 48 节点(未来版本还可能更多;是一个低开销,低维护技术,分布式数据库。

    基于PostgreSQL的可扩展的开源大数据集群数据库:Postgres-XL.zip

    包含前端、后端、移动开发、操作系统、人工智能、物联网、信息化管理、数据库、硬件开发、大数据、课程资源、音视频、网站开发等各种技术项目的源码。 包括STM32、ESP8266、PHP、QT、Linux、iOS、C++、Java、python...

    2020 DTC 数据技术嘉年华演讲PPT汇总.zip

    大规模PostgreSQL集群监控实战——开源PG监控解决方案 大规模多种数据库热点SQL质量分析 AnalyticDB,金融级云原生数据仓库及最佳实践 OceanBase分布式数据库的新征程 TiDB数据驱动的企业智能化转型新方向 检验国产...

    postgresql-metrics:提取并提供PostgreSQL数据库指标的工具

    该工具是一个CLI(命令行)工具,可以调用该工具从PostgreSQL数据库集群中提取统计数据并创建指标。 CLI可在长时间运行的进程模式下运行,该模式将定期将收集的指标向前发送。 默认的度量标准格式是兼容的JSON,由...

    Hadoop开发者第四期

    Hadoop开发者第四期: 海量数据处理平台架构演变; 计算不均衡问题在Hive 中的解决办法; Join 算子在Hadoop 中的实现; 配置Hive 元数据DB 为PostgreSQL; ZooKeeper 权限管理机制;...Hadoop 技术论坛运营数据分享

    2021 云和恩墨大讲堂PPT汇总(50份).zip

    Oracle RAC 集群安装部署 Oracle RMAN 单实例异机迁移恢复(版本:11GR2) Oracle存储过程性能分析案例 Oracle技术加油站:快速处理紧急性能问题的工具与经验 Oracle诊断性能问题时常用脚本工具 PostgreSQL日常工作...

    一个用struts+spring+hibernate编写的bbs源码

    2、支持多数据库:天乙社区6.0采用了Hibernate作为数据库持久化的解决方案,支持DB2、PostgreSQL、MySQL、Oracle、Sybase、Microsoft SQL Server、SAP DB、Informix、HypersonicSQL、Ingres、Progress、Mckoi SQL、...

    Mycat入门

    用来替代昂贵的Oracle集群一个融合内存缓存技术、NoSQL技术、HDFS大数据的新型SQLServer结合传统数据库和新型分布式数据仓库的新一代企业级数据库产品一个新颖的数据库中间件产品支持MySQL、Oracle、DB2、SQLServer...

    GreenmPlum5.8全家桶

    本资源包含: 1.greenplum.jar -- jdbc链接GP5.8数据库驱动包 2.greenplum-db-5.8.0-...GreenPlum 数据库,基于PostgreSQL改造,适用于分布式大数据集群,最早由阿里引进中国,后阿里在其基础上扩展出云数据库-HybridDB

    利用mycat实现mysql数据库读写分离的示例

    一个融合内存缓存技术、NoSQL技术、HDFS大数据的新型SQL Server 结合传统数据库和新型分布式数据仓库的新一代企业级数据库产品 一个新颖的数据库中间件产品 MyCAT关键特性 支持SQL92标准 支持MySQL、Oracle、...

    BBS-CS 天乙社区 v6.0(含源码)

    2、支持多数据库:天乙社区6.0采用了Hibernate作为数据库持久化的解决方案,支持DB2、PostgreSQL、MySQL、Oracle、Sybase、Microsoft SQL Server、SAP DB、Informix、HypersonicSQL、Ingres、Progress、Mckoi ...

    BBS-CS 天乙社区 v6.0.1(含源码)

    2、支持多数据库:天乙社区6.0采用了Hibernate作为数据库持久化的解决方案,支持DB2、PostgreSQL、MySQL、Oracle、Sybase、Microsoft SQL Server、SAP DB、Informix、HypersonicSQL、Ingres、Progress、Mckoi ...

    Broadsea:Broadsea使用跨平台Docker容器技术部署了完整的OHDSI技术堆栈(R方法库和Web工具)

    Broadsea使用跨平台的Docker容器技术部署了完整的OHDSI技术堆栈(R方法库和Web工具)。 该存储库包含用于启动Broadsea Docker容器的示例Docker Compose文件: OHDSI R方法库(在RStudio中)-由Marc Suchard维护 ...

    Oracle升级迁移实战文章和方案文档汇总-共168篇.xlsx

    Oracle 迁移至 PostgreSQL 在华为 ARM 上的解决方案 rman异机迁移 迁移 ORACLE数据库和应用异构迁移最佳实践_樊文凯 数据库信息收集表-Oracle数据库迁移升级场景-云和恩墨 零停机时间完成Oracle 上云迁移 OGG能够...

    MQTT开源消息服务介绍

    技术和产品方面,EMQTT项目本身采用了类似WhatsApp的设计架构,核心解决物联网服务器需要处理大量并发连接问题,是目前全球市场唯一一个真正单节点承载100万,集群承载到1000万线的开源项目。EMQTT项目实现完整协议...

    最新云平台和数据库平台迁移方案合集(21份).zip

    云平台&数据平台迁移方案合集,共21份。 Elasticsearch数据迁移与容灾实践 云计算业务迁移实验指导 kubernetes容器云平台迁移实践 Oracle数据迁移技巧和优化思路 ...云时代数据库迁移 & 容灾技术新进展与应用

    高频大数据解决方案.pptx

    关键技术特性 ACID全事务支持 灵活的扩展性 错误恢复 可持久化到硬盘 内嵌OLAP 导出连接器 基于网络的异步集群复制 6 高频大数据解决方案全文共28页,当前为第6页。 关键特性: 线性扩展 7 增加一个新结点到VoltDB...

Global site tag (gtag.js) - Google Analytics