- 浏览: 226641 次
- 性别:
- 来自: 北京
文章分类
最新评论
-
chenxliang:
2016年10月26、27日,上海浦东,Postgres中国用 ...
PostgreSQL的用户、角色和权限管理 -
gejiod:
最近出了SQL:2011標準,希望樓主也更新下
SQL2008标准 -
lincon77:
太长了,又是E文,要是有些例子可能好理解些
SQL2003标准 -
少主丶无翼:
很谢,找了很久
SQL2003标准 -
zeeeitch:
...
PostgreSQL启动过程中的那些事七:初始化共享内存和信号二十:shmem中初始化堆同步扫描、pg子进程相关结构
话说初始化和设置完 GUC 参数后,改变了当前工作文件夹,给数据集文件夹加了文件锁 postmaster.pid ,接着就是初始化时区设置,这些都跳过去了,后来发现初始化时区用到了 pg 里的动态哈希表,决定还是把这个写出来。
动态哈希表在 pg 里使用的地方很多, pg 使用它管理共享内存 shared memory 、锁、市区 timezone 等。 Linux 使用哈希表来管理内存、连接等。后面再讨论 pg 里的动态哈希表 dynmaic hashtable 。
1 先上个图,看一下函数调用过程梗概,中间略过部分细节
初始化 Timezones 的方法调用过程图
这一节写图中红色方框圈起来的部分,上面的部分基本上在前面已经写过了,有小部分有略过。红色框中的部分就是初始化 Timezones 的过程调用,这主要做了两件事,一是创建了一个 ”Timezones” AllocSet/MemoryContext ,二是建了一个 pg 中的动态哈希表,来管理 / 存放 timezone 。
2 初始化全局时区 global_t imezones 的过程
话说 main()-> … ->PostmasterMain()-> … -> pg_timezone_initialize () ( 以后用“ -> ” 表示调用 ) ,先到前面的文章《 pg 启动过程中的那些事三》里提到的 config_generic ** 类型的有序 GUC 参数数组 guc_variables 里用二分法查找 config_string 类型参数timezone ,此时该参数还没有设置,接着 -> select_default_ timezone() -> identify_system_timezone() 函数根据 OS 环境变量识别操作系统的 timezone 设置,再 -> select_default_ timezone() -> set_global_timezone() -> pg_tzset() 在内存里初始化一个静态全局变量动态哈希表static HTAB * timezone_cache ,在哈希表timezone_cache 里记录时区结构pg_tz_cache 类型的实例。然后使pg_tz * 类型全局指针变量 global_timezone 指向哈希表中的pg_tz_cache 结构类型实例中pg_tz 结构的成员tz 。最后->SetConfigOption() 设置GUC 参数“timezone ”为“ASIA/Hong_Kong ”(这个是我PC 上跑的结果)。
下面是pg_tz_cache 、pg_tz 等机构定义。
typedef struct
{
/* tznameupper contains the all-upper-case name of the timezone */
char tznameupper[TZ_STRLEN_MAX + 1];
pg_tz tz;
} pg_tz_cache;
struct pg_tz
{
/* TZname contains the canonically-cased name of the timezone */
char TZname[TZ_STRLEN_MAX + 1];
struct state state;
};
struct state
{
int leapcnt;
int timecnt;
int typecnt;
int charcnt;
pg_time_t ats[TZ_MAX_TIMES];
unsigned char types[TZ_MAX_TIMES];
struct ttinfo ttis[TZ_MAX_TYPES];
char chars[BIGGEST(BIGGEST(TZ_MAX_CHARS + 1, 3 /* sizeof gmt */ ),
(2 * (TZ_STRLEN_MAX + 1)))];
struct lsinfo lsis[TZ_MAX_LEAPS];
};
struct ttinfo
{ /* time type information */
long tt_gmtoff; /* UTC offset in seconds */
int tt_isdst; /* used to set tm_isdst */
int tt_abbrind; /* abbreviation list index */
int tt_ttisstd; /* TRUE if transition is std time */
int tt_ttisgmt; /* TRUE if transition is UTC */
};
struct lsinfo
{ /* leap second information */
pg_time_t ls_trans; /* transition time */
long ls_corr; /* correction to apply */
};
pg_tz_cache 的结构在内存里看起来是这样的。
时区相关结构图
初始化global_timezone 是从 -> select_default_ timezone() -> set_global_timezone() -> pg_tzset() -> init_timezone_hashtable() -> hash_create() 开始的(调用过程要是看晕了就看上面的调用过程图吧),先初始化一个AllocSet/MemoryContext 类型变量“Timezones ”,接着在AllocSet/MemoryContext 类型的“Timezones ”实例里就是HTAB 、HASHHDR 、HashSegment 、HashBucket 、HashElemen 等等一堆招呼,初始化成了“Timezones ”动态哈希表。熟悉哈希表/ 哈希算法的同学看着HashBucket 、HashElement 也能猜出来大概是干什么用的,HashSegment 是干什么的?这个和动态哈希表“dynmaic hashtable ”的动态,或者说可扩展哈希表的可扩展有关。我认为用 “可扩展哈希表” 更能体现“dynmaic hashtable ”的功能,更贴近中国人用词习惯,以后就用“可扩展哈希表”吧。可扩展哈希表以后再讨论。pg 里还有个Shared memory index, 也是这个可扩展哈希表类型的,是和共享内存管理有关的东东,到内存管理机制时再讨论。
经过一连串的调用,hash_create 创建的可扩展哈希表“Timezones ”是一个由256 个HashSegment ,256 个HashBucket ,4 个HashSegment+Entry 组成的哈希表。在pg 里,有的哈希表是放在内存上下文MemoryContext 中的,有的哈希表是放在共享内存shared memory 里的,这个 “Timezones ”哈希表是放在“Timezones ”内存上下文里的。为了看起来更清晰,就没有把“Timezones ”哈希表放到AllocBlock 里的AllocChunk 里。结构图在下面。
“Timezones ”哈希表结构
pg 里的timezone 文件以PG_BINARY 格式存放在%PostgreSQL Home%\share\timezone 里。
发表评论
-
PostgreSQL服务过程中的那些事三:pg服务进程中的内存上下文
2012-12-31 15:07 1996题外话:年底了,就以这篇博文结束2012 ... -
PostgreSQL服务过程中的那些事二:Pg服务进程处理简单查询六:执行器执行
2012-11-07 20:13 1783话说 查询“ select c ... -
PostgreSQL服务过程中的那些事二:Pg服务进程处理简单查询五:规划成plantree
2012-10-31 20:37 1646话说 查询“ select cname, comp ... -
PostgreSQL服务过程中的那些事二:Pg服务进程处理简单查询四:分析重写成querytree
2012-10-24 19:27 1386话说 查询“ select cname, comp ... -
postgresql 小技巧
2012-10-16 19:36 1317Note : #PostgreSQL and ... -
PostgreSQL服务过程中的那些事二:Pg服务进程处理简单查询三:获取内存快照
2012-10-16 19:31 1731话说 查询“ select cname, comp ... -
PostgreSQL服务过程中的那些事二:Pg服务进程处理简单查询二:SQL解析为parsetree
2012-10-09 19:50 1488话说 查询“ select cname, comp fr ... -
PostgreSQL服务过程中的那些事二:Pg服务进程处理简单查询一:开启事务
2012-09-25 19:55 1824在《 PostgreSQL 服务过程中的那些事二: ... -
PostgreSQL服务过程中的那些事一:启动postgres服务进程一.八:加载DB基础设施,完成服务进程初始化
2012-09-18 21:02 1737话说调用 InitPostgres ... -
PostgreSQL服务过程中的那些事一:启动postgres服务进程一.七:初始化portal管理环境
2012-09-11 19:58 1603话说调用 In ... -
PostgreSQL服务过程中的那些事一:启动postgres服务进程一.六:初始化系统表缓存catcache
2012-09-04 20:51 1810话说调用 InitPostgres ... -
PostgreSQL服务过程中的那些事一:启动postgres服务进程一.五:初始化relcache管理环境
2012-08-28 20:47 1270话说调用 InitPostgres ... -
PostgreSQL服务过程中的那些事一:启动postgres服务进程三:初始化relcache管理环境
2012-08-28 20:46 0<!-- [if gte mso 9]><x ... -
PostgreSQL服务过程中的那些事二:Pg服务进程处理简单查询梗概
2012-08-21 21:04 1213话说客户端发起请求, pg 服务器为该请求启动一个 ... -
PostgreSQL服务过程中的那些事一:启动postgres服务进程二:建立连接完成
2012-08-13 18:50 15343 这节主要讨论 pg 服务进程 pos ... -
PostgreSQL服务过程中的那些事一:启动postgres服务进程一
2012-08-08 14:42 5641到pg 服务进程了,打算搞一个完整但简单的查询例子,从 ... -
PostgreSQL启动过程中的那些事十九:walwriter进程二
2012-08-03 16:53 13403 这节主要讨论 walwrit ... -
PostgreSQL启动过程中的那些事十九:walwriter进程一
2012-08-01 17:26 1540话说 main()->Po ... -
PostgreSQL启动过程中的那些事十八:bgwriter进程二
2012-07-27 07:25 14003 这节主要讨论 bgwr ... -
PostgreSQL启动过程中的那些事十八:bgwriter进程一
2012-07-23 20:18 1563话说 main()->Postm ...
相关推荐
五、 pg _roles:_roles:_roles:_roles: _roles: 69 六、 pg_rules: pg_rules:pg_rules:pg_rules: pg_rules: 69 七、 pg_settings: pg_settings: pg_settings: pg_settings:pg_settings: pg_settings:pg_settings:pg_...
PostgreSQL的学习心得和知识总结(四十五)|关于PostgreSQL数据库开源作业调度扩展 pg_cron 默认GMT时区修改 的实现方案
pg_timetable:PostgreSQL高级调度 pg_timetable是PostgreSQL高级作业调度程序,与cron等传统调度程序相比,具有许多优势。 它完全由数据库驱动,并提供了一些高级概念。 # ./pg_timetable Application Options: -...
/_____/\ /______/\ /_____/\ /__/\ /__/\ /_______/\/_____/\ /________/\\:::_ \ \\::::__\/__\::::_\/_\::\ \\ \ \ \__.::._\/\::::_\/_\__.::.__\/ \:(_) \ \\:\ /____/\\:\/___/\\::\/_\ .\ \ \::\ \ \:\/___/\...
:smiling_face_with_heart-eyes: :elephant: pg-emoji1.关于emoji是一个纯SQL 扩展,用于按/文本对表情符号进行编码/解码。 查找表由[ ]中的前1024个表情符号构成,其中每个表情符号都映射到一个唯一的10位序列。 ...
Angular的国际化(i18n)库 Transloco允许您为内容定义不同语言的翻译,并在运行时轻松地在它们之间切换。 它公开了丰富的API,可以高效,干净地管理翻译。 它提供了多个插件,可以改善您的开发经验。 以下是它提供...
明白ORACLE的多国语言设置,ORACLE多国语言设置是为了支持世界范围的语言与字符集,一般对语言提示,货币形式,排序方式和CHAR,VARCHAR2,CLOB,LONG字段的数据的显示等有效。ORACLE的多国语言设置最主要的 两个特性...
如何运行: $ docker run -d --name postgres -e POSTGRES_PASSWORD=postgres binakot/postgresql-postgis-timescaledb 您也可以使用构建的docker映像和pgAdmin4运行应用程序堆栈:docker docke
pg_snapshot_too_old 用于在PostgreSQL中启用Snapshot Too Old错误的扩展。 概要 安装扩展 ./configure make sudo make install 加载扩展 CREATE EXTENSION pg_snapshot_too_old; 配置扩展 全局配置 更新/etc/...
静态修改内核,过WIN7 PG保护,添加启动项即可实现过PG。
消息封装 在OSD上发送和接收信息。有两类: 1.cluster_messenger -与其它OSDs和monitors沟通 2.client_messenger - 与客户端沟通 消息调度 Dispatcher类,主要负责...9. RemoveWQ: 删除旧的pg目录。运行在disk_tp。
官方文档:ARM-v8架构开发指南:DEN0024A_v8_architecture_PG.pdf
pg听Postgres有效的监听和通知 PostgreSQL可以充当消息代理:从一个数据库客户端向其他数据库客户端发送带有任意有效负载的通知。 与node.js 8+和普通JavaScript或TypeScript 3一起使用。使用Postgres 语句并使用...
这个 Graphile Engine 插件在连接的orderBy参数中添加了额外的枚举值,允许您按相关表中的列进行排序。 需要postgraphile@^4.3.1或graphile-build-pg@^4.3.1 例子: { # additional enum values exposed here :...
nacos-2.0.1 postgresql初始化脚本
AXI Memory Mappedto PCI Express (PCIe)
pg-mem是postgres数据库的实验性内存模拟。 :red_heart: 它既可以在节点中运行,也可以在浏览器中运行。 :star: 如果您喜欢这个软件包,这个回购,它有助于激励我:) :backhand_index_pointing_right: 在观看 ...
所也在nand_device_info.c中添加nand结构信息如下: { .end_of_table = false, .man_id = 0xec, .dev_id = 0xa1, .cell_type = NAND_DEVICE_CELL_TECH_SLC, .chip_size_in_bytes = 128LL*SZ_1M, .ppb = 64, ...
pg_ctl start启动时报错退出:pg_ctl:server did not start in time。超时时间是多少?从什么时候到哪个阶段算超时? 二、分析:该信息打印位置,从后面代码段do_start函数中可以看出 1、pg_ctl start调用start_...
dr:提供用于布置表列顺序的工具,以优化ActiveRecord迁移和pg_dump生成SQL模式文件中的磁盘空间使用。 概述和有关PostgreSQL内部原理在进行了描述。 安装 将此行添加到您的应用程序的Gemfile中: gem 'pg_column_...