设为首页 收藏本站
查看: 1062|回复: 0

[经验分享] PostgreSQL启动过程中的那些事七:初始化共享内存和信号十六:shmem中初始化BgWriter

[复制链接]

尚未签到

发表于 2016-11-21 08:00:12 | 显示全部楼层 |阅读模式
       这一节pg初始化后台写进程(BgWriter)用到的相关结构,通过BgWriterShmemInit例程实现。主要是初始化了一个BgWriterShmemStruct结构,并使用了面向过程C语言编程的一个技巧,把这个结构中的固定长度数组BgWriterRequest requests[1]扩充成NBuffers个(根据默认值或GUC参数的设置计算得到)的BgWriterRequest结构的数组,以供后台写进程使用。
后台写进程bgwriter是pg8.0新增加的。尝试维护一个常规backend进程来从必须写出的脏共享缓存写出数据。负责处理共享缓存数据交换、所有检查点的WAL日志。其和其他backend进程在共享内存中进行互动互操作。
 
1先上个图,看一下函数调用过程梗概,中间略过部分细节
 
DSC0000.bmp
初始化BgWriter内存方法调用流程图

  
 

  
2初始化xlog相关结构
  
话说main()->…->PostmasterMain()->…->reset_shared() ->CreateSharedMemoryAndSemaphores()>…-> BgWriterShmemInit(),调用ShmemInitStruct(),在其中调用hash_search()在哈希表索引"ShmemIndex"中查找"Background Writer Data",如果没有,就在shmemIndex中给"Background Writer Data"分一个HashElement和ShmemIndexEntentry),在其中的Entry中写上"BackgroundWriter Data"。返回ShmemInitStruct(),再调用ShmemAlloc()在共享内存上给"BackgroundWriter Data"相关结构(见下面“BackgroundWriter Data相关结构图”)分配空间,设置entry(在这儿及ShmemIndexEnt类型变量)的成员location指向该空间,size成员记录该空间大小,最后返回BgWriterShmemInit(),让BgWriterShmemStruct*类型静态全局变量BgWriterShmem指向所分配内存,初始化BgWriterShmemStruct结构类型的成员值。
  
相关结构定义和图见下面:
  
 
  
typedef struct

  
{

  
    RelFileNodeBackend rnode;

  
    ForkNumber forknum;

  
    BlockNumber segno;          /* see md.c for special values */

  
    /* might add a real request-type fieldlater; not needed yet */

  
} BgWriterRequest;

  
 

  
typedef struct

  
{

  
    pid_t      bgwriter_pid; /* PID of bgwriter(0 if notstarted) */

  
 

  
    slock_t       ckpt_lck;     /* protects all the ckpt_* fields */

  
 

  
    int        ckpt_started; /* advances whencheckpoint starts */

  
    int        ckpt_done;    /*advances when checkpoint done */

  
    int        ckpt_failed/* advances whencheckpoint fails */

  
 

  
    int        ckpt_flags;       /*checkpoint flags, as defined in xlog.h */

  
 

  
    uint32     num_backend_writes;      /* countsnon-bgwriterbuffer writes */

  
    uint32     num_backend_fsync;       /* countsnon-bgwriterfsynccalls */

  
 

  
    int        num_requests; /* current # ofrequests */

  
    int        max_requests; /* allocatedarray size */

  
    BgWriterRequest requests[1];    /* VARIABLE LENGTH ARRAY */

  
} BgWriterShmemStruct;

  
 

  
static BgWriterShmemStruct *BgWriterShmem;

  
 
DSC0001.bmp
初始化完Background Writer Data相关结构的共享内存结构图

  
       为了精简上图,把创建shmem的哈希表索引"ShmemIndex"时创建的HCTL结构删掉了,这个结构的作用是记录创建可扩展哈希表的相关信息,不过这个结构在"ShmemIndex"创建完成后也会由于出了对象作用域而消失。增加了左边灰色底的部分,描述共享内存/shmem里各变量物理布局概览,由下往上,由低地址到高地址。图中黄色的索引项就是本节新增加的索引项。
  
 

DSC0002.bmp



 

Background Writer Data相关结构图

运维网声明 1、欢迎大家加入本站运维交流群:群②:261659950 群⑤:202807635 群⑦870801961 群⑧679858003
2、本站所有主题由该帖子作者发表,该帖子作者与运维网享有帖子相关版权
3、所有作品的著作权均归原作者享有,请您和我们一样尊重他人的著作权等合法权益。如果您对作品感到满意,请购买正版
4、禁止制作、复制、发布和传播具有反动、淫秽、色情、暴力、凶杀等内容的信息,一经发现立即删除。若您因此触犯法律,一切后果自负,我们对此不承担任何责任
5、所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其内容的准确性、可靠性、正当性、安全性、合法性等负责,亦不承担任何法律责任
6、所有作品仅供您个人学习、研究或欣赏,不得用于商业或者其他用途,否则,一切后果均由您自己承担,我们对此不承担任何法律责任
7、如涉及侵犯版权等问题,请您及时通知我们,我们将立即采取措施予以解决
8、联系人Email:admin@iyunv.com 网址:www.yunweiku.com

所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其承担任何法律责任,如涉及侵犯版权等问题,请您及时通知我们,我们将立即处理,联系人Email:kefu@iyunv.com,QQ:1061981298 本贴地址:https://www.yunweiku.com/thread-303139-1-1.html 上篇帖子: PostgreSQL启动过程中的那些事七:初始化共享内存和信号十五:shmem中初始化ProcSignal 下篇帖子: PostgreSQL启动过程中的那些事十六:启动进程三:CheckPointGuts刷出共享内存里所有数据
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

扫码加入运维网微信交流群X

扫码加入运维网微信交流群

扫描二维码加入运维网微信交流群,最新一手资源尽在官方微信交流群!快快加入我们吧...

扫描微信二维码查看详情

客服E-mail:kefu@iyunv.com 客服QQ:1061981298


QQ群⑦:运维网交流群⑦ QQ群⑧:运维网交流群⑧ k8s群:运维网kubernetes交流群


提醒:禁止发布任何违反国家法律、法规的言论与图片等内容;本站内容均来自个人观点与网络等信息,非本站认同之观点.


本站大部分资源是网友从网上搜集分享而来,其版权均归原作者及其网站所有,我们尊重他人的合法权益,如有内容侵犯您的合法权益,请及时与我们联系进行核实删除!



合作伙伴: 青云cloud

快速回复 返回顶部 返回列表