设为首页 收藏本站
查看: 1063|回复: 0

[经验分享] PostgreSQL启动过程中的那些事七:初始化共享内存和信号二十:shmem中初始化堆同步扫描、pg子进程相关结构

[复制链接]

尚未签到

发表于 2016-11-21 08:18:04 | 显示全部楼层 |阅读模式
       这一节pg初始化堆扫描同步支持用到的相关结构。
 
       堆扫描同步是当多个进程在同一个表上做顺序扫描(sequential scan),pg尝试保持他们同步以减少整体I/O需求。这个目标是读每一个页到共享内存仅一次,且使所有参与扫描这个页的进程在这个页被替换出共享内存前处理这个页。
 
活跃backend进程列表,这被用来跟踪pg有多少个孩子和在需要的时候给他们发送信号。
 
1先上个图,看一下函数调用过程梗概,中间略过部分细节
 

DSC0000.bmp
 
初始化同步扫描和Backend结构数组方法调用流程图

  
 

  
2初始化同步扫描相关结构
  
话说main()->…->PostmasterMain()->…->reset_shared() ->CreateSharedMemoryAndSemaphores()>…->SyncScanShmemInit(),调用ShmemInitStruct(),在其中调用hash_search()在哈希表索引"ShmemIndex"中查找"Sync Scan Locations List",如果没有,就在shmemIndex中给"Sync Scan Locations List"分一个HashElement和ShmemIndexEntentry),在其中的Entry中写上"Sync Scan Locations List"。返回ShmemInitStruct(),再调用ShmemAlloc()在共享内存上给"Sync Scan Locations List"相关结构(见下面“Sync Scan Locations List相关结构图”)分配空间,设置entry(在这儿及ShmemIndexEnt类型变量)的成员location指向该空间,size成员记录该空间大小,最后返回SyncScanShmemInit(),让ss_scan_locations_t*类型静态全局变量scan_locations指向所分配内存,初始化ss_scan_locations_t结构类型的成员值。
  
接着main()->…->PostmasterMain()->…->reset_shared() ->CreateSharedMemoryAndSemaphores() ->…-> ShmemBackendArrayAllocation(),调用ShmemAlloc()在共享内存上分配2 *MaxBackendsBackend结构数组见下面“Backend结构数组图”),让Backend *类型静态全局变量ShmemBackendArray指向所分配内存,用memset把所分配内存置0。
  
相关结构定义和图见下面:
  
 

  
typedef struct ss_scan_location_t

  
{

  
    RelFileNode relfilenode; /* identity of a relation */

  
    BlockNumber location;       /* last-reported location in the relation */

  
} ss_scan_location_t;

  
 

  
typedef struct ss_lru_item_t

  
{

  
    struct ss_lru_item_t *prev;

  
    struct ss_lru_item_t *next;

  
    ss_scan_location_t location;

  
} ss_lru_item_t;

  
 

  
typedef struct ss_scan_locations_t

  
{

  
    ss_lru_item_t *head;

  
    ss_lru_item_t *tail;

  
    ss_lru_item_t items[1];     /* SYNC_SCAN_NELEM items */

  
} ss_scan_locations_t;

  
 

  
#define SizeOfScanLocations(N)offsetof(ss_scan_locations_t, items[N])

  
 

  
/* Pointer to structin shared memory */

  
static ss_scan_locations_t *scan_locations;

  
 

  
/* prototypes for internalfunctions */

  
static BlockNumber ss_search(RelFileNode relfilenode,

  
         BlockNumber location, bool set);

  
 

  
 
  
typedef struct bkend

  
{

  
    pid_t      pid;          /* process id of backend */

  
    long       cancel_key;       /* cancelkey for cancels for this backend */

  
    int        child_slot;       /*PMChildSlot for this backend, if any */

  
    bool       is_autovacuum;    /* is itan autovacuum process? */

  
    bool       dead_end;     /* is itgoing to send an error and quit? */

  
    Dlelem     elem;         /* list link in BackendList */

  
} Backend;

  
 

  
static Backend *ShmemBackendArray;

  
 
DSC0001.bmp

 初始化完Sync Scan Locations List相关结构的共享内存结构图

  
       为了精简上图,把创建shmem的哈希表索引"ShmemIndex"时创建的HCTL结构删掉了,这个结构的作用是记录创建可扩展哈希表的相关信息,不过这个结构在"ShmemIndex"创建完成后也会由于出了对象作用域而消失。增加了左边灰色底的部分,描述共享内存/shmem里各变量物理布局概览,由下往上,由低地址到高地址。图中黄色的索引项就是本节新增加的索引项。
 
DSC0002.bmp

Sync Scan Locations List相关结构图

DSC0003.bmp

Backend结构数组图

运维网声明 1、欢迎大家加入本站运维交流群:群②:261659950 群⑤:202807635 群⑦870801961 群⑧679858003
2、本站所有主题由该帖子作者发表,该帖子作者与运维网享有帖子相关版权
3、所有作品的著作权均归原作者享有,请您和我们一样尊重他人的著作权等合法权益。如果您对作品感到满意,请购买正版
4、禁止制作、复制、发布和传播具有反动、淫秽、色情、暴力、凶杀等内容的信息,一经发现立即删除。若您因此触犯法律,一切后果自负,我们对此不承担任何责任
5、所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其内容的准确性、可靠性、正当性、安全性、合法性等负责,亦不承担任何法律责任
6、所有作品仅供您个人学习、研究或欣赏,不得用于商业或者其他用途,否则,一切后果均由您自己承担,我们对此不承担任何法律责任
7、如涉及侵犯版权等问题,请您及时通知我们,我们将立即采取措施予以解决
8、联系人Email:admin@iyunv.com 网址:www.yunweiku.com

所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其承担任何法律责任,如涉及侵犯版权等问题,请您及时通知我们,我们将立即处理,联系人Email:kefu@iyunv.com,QQ:1061981298 本贴地址:https://www.yunweiku.com/thread-303158-1-1.html 上篇帖子: PostgreSQL启动过程中的那些事七:初始化共享内存和信号十九:shmem中初始化BTree相关结构 下篇帖子: PostgreSQL启动过程中的那些事九_十_十一:初始化活跃backend进程列表、创建opts文件、保持非默认GUC参数文件
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

扫码加入运维网微信交流群X

扫码加入运维网微信交流群

扫描二维码加入运维网微信交流群,最新一手资源尽在官方微信交流群!快快加入我们吧...

扫描微信二维码查看详情

客服E-mail:kefu@iyunv.com 客服QQ:1061981298


QQ群⑦:运维网交流群⑦ QQ群⑧:运维网交流群⑧ k8s群:运维网kubernetes交流群


提醒:禁止发布任何违反国家法律、法规的言论与图片等内容;本站内容均来自个人观点与网络等信息,非本站认同之观点.


本站大部分资源是网友从网上搜集分享而来,其版权均归原作者及其网站所有,我们尊重他人的合法权益,如有内容侵犯您的合法权益,请及时与我们联系进行核实删除!



合作伙伴: 青云cloud

快速回复 返回顶部 返回列表