65trfd 发表于 2014-6-30 09:32:24

memcached 主要启动流程笔记

以下笔记主要是关注tcp模式下memcached的启动过程。
main()
        设置信号处理函数为sig_handler()
初始化系统设置,保存在全局变量settings里面
        settings_init();
        解析启动参数,使用settings局变量保存配置

根据启动参数初始化系统具体使用的hash函数,默认为jenkins_hash()哈希函数
        hash_init() ;
        根据tcp_specified的值设置网络监听模式,默认为tcp模式
        之后设置可使用的cpu核的数量以及最大链接数量
        限制启动的权限,通常需要root权限启动应用
        设置是否以守护进程方式启动
       
        调用libevent库获得一个事件监听实例,libevent基本使用方法event_init() => evtimer_set() => event_add() =>event_dispatch()
event_init();
        初始化系统全局状态信息变量
        stats_init();
        初始化哈希表,参数为哈希表buckets的级数,即buckets = ((unsigned longint)1<<(n))
    assoc_init(int hashpower_init);
        设置并初始化链接数组,用于保存每个链接的fd, 默认为最大fd不大于max_conn + 10
    conn_init();
        内存管理的初始化,参数为:总申请内存的大小,默认为64m, 块大小变化因子,是否预划分内存
        factor的使用主要是在每一个内存page中划分chunck时使用,每个page最大为1m, 例如slab_class1每一个chunck 为80bytes, 则slab_class2每一        个chunck大小为80*factor
        factor的值在1.4.20版本默认为1.25,chunck的默认最小为48byte
        preallocate默认为false,若为true则系统默认将为每一种slab_class申请一个实例,但是有可能有些始终不会被用到,因此默认启动时为false
    slabs_init(maxbytes, factor, preallocate);
        启动并初始化worker线程
        num_threads表示worker线程的数量,主线程负责接受并创建链接,而worker线程则负责链接命令的I/O操作
        初始化各种多线程同步锁,创建主线程与worker线程通信的pipe通道,主要用于分配新链接,分配过程负载均衡使用round-robin轮询调度算法
        使用pthread库创建线程并使用同步锁确保worker线程都启动完成才结束函数
        thread_init(settings.num_threads, main_base);
        启动哈希表的维护线程,主要负责哈希表的扩容
        start_assoc_maintenance_thread();
        根据启动参数决定是否启动内存模块的管理线程,主要是考虑数据存储的value值比较极端的情况,例如可能某一种chunck分配之后很久没有被访问,而其他经常被访问的则申请存储不成功,根据LRU算法策略可考虑将最近最少访问的内存块重新划分,slab_maintenance_thread主要做这些工作
        if (settings.slab_reassign &&
      start_slab_maintenance_thread() == -1)

        init_lru_crawler();
        启动定时器,用一个全局变量维持一个当前时间的记录,这样多线程都访问全局变量获得当前时间,减少获取时间系统调用
        clock_handler();
        启动socket监听
        server_sockets();
        启动事件循环监听
        eventevent_base_loop();


页: [1]
查看完整版本: memcached 主要启动流程笔记