设为首页 收藏本站
查看: 840|回复: 0

[经验分享] mongoDB .Net,Asp.Net高效分页类

[复制链接]

尚未签到

发表于 2015-7-8 07:24:06 | 显示全部楼层 |阅读模式
  最近在研究mongodb,发现她的性能比mysql好很多,但具体快多少还没有测试过。

     项目组最近在策划新的游戏,我们程序都开始准备相关的东西,首先是游戏的后台,由于用mongodb,所以整个框架都得重新写过,分页类也不例外。本来分页是用skip+limit的,但有一次我不知道手哪里痒了,弄了100w数据进去,发现这种分页方法的效率骤然下降,从第一页翻到最后一页竟然要0.9s,而且只是100w数据,效率实在太低了,因为考虑到操作日志,消费日志这些大表,百万级数据是很正常的事情,所以这样的分页是伤不起的,所以我决定改进一下分页的算法。
从网上找到资料,原来对于大数据量的分页,都不用skip+limit的,是通过改变查询规则来起到分页的效果。由于不用略过,所以无聊数据量有多大,时间复杂度的波动不大。
这个是根据,实现原理是通过数据库主键ID来进行查询分页
    //操作数据库帮助类
        protected MongoDBConnector_Local_NoAuth conn = new MongoDBConnector_Local_NoAuth();
   //存放分页连对应主键ID,然后通过ID进行查询
        protected Dictionary docId = new Dictionary();
        ///
        /// 获取数据并进行分页计算
        ///
        /// 这个用户查询
        /// 分页大小
        /// 当前页数
        /// 分页的页面:比如Default.aspx
        /// 这个是输出参数,输出分页连
        /// 查询到数据
    public IList GetList(string t, int PageSize, int CurrentPageIndex, string PageLink, out string homepage)
        {
            //获取数据库
            MongoDatabase database = conn.DataBase_Select_ReturnDB("Ask");
            //获取数据
            MongoCollection mcollection = database.GetCollection("Answer");
            QueryConditionList query = null;//定义查询条件
            int id = 0;
            object obj = HttpContext.Current.Session["ids"];//读取缓存数据
        //缓存为空,重新开始查询
            if (object.Equals(obj, null))
            {
                query = Query.GT("ID", 0);
            }//分页连处理
            else if (CurrentPageIndex ==1)
            {
                query = Query.GT("ID", 0);
            }
            else
            {//读取条件生成查询
                Dictionary docKey = obj as Dictionary;
                id = docKey[CurrentPageIndex];
                query = Query.GT("ID", id);
            }
            int recordCount = Convert.ToInt32(mcollection.Count());
            int mpage = recordCount / PageSize + (recordCount % PageSize > 0 ? 1 : 0);
            int PageNo = Math.Min(Convert.ToInt32(start) / PageSize + 1, mpage);
            homepage = PageLink_aspx(PageLink, t, CurrentPageIndex, recordCount, mpage);
            MongoCursor mcursor = mcollection.Find(query).SetLimit(20).SetSortOrder(SortBy.Ascending("ID"));
            //判断1到6页 不变
            if (CurrentPageIndex - 6 =0; i--)
                {
                    start_left = start_left + 1;
                    docId.Add(start_left, alist_left[i * 20].ID);
                }
                int ys_left = cnt_left % 20;
                if (ys_left != 0)
                    docId.Add(start_left + 1, alist_left[cnt_left - ys_left].ID);
                //获取分页连右边数据
                query = Query.GT("ID", id);
                IList alist_right = mcollection.Find(query).SetLimit(120).SetSortOrder(SortBy.Ascending("ID")).ToList();
                int start_right = start_left;
                int cnt_right = alist_right.Count;
                int page_right = cnt_right / 20;
                for (int i = 0; i < page_right; i++)
                {
                    if (i == 0)
                        continue;
                    start_right = start_right + 1;
                    docId.Add(start_right, alist_right[i * 20].ID);
                }
                int ys_right = cnt_left % 20;
                if (ys_left != 0)
                    docId.Add(start_right + 1, alist_right[cnt_right - ys_right].ID);
                HttpContext.Current.Session["ids"] = docId;
            }
            return mcursor.ToList();
        }
        ///
        /// 动态分页链接
        ///
        /// 分页页面名称
        /// 查询条件做URL地址进行传参
        /// 当前页数
        /// 总记录数
        /// 总页数
        ///
        public string PageLink_aspx(string HomePageStr, string t, int PageNo, int totalCnt, int mpage)
        {
            int i, j, k;
            string homelink;
            string homepage;
            homepage = "";
            homelink = HomePageStr
;
            homepage = homepage + "第 " + (PageNo).ToString() + " / " + mpage.ToString() + " 页&nbsp; 共" + totalCnt + "条&nbsp;";
            if (PageNo > 1)
            {
                homepage += " 首页 ";
                homepage = homepage + " 上一页  ";
            }
            else { homepage = homepage + " 上一页  "; }
            if (PageNo  mpage) { k = mpage; }
            for (j = i; j

运维网声明 1、欢迎大家加入本站运维交流群:群②:261659950 群⑤:202807635 群⑦870801961 群⑧679858003
2、本站所有主题由该帖子作者发表,该帖子作者与运维网享有帖子相关版权
3、所有作品的著作权均归原作者享有,请您和我们一样尊重他人的著作权等合法权益。如果您对作品感到满意,请购买正版
4、禁止制作、复制、发布和传播具有反动、淫秽、色情、暴力、凶杀等内容的信息,一经发现立即删除。若您因此触犯法律,一切后果自负,我们对此不承担任何责任
5、所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其内容的准确性、可靠性、正当性、安全性、合法性等负责,亦不承担任何法律责任
6、所有作品仅供您个人学习、研究或欣赏,不得用于商业或者其他用途,否则,一切后果均由您自己承担,我们对此不承担任何法律责任
7、如涉及侵犯版权等问题,请您及时通知我们,我们将立即采取措施予以解决
8、联系人Email:admin@iyunv.com 网址:www.yunweiku.com

所有资源均系网友上传或者通过网络收集,我们仅提供一个展示、介绍、观摩学习的平台,我们不对其承担任何法律责任,如涉及侵犯版权等问题,请您及时通知我们,我们将立即处理,联系人Email:kefu@iyunv.com,QQ:1061981298 本贴地址:https://www.yunweiku.com/thread-84226-1-1.html 上篇帖子: mongodb指南(翻译)(六) 下篇帖子: MongoDB资料汇总【转】
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

扫码加入运维网微信交流群X

扫码加入运维网微信交流群

扫描二维码加入运维网微信交流群,最新一手资源尽在官方微信交流群!快快加入我们吧...

扫描微信二维码查看详情

客服E-mail:kefu@iyunv.com 客服QQ:1061981298


QQ群⑦:运维网交流群⑦ QQ群⑧:运维网交流群⑧ k8s群:运维网kubernetes交流群


提醒:禁止发布任何违反国家法律、法规的言论与图片等内容;本站内容均来自个人观点与网络等信息,非本站认同之观点.


本站大部分资源是网友从网上搜集分享而来,其版权均归原作者及其网站所有,我们尊重他人的合法权益,如有内容侵犯您的合法权益,请及时与我们联系进行核实删除!



合作伙伴: 青云cloud

快速回复 返回顶部 返回列表