首页 > 数据库技术 > 详细

打算用mongodb mapreduce之前一定要知道的事!!!

时间:2016-11-23 19:09:33      阅读:204      评论:0      收藏:0      [点我收藏+]

mapreduce其实是分批处理数据的,每一百次重新reduce处理,所以到reduce里的数据如果是101条,那就会分2次进入。

这导致的问题就是在reduce中 如果 初始化 var count = 0;在循环中 count ++,最后输出的是1???

避免都方法是,把数据存在返回的value里,这个value是会在循环进入reduce的时候重用的。在循环中 count  += value.count就能把之前都100加上了!!!

还有如果只有一条数据,那它不会进入reduce,会直接返回。

下面是具体例子:

            string map = @"
            function() {
                var view = this;
                emit(view.activity, {pv: 1});
            }";
            string reduce = @"        
            function(key, values) {
                var result = {pv: 0};
                values.forEach(function(value){ 
                   result.pv +=  value.pv;
                });
                return result;
            }";
            string finalize = @"
            function(key, value){
                return value;
            }";

 

打算用mongodb mapreduce之前一定要知道的事!!!

原文:http://www.cnblogs.com/amazingDuck/p/6094524.html

(0)
(0)
   
举报
评论 一句话评论(0
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!