PHP操作MongoDB时的整数问题及对策

三里屯摇滚

]

PHP操作MongoDB时的整数问题及对策

本文是一篇转载文章，对MongoDB PHP驱动中的一个bug进行了描述，其间对MongoDB和Group操作和MapReduce操作都给出了典型的例子，值得一看。

原文链接：http://huoding.com/2011/03/13/55

本文所说的整数问题，其实并不是MongoDB的问题，而是PHP驱动的问题：MongoDB本身有两种整数类型，分别是：32位整数和64位整数，但旧版的PHP驱动不管操作系统是32位还是64位，把所有整数都当做32位整数处理，结果导致64位整数被截断。为了在尽可能保持兼容性的前提下解决这个问题，新版PHP驱动加入了mongo.native-long选项，以期在64位操作系统中把整数都当做64位来处理，有兴趣的可参考：64-bit integers in MongoDB。

那么PHP驱动真的完全解决了整数问题么？NO！在处理group操作的时候还有BUG：

为了说明问题，我们先来生成一些测试数据：

1. selectCollection('test', 'test');
   
2. 
   
3. for ($i = 0; $i < 10; $i++) {
   
4.     $instance->insert(array(
   
5.         'group_id' => rand(1, 5),
   
6.         'count'    => rand(1, 5),
   
7.     ));
   
8. }
   
9. ?>下面让我们使用group操作，根据group_id分组，汇总计算count：
   
10. 
    
11. selectCollection('test', 'test');
    
12. $keys = array('group_id' => 1);
    
13. $initial = array('count' => 0);
    
14. 
    
15. $reduce = '
    
16.     function(obj, prev) {
    
17.         prev.count += obj.count;
    
18.     }
    
19. ';
    
20. 
    
21. $result = $instance->group($keys, $initial, $reduce);
    
22. var_dump($result);

复制代码

?>结果和预想的有出入，count没有实现累加，而是变成了[object Object]，目前，如果必须使用group操作，那么有两种方法可以缓解这个问题：

方法一：

ini_set('mongo.native_long', 0);方法二：

$initial = array('count' => (float)0);这两种方法都是治标不治本的权宜之计，既然当前PHP驱动里group的实现有问题，那我们就绕开它，用其它的方式实现同样的功能，这个方式就是MapReduce：

1. selectDB('test');
   
2. 
   
3. $map = '
   
4.     function() {
   
5.         emit(this.group_id, this.count);
   
6.     }
   
7. ';
   
8. 
   
9. $reduce = '
   
10.     function(key, values) {
    
11.         var sum = 0;
    
12. 
    
13.         for (var index in values) {
    
14.             sum += values[index];
    
15.         }
    
16. 
    
17.         return sum;
    
18.     }
    
19. ';
    
20. 
    
21. $result = $instance->command(array(
    
22.     'mapreduce' => 'test',
    
23.     'out'       => 'name',
    
24.     'map'       => $map,
    
25.     'reduce'    => $reduce
    
26. ));
    
27. 
    
28. $result = iterator_to_array($instance->{$result['result']}->find());
    
29. var_dump($result);
    
30. ?>

复制代码

说明：虽然从表面上看MapReduce要生成一个新的Collection，显得有些低效，但我们可以定期预生成它，相当于维护一个缓存表，只要对实时性要求不太高就没问题。

把大象放冰箱里需要三步，而使用MapReduce仅仅需要Map和Reduce两步即可，这里有一个PDF文档生动的说明了MySQL中GROUP BY和MongoDB中MapReduce的对应关系：



此外，还有很多资料可供参考，如：MongoDB Aggregation III: Map-Reduce Basics。

说明：软件版本为MongoDB（1.6.5），PECL Mongo（1.1.4）。不同版本结论可能不同。

冰释一片天

希望与楼至多多交流