通用面試題:海量數據去重

那些優雅的數據結構(1) : BloomFilter——大規模數據處理利器

http://www.cnblogs.com/heaad/archive/2011/01/02/1924195.html

 

mapreduce
http://blog.csdn.net/sunxinhere/article/details/8011144