MapReduce高级编程之本地聚集与Combinner 2012-03-09

      本篇主要介绍Combinner，这个MapReduce Shuffle中占有重要地位，他能减少磁盘I/O以及网络Fetch时的数据迁移量，在MapRedu ...

(2184)次阅读|(4)个评论

MapReduce高级编程之自定义InputFormat 2012-03-05

  InputFormat是MapReduce中一个很常用的概念，它在程序的运行中到底起到了什么作用呢？ InputFormat其实是一个接口，包含了两个方法： ...

(4646)次阅读|(4)个评论

MapReduce高级编程之自定义DataType 2012-02-29

               Hadoop是用JAVA语言实现，然而它的基本数据类型却不是标准的JAVA对象，而 ...

(2664)次阅读|(1)个评论

MapReduce高级编程系列概论 2012-02-27

     用过MapRedcdue的人可能会感觉到好多场景并不能得以应用，也会感觉MapRedcdue的性能有时候并不是很好~    &n ...

(4636)次阅读|(4)个评论

Big Data Coming......MapReduce and Hadoop 2011-06-27

     数据量的增大：     一个数字的时代！     纽约证券交易所每天产生1TB的交易数 ...

(2025)次阅读|(4)个评论

查看更多