机器学习和生物信息学实验室论坛联盟MAchine Learning And Bioinformatics, MALAB
查看: 11555|回复: 11

MapReduce与Hadoop深入

 火 [复制链接]
发表于 2012-2-27 11:09:06 | 显示全部楼层 |阅读模式
本帖最后由 Fth-Hokage 于 2012-2-27 11:11 编辑

近期将要发表一些日志,欢迎有兴趣的同学一起探讨,均为自己的理解,可能有误,欢迎大家提出并指正~
日志更新目录
       MapReduce高级编程系列概论
       MapReduce高级编程之自定义DataType
       MapReduce高级编程之自定义InputFormat
       MapReduce高级编程之本地聚集与Combinner
       MapReduce高级编程之Job链

       Hadoop源码理解系列概论
       Hadoop源码理解之RPC
       Hadoop源码理解之JobTracker
       Hadoop源码理解之TaskTracker
       Hadoop源码理解之直击心脏Shuffle

     Hadoop框架性能调优系列概论
     Hadoop框架性能调优之数据分摊与压缩存储
     Hadoop框架性能调优之破解Shuffle(扩大磁盘溢写比例、破解Shuffle排序、破解Shuffle归并)
     Hadoop框架性能调优之map/reduce task数
     Hadoop框架性能调优之线程数量调优
     Hadoop框架性能调优之合理利用内存,减少磁盘I/O
  
     MapReduce应用之论文推荐

   日志因为需要梳理,故而每2天发表一篇
   欢迎大家一起探讨并指正,以加深对hadoop与MapReduce的理解~
   
回复

使用道具 举报

发表于 2012-2-27 12:04:47 | 显示全部楼层
果断顶起啊!
回复

使用道具 举报

发表于 2012-2-27 16:02:37 | 显示全部楼层
哇,此贴必火,赶紧留名~~
回复

使用道具 举报

 楼主| 发表于 2012-2-27 16:57:36 | 显示全部楼层
zouquan 发表于 2012-2-27 16:02
哇,此贴必火,赶紧留名~~

多谢旭斌和老师的支持,希望咱实验室把这个MapReduce和分布式数据挖掘搞得有声有色~~
回复

使用道具 举报

 楼主| 发表于 2012-2-27 16:59:10 | 显示全部楼层
xmubingo 发表于 2012-2-27 12:04
果断顶起啊!

多谢支持,旭斌后续还有很多技术上的问题要你帮忙呢
回复

使用道具 举报

发表于 2012-2-27 20:03:43 | 显示全部楼层
Fth-Hokage 发表于 2012-2-27 16:57
多谢旭斌和老师的支持,希望咱实验室把这个MapReduce和分布式数据挖掘搞得有声有色~~

振坤把mahout的用法搞定了,今天给我演示了,真是太棒了,我们争取搞一个能出名的平台系统。
回复

使用道具 举报

发表于 2012-2-27 22:08:36 | 显示全部楼层
赶紧跟上师兄的脚步~
回复

使用道具 举报

 楼主| 发表于 2012-2-28 09:15:05 | 显示全部楼层
zouquan 发表于 2012-2-27 20:03
振坤把mahout的用法搞定了,今天给我演示了,真是太棒了,我们争取搞一个能出名的平台系统。

Great, 太棒了, 全力十足把CB-DDM搞好~~
回复

使用道具 举报

发表于 2012-2-28 13:09:07 | 显示全部楼层
强烈支持啊!!
回复

使用道具 举报

 楼主| 发表于 2012-2-28 15:34:21 | 显示全部楼层
大宝 发表于 2012-2-27 22:08
赶紧跟上师兄的脚步~

哈哈 一起狂奔~~
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 注册

本版积分规则

关注公众号
机器学习和生物信息学实验室联盟

相关侵权、举报、投诉及建议等,请发 E-mail:admin@discuz.vip

Powered by Discuz! X5.0 © 2001-2026 Discuz! Team.

在本版发帖
关注公众号
返回顶部