机器学习和生物信息学实验室论坛联盟MAchine Learning And Bioinformatics, MALAB
查看: 4363|回复: 6

在VMWARE10上面配置hadoop2.2.0集群以及spark1.0.1集群

[复制链接]
发表于 2014-7-28 12:40:46 | 显示全部楼层 |阅读模式
  因为准备在Spark上跑SVD分解,所以想着先配置一下,
谁知道...原本装在本机的Ubuntu崩溃了...
索性选择在VMWARE中来配置
花费了一天时间,总算搞定了
因为图文较多,直接放在PDF文档里面了
这里就PO两张截图吧
:

Hadoop

Hadoop

Spark

Spark

在VMVARE10中配置hadoop2.2.0集...pdf

3.64 MB, 下载次数: 13

回复

使用道具 举报

 楼主| 发表于 2014-7-28 12:41:44 | 显示全部楼层
先占个沙发。
回复

使用道具 举报

发表于 2014-7-28 13:01:02 | 显示全部楼层
先MARK,回头研究研究。
回复

使用道具 举报

发表于 2014-7-28 21:03:08 | 显示全部楼层
vmware一直要跑出一个窗口出来,当机器比较多的时候,就不推荐了,可以尝试vmware server,不过以前有个90%的bug。也可以用virtual box的headless模式,可以不用跑出窗口,后台进程运行,同时跑10来个都不用怕多。
回复

使用道具 举报

发表于 2014-7-28 23:48:40 | 显示全部楼层
很好,奖励200元,记账(见实验室工作板块置顶帖子)

另外,306门口的四台机器已搭建好hadoop环境了,404的6台机器也配置好hadoop了,好像spark也有,可以试试看。
回复

使用道具 举报

 楼主| 发表于 2014-7-29 12:18:50 | 显示全部楼层
tangzk 发表于 2014-7-28 21:03
vmware一直要跑出一个窗口出来,当机器比较多的时候,就不推荐了,可以尝试vmware server,不过以前有个90% ...

局限于本机内存所以也不会开太多窗口...估计virtualbox可能会好点
回复

使用道具 举报

 楼主| 发表于 2014-7-29 12:19:36 | 显示全部楼层
zouquan 发表于 2014-7-28 23:48
很好,奖励200元,记账(见实验室工作板块置顶帖子)

另外,306门口的四台机器已搭建好hadoop环境了,40 ...

回头在门口那四台机器上面试试看
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 注册

本版积分规则

关注公众号
机器学习和生物信息学实验室联盟

相关侵权、举报、投诉及建议等,请发 E-mail:admin@discuz.vip

Powered by Discuz! X5.0 © 2001-2026 Discuz! Team.

在本版发帖
关注公众号
返回顶部