w**a 发帖数: 487 | 1 【 以下文字转载自 Database 讨论区 】
发信人: wawa (life is tough), 信区: Database
标 题: 可以用笔记本来跑hadoop VM么?
发信站: BBS 未名空间站 (Thu Dec 5 20:55:48 2013, 美东)
准备这个寒假自己学学hadoop, 有个朋友有hadoop VM,据说有100G那么大. 我可以在笔
记本上跑hadoop么? 趁thanksgiving, 弄了个i7-4700mq + 1TB HDD的机子, 不知道够
用不够用?
另外, 请大侠们给推荐一些hadoop自学的教材, 视频和软件吧,谢谢了! |
y******u 发帖数: 804 | |
w**a 发帖数: 487 | 3 哦, 不好意思, 俺现在一点门都没入.
那个朋友确实说是100G左右, 不知道包含了什么别的东西. 我到时候问问.
谢谢你!
【在 y******u 的大作中提到】 : 没这么大吧 cloudera vm 在此 : http://www.cloudera.com/content/support/en/downloads/download-c
|
j*******t 发帖数: 223 | 4 如果入门的话还是够了。可以跑local job,不过可以跑通小数据的程序不一定可以跑
通大数据。 |
c**v 发帖数: 9 | 5 内存搞大一点,8G以上,可以跑3个VM Linux+Hadoop 。也算一个Cluster了。。
建议自己搞原生的linux ,hadoop ,,因为Cloudera 那个比较耗费资源。 |
c**v 发帖数: 9 | 6 CDH4.X VM (base CentOS 6.x )也就几个GB,,
不如自己从头配置CentOS+hadoop,还锻炼动手能力
【在 w**a 的大作中提到】 : 哦, 不好意思, 俺现在一点门都没入. : 那个朋友确实说是100G左右, 不知道包含了什么别的东西. 我到时候问问. : 谢谢你!
|
y*******x 发帖数: 40 | 7 应该不用装VM吧?linux装apache官方版本,按apache教程装,可以在本机启3个实例做
伪分布式模式。 如果是win,用cygwin也能装,稍微麻烦点。之前自己在PC上装过2次
,但是同意johnkonet说得,跑得通小数据,不一定跑得通大数据。 |
s******e 发帖数: 146 | 8 单机就不用练大数据了。。。。专门整点大数据跑个几个小时几天的也没有意义啊。。 |
l******n 发帖数: 9344 | 9 关键是明白how,亲手做过菜知道怎么回事
其他的都是次要的
【在 s******e 的大作中提到】 : 单机就不用练大数据了。。。。专门整点大数据跑个几个小时几天的也没有意义啊。。
|
f*****e 发帖数: 2992 | 10 弄熟了,在amazon ec2上跑跑。
【在 l******n 的大作中提到】 : 关键是明白how,亲手做过菜知道怎么回事 : 其他的都是次要的
|
w**a 发帖数: 487 | 11 楼上回复的各位大侠们, 非常感谢你们的信息, 俺等下周考完了,就开工试试,到时再请
教大家.
再次感谢!
【在 f*****e 的大作中提到】 : 弄熟了,在amazon ec2上跑跑。
|