t***m
发帖数: 103 | 1 想自学big data和分布式的一些东西，比如hadoop, zookeeper, etc，但是只有
windows笔记本，装了个linux的VM，装hadoop也是单机伪分布的。。。请问去哪里搞那
么多node啊？
而且想学一下基于openstack/cloudstack的开发，比如call cloud api进行操作，这个
是不是也得需要多个node啊？至少需要多个VM吧？这个怎么搞？ |
c******f
发帖数: 243 | 2 操作上,2个nodes跟1000个nodes区别不大 |
r*g
发帖数: 186 | 3 ebay上一个二手机50块钱
还有那种小盒子更便宜你去买啊
【在 t***m 的大作中提到】
: 想自学big data和分布式的一些东西，比如hadoop, zookeeper, etc，但是只有
: windows笔记本，装了个linux的VM，装hadoop也是单机伪分布的。。。请问去哪里搞那
: 么多node啊？
: 而且想学一下基于openstack/cloudstack的开发，比如call cloud api进行操作，这个
: 是不是也得需要多个node啊？至少需要多个VM吧？这个怎么搞？
|
t***m
发帖数: 103 | 4 即使两三个node怎么搞？
有那种能租的服务吗? EC2？
【在 c******f 的大作中提到】
: 操作上,2个nodes跟1000个nodes区别不大
|
t***m
发帖数: 103 | 5
【在 r*g 的大作中提到】
: ebay上一个二手机50块钱
: 还有那种小盒子更便宜你去买啊
|
e*******o
发帖数: 4654 | 6 说明你不需要学
【在 t***m 的大作中提到】
: 想自学big data和分布式的一些东西，比如hadoop, zookeeper, etc，但是只有
: windows笔记本，装了个linux的VM，装hadoop也是单机伪分布的。。。请问去哪里搞那
: 么多node啊？
: 而且想学一下基于openstack/cloudstack的开发，比如call cloud api进行操作，这个
: 是不是也得需要多个node啊？至少需要多个VM吧？这个怎么搞？
|
e*******o
发帖数: 4654 | 7 virtualbox 可以装多个vm
不过你的机器配置要跟得上
docker 应该也行 不过又是一番折腾
【在 t***m 的大作中提到】
: 即使两三个node怎么搞？
: 有那种能租的服务吗? EC2？
|
g*****g
发帖数: 34805 | |
d********u
发帖数: 5383 | 9 买个台式机，至少能上32G RAM，上SSD，开VM
3个node没什么问题。其实如果你只是学学，一个node也一样。
笔记本就算了。
【在 t***m 的大作中提到】
: 想自学big data和分布式的一些东西，比如hadoop, zookeeper, etc，但是只有
: windows笔记本，装了个linux的VM，装hadoop也是单机伪分布的。。。请问去哪里搞那
: 么多node啊？
: 而且想学一下基于openstack/cloudstack的开发，比如call cloud api进行操作，这个
: 是不是也得需要多个node啊？至少需要多个VM吧？这个怎么搞？
|
e***i
发帖数: 231 | 10 主机够强的话上Virtualbox，三四个Linux server version的裸机应该没问题。
【在 t***m 的大作中提到】
: 想自学big data和分布式的一些东西，比如hadoop, zookeeper, etc，但是只有
: windows笔记本，装了个linux的VM，装hadoop也是单机伪分布的。。。请问去哪里搞那
: 么多node啊？
: 而且想学一下基于openstack/cloudstack的开发，比如call cloud api进行操作，这个
: 是不是也得需要多个node啊？至少需要多个VM吧？这个怎么搞？
|
|
|
t***m
发帖数: 103 | 11 担心带不动啊
【在 e*******o 的大作中提到】
: virtualbox 可以装多个vm
: 不过你的机器配置要跟得上
: docker 应该也行 不过又是一番折腾
|
t***m
发帖数: 103 | 12 看来得去搞个强力主机去了
【在 e***i 的大作中提到】
: 主机够强的话上Virtualbox，三四个Linux server version的裸机应该没问题。
|
m******t
发帖数: 635 | 13 光编程开发的话，不需要自己折腾这些硬件啊什么的
直接在digitalocean搞2到3个VPS就行了
【在 t***m 的大作中提到】
: 想自学big data和分布式的一些东西，比如hadoop, zookeeper, etc，但是只有
: windows笔记本，装了个linux的VM，装hadoop也是单机伪分布的。。。请问去哪里搞那
: 么多node啊？
: 而且想学一下基于openstack/cloudstack的开发，比如call cloud api进行操作，这个
: 是不是也得需要多个node啊？至少需要多个VM吧？这个怎么搞？
|
a***n
发帖数: 538 | 14 测试可以用vagrant吧，其实zookeeper单机就好了。hadoop好像已经不流行了，还是学
kafka,spark,cassandra, presto吧。 |
d*******r
发帖数: 3299 | 15 对, 直接上 DigitalOcean, Linode 这种才是正解
【在 m******t 的大作中提到】
: 光编程开发的话，不需要自己折腾这些硬件啊什么的
: 直接在digitalocean搞2到3个VPS就行了
|
t***m
发帖数: 103 | 16 然后2,3个VPS弄在一个LAN内？ 还是无所谓？
【在 m******t 的大作中提到】
: 光编程开发的话，不需要自己折腾这些硬件啊什么的
: 直接在digitalocean搞2到3个VPS就行了
|
t***m
发帖数: 103 | 17 hadoop已经不流行了吗？ 发展太快了吧，根本不能这么跟潮流啊，这么发展下去spark
, storm也流行不了多久
【在 a***n 的大作中提到】
: 测试可以用vagrant吧，其实zookeeper单机就好了。hadoop好像已经不流行了，还是学
: kafka,spark,cassandra, presto吧。
|
d****i
发帖数: 4809 | 18 别学什么spark，storm了，都是忽悠骗人的，都是离线计算，用传统ETL工具就可以了
，没必要故意搞复杂被学院派的人为了发财成名给骗了。
spark
【在 t***m 的大作中提到】
: hadoop已经不流行了吗？ 发展太快了吧，根本不能这么跟潮流啊，这么发展下去spark
: , storm也流行不了多久
|
S*******e
发帖数: 525 | 19 是，也不是。 最近几个月完成了一个Spark项目， 传统的方法（Oracle)无法做到。
这个项目是我们公司（telcom 巨头之一） 的第一个用Spark的项目。 Director（地道
的洋人） 在VP前眉飞色舞。别的组要来取经，那Director和别人打马虎眼。
【在 d****i 的大作中提到】
: 别学什么spark，storm了，都是忽悠骗人的，都是离线计算，用传统ETL工具就可以了
: ，没必要故意搞复杂被学院派的人为了发财成名给骗了。
:
: spark
|
N*****m
发帖数: 42603 | 20 跟director要funding到aws开个账号，用emr跑
分分钟的事
【在 S*******e 的大作中提到】
: 是，也不是。 最近几个月完成了一个Spark项目， 传统的方法（Oracle)无法做到。
: 这个项目是我们公司（telcom 巨头之一） 的第一个用Spark的项目。 Director（地道
: 的洋人） 在VP前眉飞色舞。别的组要来取经，那Director和别人打马虎眼。
|
|
|
S*******e
发帖数: 525 | 21 这，连我们自己公司的Cloud现在都不可以用（安全和其它问题）。你是说自己做练习？
【在 N*****m 的大作中提到】
: 跟director要funding到aws开个账号，用emr跑
: 分分钟的事
|
N*****m
发帖数: 42603 | 22 对啊，你们这不是做demo么
习？
【在 S*******e 的大作中提到】
: 这，连我们自己公司的Cloud现在都不可以用（安全和其它问题）。你是说自己做练习？
|
c*******9
发帖数: 9032 | 23 这些是否忽悠人暂不讨论。你把什么都当学院派的有些搞笑。这些东西面向的领域就大
多比较领域就是这个复杂度，
不是谁故意搞复杂。
真正学院派这些都不屑搞。
【在 d****i 的大作中提到】
: 别学什么spark，storm了，都是忽悠骗人的，都是离线计算，用传统ETL工具就可以了
: ，没必要故意搞复杂被学院派的人为了发财成名给骗了。
:
: spark
|
d****i
发帖数: 4809 | 24 spark不就是伯克利的一帮叫兽带着学生搞出来骗钱的吗？这种东西工业界早就有了，
只不过换了一下包装然后弄个公司傍上风投忽悠而已。所谓的什么那些ml算法也都是非
常成熟已久的算法，工业界几十年来早就有无数种工具可以做了。
【在 c*******9 的大作中提到】
: 这些是否忽悠人暂不讨论。你把什么都当学院派的有些搞笑。这些东西面向的领域就大
: 多比较领域就是这个复杂度，
: 不是谁故意搞复杂。
: 真正学院派这些都不屑搞。
|
h*****2
发帖数: 2070 | 25 i second this
【在 d****i 的大作中提到】
: spark不就是伯克利的一帮叫兽带着学生搞出来骗钱的吗？这种东西工业界早就有了，
: 只不过换了一下包装然后弄个公司傍上风投忽悠而已。所谓的什么那些ml算法也都是非
: 常成熟已久的算法，工业界几十年来早就有无数种工具可以做了。
|
c*******9
发帖数: 9032 | 26 搞工业界早就有了的还叫学院派？有几样东西做出来不是为乐“骗钱的”，微软可以骗
，凭什么叫兽不能骗。
工业界的ml算法再多，还不是源于学院派。
【在 d****i 的大作中提到】
: spark不就是伯克利的一帮叫兽带着学生搞出来骗钱的吗？这种东西工业界早就有了，
: 只不过换了一下包装然后弄个公司傍上风投忽悠而已。所谓的什么那些ml算法也都是非
: 常成熟已久的算法，工业界几十年来早就有无数种工具可以做了。
|
