l******n
发帖数: 9344 | |
L****8
发帖数: 3938 | 2 是个啥东西？
【在 l******n 的大作中提到】
: 公司想要最近要买，先找有经验的学习下。
|
C*****5
发帖数: 8812 | 3 nvda的?
【在 l******n 的大作中提到】
: 公司想要最近要买，先找有经验的学习下。
|
L****8
发帖数: 3938 | 4 网站上写已经卖光了
【在 C*****5 的大作中提到】
: nvda的?
|
l******n
发帖数: 9344 | 5 dl太火了
nvda msrp是15k，fb上有人自己装，大概10k就可以装出来
【在 L****8 的大作中提到】
: 网站上写已经卖光了
|
L****8
发帖数: 3938 | 6 10k 不错
【在 l******n 的大作中提到】
: dl太火了
: nvda msrp是15k，fb上有人自己装，大概10k就可以装出来
|
C*****5
发帖数: 8812 | 7 省着点8000也够了
【在 l******n 的大作中提到】
: dl太火了
: nvda msrp是15k，fb上有人自己装，大概10k就可以装出来
|
L****8
发帖数: 3938 | 8 https://www.amazon.com/Lambda-Deep-Learning-DevBox-Black/dp/B06XQ6K47J/ref=
sr_1_2?s=electronics&ie=UTF8&qid=1490054084&sr=1-2&keywords=Lambda+Deep+
Learning+DevBox
【在 l******n 的大作中提到】
: 公司想要最近要买，先找有经验的学习下。
|
w***g
发帖数: 5958 | 9 看了下spec，我去觉得明显的缺陷是没有大量的SSD。
这两天搞比赛，500G的SSD用了好几个了。
不过SSD应该是我picpac的独特用法，如果用
tfrecord可能不需要。
【在 L****8 的大作中提到】
: https://www.amazon.com/Lambda-Deep-Learning-DevBox-Black/dp/B06XQ6K47J/ref=
: sr_1_2?s=electronics&ie=UTF8&qid=1490054084&sr=1-2&keywords=Lambda+Deep+
: Learning+DevBox
|
L****8
发帖数: 3938 | 10 SSD - 1TB
HDD - 3TB
我刚问了卖东西的人
【在 w***g 的大作中提到】
: 看了下spec，我去觉得明显的缺陷是没有大量的SSD。
: 这两天搞比赛，500G的SSD用了好几个了。
: 不过SSD应该是我picpac的独特用法，如果用
: tfrecord可能不需要。
|
|
|
L****8
发帖数: 3938 | 11 对了 你自己攒的电脑 还是用 google cloud 或者 amazon
【在 w***g 的大作中提到】
: 看了下spec，我去觉得明显的缺陷是没有大量的SSD。
: 这两天搞比赛，500G的SSD用了好几个了。
: 不过SSD应该是我picpac的独特用法，如果用
: tfrecord可能不需要。
|
w***g
发帖数: 5958 | 12 我用的自己的电脑，都是2012年左右配的，i7 2600k，只是新加了显卡。
穷人的玩法，先上一块1060。如果嫌不够，再上一块。
1080的8G内存，训练一个嫌多训练两个嫌少，不如两块1060。
【在 L****8 的大作中提到】
: 对了 你自己攒的电脑 还是用 google cloud 或者 amazon
|
L****8
发帖数: 3938 | 13 看了看amazon ec2 真够折腾的
还是买一个好
【在 w***g 的大作中提到】
: 我用的自己的电脑，都是2012年左右配的，i7 2600k，只是新加了显卡。
: 穷人的玩法，先上一块1060。如果嫌不够，再上一块。
: 1080的8G内存，训练一个嫌多训练两个嫌少，不如两块1060。
|
l******n
发帖数: 9344 | 14 lambda那个比nvidia devbox在硬盘上差太多了，nvidia标配加了512GB PCI-E M.2 SSD
+ ssd,这个对performance影响很大
【在 w***g 的大作中提到】
: 我用的自己的电脑，都是2012年左右配的，i7 2600k，只是新加了显卡。
: 穷人的玩法，先上一块1060。如果嫌不够，再上一块。
: 1080的8G内存，训练一个嫌多训练两个嫌少，不如两块1060。
|
L****8
发帖数: 3938 | 15 你们打算从哪里买？ 还是diy？
SSD
【在 l******n 的大作中提到】
: lambda那个比nvidia devbox在硬盘上差太多了，nvidia标配加了512GB PCI-E M.2 SSD
: + ssd,这个对performance影响很大
|
l******n
发帖数: 9344 | 16 diy的问题是系统安装调试，要达到预想的性能可能要花不少时间，人力成本算下来也
不少，而且没有support。本来一咬牙准备下单买原装，结果现在断货。。。
【在 L****8 的大作中提到】
: 你们打算从哪里买？ 还是diy？
:
: SSD
|
l*******m
发帖数: 1096 | 17 据我计算，如果4个1080ti全开训练resnet-50 imagenet ,用tfrecords存jpg, 读硬盘
的速度是60-70MB/s, sata iii 还是能顶住的. 如果训练更大的网络，读硬盘的要求会
更低
SSD
【在 l******n 的大作中提到】
: lambda那个比nvidia devbox在硬盘上差太多了，nvidia标配加了512GB PCI-E M.2 SSD
: + ssd,这个对performance影响很大
|
w***g
发帖数: 5958 | 18 顺序读普通硬盘没问题，raid一下上200mBps怎么也够了。但是各种预处理后期处理有
ssd会好很多。我为了装逼训练是全随机读的，ssd也能扛下。楼上说那个机器我觉得
配置很不均衡。除了显卡多，别的都是业余水准。价钱倒是公道。
【在 l*******m 的大作中提到】
: 据我计算，如果4个1080ti全开训练resnet-50 imagenet ,用tfrecords存jpg, 读硬盘
: 的速度是60-70MB/s, sata iii 还是能顶住的. 如果训练更大的网络，读硬盘的要求会
: 更低
:
: SSD
|
N*****m
发帖数: 42603 | 19 还好吧
【在 L****8 的大作中提到】
: 看了看amazon ec2 真够折腾的
: 还是买一个好
|
l*******m
发帖数: 1096 | 20 其实开一个10—20G的shuffle buffer, 加上truncated 二进制文件，基本和随机读差
不多了
【在 w***g 的大作中提到】
: 顺序读普通硬盘没问题，raid一下上200mBps怎么也够了。但是各种预处理后期处理有
: ssd会好很多。我为了装逼训练是全随机读的，ssd也能扛下。楼上说那个机器我觉得
: 配置很不均衡。除了显卡多，别的都是业余水准。价钱倒是公道。
|
|
|
L****8
发帖数: 3938 | 21 你说应该怎么配？ 我打算diy一个
【在 w***g 的大作中提到】
: 顺序读普通硬盘没问题，raid一下上200mBps怎么也够了。但是各种预处理后期处理有
: ssd会好很多。我为了装逼训练是全随机读的，ssd也能扛下。楼上说那个机器我觉得
: 配置很不均衡。除了显卡多，别的都是业余水准。价钱倒是公道。
|
w***g
发帖数: 5958 | 22 如果我的目标是4块1080 ti, 我会配两台机器， 每台插两块。
每台机器单路core i7 6800k CPU配64GB内存，2x6T HDD配成raid1做备份，
2x1T SSD配成raid0做主力存储。这样差不多一台机器不到$5000能下来。
http://www.xidax.com/desktops/x-8， 我在这里做过配置, $4971。)
和楼上的那个大盒子比，除了GPU以外别的配件能多出来好多。
如果是我自己玩，并且要新配，我会按2x1070配，别的部件都酌减
这样一台机器2500。$5000配台机器也还是太奢侈了。
【在 L****8 的大作中提到】
: 你说应该怎么配？ 我打算diy一个
|
l*******m
发帖数: 1096 | 23 这里有个问题值得研究一下。6800k只有28线pcie, 就是如果两个GPU，一个x16, 另一
个x8. x8会有多少性能下降
【在 w***g 的大作中提到】
: 如果我的目标是4块1080 ti, 我会配两台机器， 每台插两块。
: 每台机器单路core i7 6800k CPU配64GB内存，2x6T HDD配成raid1做备份，
: 2x1T SSD配成raid0做主力存储。这样差不多一台机器不到$5000能下来。
: http://www.xidax.com/desktops/x-8， 我在这里做过配置, $4971。)
: 和楼上的那个大盒子比，除了GPU以外别的配件能多出来好多。
: 如果是我自己玩，并且要新配，我会按2x1070配，别的部件都酌减
: 这样一台机器2500。$5000配台机器也还是太奢侈了。
|
w***g
发帖数: 5958 | 24 这个我不懂，那4路岂不更差？
【在 l*******m 的大作中提到】
: 这里有个问题值得研究一下。6800k只有28线pcie, 就是如果两个GPU，一个x16, 另一
: 个x8. x8会有多少性能下降
|
p***o
发帖数: 1252 | 25 4路用两个E5有80条线?
【在 w***g 的大作中提到】
: 这个我不懂，那4路岂不更差？
|
L****8
发帖数: 3938 | |
l******n
发帖数: 9344 | 27 这个必需的得上x99主板
【在 l*******m 的大作中提到】
: 这里有个问题值得研究一下。6800k只有28线pcie, 就是如果两个GPU，一个x16, 另一
: 个x8. x8会有多少性能下降
|
d******c
发帖数: 2407 | 28 现在配机器应该考虑AMD了，8核，若干年主板架构不变，成本低很多。
AMD的理论上也支持更多的pcie lanes，现在的主板可能还不稳定，但是后面的产品出
来之后应该有比intel好得多的选择。
【在 w***g 的大作中提到】
: 如果我的目标是4块1080 ti, 我会配两台机器， 每台插两块。
: 每台机器单路core i7 6800k CPU配64GB内存，2x6T HDD配成raid1做备份，
: 2x1T SSD配成raid0做主力存储。这样差不多一台机器不到$5000能下来。
: http://www.xidax.com/desktops/x-8， 我在这里做过配置, $4971。)
: 和楼上的那个大盒子比，除了GPU以外别的配件能多出来好多。
: 如果是我自己玩，并且要新配，我会按2x1070配，别的部件都酌减
: 这样一台机器2500。$5000配台机器也还是太奢侈了。
|
l*******m
发帖数: 1096 | 29 一个E5CPU40线，两个80线
【在 p***o 的大作中提到】
: 4路用两个E5有80条线?
|
l*******m
发帖数: 1096 | 30 一般的x99还是40线，nvda box用的那个5/6百的主板有两个pcie switch
【在 l******n 的大作中提到】
: 这个必需的得上x99主板
|
|
|
w***g
发帖数: 5958 | 31 ryzen开卖才没多久，各种软件硬件问题都还没暴露出来呢。
AMD的CPU配女大的卡也不知道怎么样，配两个，配三个配
四个会不会出问题也不知道。网上也找不到一个像样的blas
库的benchmark。为股票计我也希望大家买AMD，不过我自己
的钱肯定会买INTC。目前来说AMD的贡献主要是压INTC的价。
【在 d******c 的大作中提到】
: 现在配机器应该考虑AMD了，8核，若干年主板架构不变，成本低很多。
: AMD的理论上也支持更多的pcie lanes，现在的主板可能还不稳定，但是后面的产品出
: 来之后应该有比intel好得多的选择。
|
l*******m
发帖数: 1096 | 32 1800x only supports 24 PCIe lanes, good for single GPU plus PCIe-based SSDs
【在 d******c 的大作中提到】
: 现在配机器应该考虑AMD了，8核，若干年主板架构不变，成本低很多。
: AMD的理论上也支持更多的pcie lanes，现在的主板可能还不稳定，但是后面的产品出
: 来之后应该有比intel好得多的选择。
|
d******c
发帖数: 2407 | 33 你不是说单GPU的机器么，那Ryzen问题不大。软硬件问题已经暴露一些了，主要是主板
和内存兼容性还不够好，内存上不到高频率。
现在的7系主要是8核，这个能用到的话优势很明显。deep learning box方面可能还用
处不大，其他开发也许能用到。
pcie lane方面我指的是server chip Naples，过两个季度出来
Naples is a two-socket server chip aimed squarely at Intel's Broadwell-EP-
based Xeon E5 V4 range, and the overall theme of AMD's chip is "have more of
everything." Naples has 32 cores, capable of 64 simultaneous threads, eight
memory channels, supporting up to 2TB RAM and 128 PCIe 3.0 lanes.
【在 w***g 的大作中提到】
: ryzen开卖才没多久，各种软件硬件问题都还没暴露出来呢。
: AMD的CPU配女大的卡也不知道怎么样，配两个，配三个配
: 四个会不会出问题也不知道。网上也找不到一个像样的blas
: 库的benchmark。为股票计我也希望大家买AMD，不过我自己
: 的钱肯定会买INTC。目前来说AMD的贡献主要是压INTC的价。
|
w***g
发帖数: 5958 | 34 amd的磁盘io也有问题，纯io load都没有intc快。这些假以时日应该都能解决，但是
现在跳船为时过早。便宜主要还是性能差。一旦性能超过
intc, amd要价一点也不会手软。我还是看好amd的，有一些股票。ps,我被推土机害过。
of
eight
【在 d******c 的大作中提到】
: 你不是说单GPU的机器么，那Ryzen问题不大。软硬件问题已经暴露一些了，主要是主板
: 和内存兼容性还不够好，内存上不到高频率。
: 现在的7系主要是8核，这个能用到的话优势很明显。deep learning box方面可能还用
: 处不大，其他开发也许能用到。
: pcie lane方面我指的是server chip Naples，过两个季度出来
: Naples is a two-socket server chip aimed squarely at Intel's Broadwell-EP-
: based Xeon E5 V4 range, and the overall theme of AMD's chip is "have more of
: everything." Naples has 32 cores, capable of 64 simultaneous threads, eight
: memory channels, supporting up to 2TB RAM and 128 PCIe 3.0 lanes.
|
L****8
发帖数: 3938 | 35 系统和程序装在 ssd 还是 hdd ？
【在 w***g 的大作中提到】
: 如果我的目标是4块1080 ti, 我会配两台机器， 每台插两块。
: 每台机器单路core i7 6800k CPU配64GB内存，2x6T HDD配成raid1做备份，
: 2x1T SSD配成raid0做主力存储。这样差不多一台机器不到$5000能下来。
: http://www.xidax.com/desktops/x-8， 我在这里做过配置, $4971。)
: 和楼上的那个大盒子比，除了GPU以外别的配件能多出来好多。
: 如果是我自己玩，并且要新配，我会按2x1070配，别的部件都酌减
: 这样一台机器2500。$5000配台机器也还是太奢侈了。
|
w***g
发帖数: 5958 | 36 系统装哪儿都行啊。如果是图形界面的话SSD好点。
我都是ssh进去敲程序，hdd感觉也不是很慢。
对了，大SSD存数据可能都不是必须的。
tfrecord和lmdb可能都针对hdd线性读取优化了, SSD不一定有用。
我用我自己的程序随机读图片，所以要SSD。
【在 L****8 的大作中提到】
: 系统和程序装在 ssd 还是 hdd ？
|
