日本电子维修技术 显卡实验室要弄一台新的服务器做深度学习,g



预算10w
要求4张显卡(目前想用RTX 2080Ti)
CPU核心数目至少8(目前想LGA2066)
64-128RAM
1-5T disk

比较纠结的事GPU怎么选,2080Ti适合Deep learning么,4张Titan V又超过预算了

评论
如果20系能干专业活还要Quadro干啥?肯定驱动锁死。

评论

主要是预算问题…… Quadro的物理规格还是不如同价位的GTX/RTX

评论
the more you buy the more you save4个titan volta走起

评论
现在好像买不到32G的titan V吧

所以还是quadro走起

评论

Quadro的话…… 4*P5000会比4*2080Ti好么
就目前实验室1080Ti和M4000相比,相同的训练花费时间M4000要用1080Ti的2.5倍,所以感觉略纠结

评论

同样价格的quadro肯定不会比geforce好。。。

但如果要超大显存,只有quadro。。。

评论
买个二手矿机不就行了。。。。

评论
非常适合,但有些问题。现在在外面回去跟你详细讨论。我遇到一样的问题。

评论
才1t的数据要那么大算力?

评论
搬个小板凳坐好,很好奇2080Ti算起这些玩意来是个啥效果

评论
就一句:目前不带nvlink交换机芯片,没法做多卡nvlink互联


我的意见还是RTX专业卡两张。



另外就我对大学实验室一贯尿性的了解,你弄一套特别好的,不如三台一般的,要一起用分布式训练便是。参考:
https://www.tensorflow.org/deploy/distributed

评论

问题是dl很吃内存

评论

性价比肯定 2080ti.   
5张RTX80ti 价钱才刚好凑够一张RTX6000

4张R80ti 显存叠加也够44G,R6000才24G
期待评测对比


评论

赞成,不过10w拿来做两套dl的差不多。

评论
2080ti不是有tensorcore  肯定可以 可以对比一下titan V

评论

每台机器单卡2080ti+9900k+64G内存,三套应该差不多,不过没有外扩显卡的能力了;




RTX5000的话则只能2套

评论

谢谢~框架一般我们也用tensorflow哈哈哈

评论

嗯呐,关键4张卡和2张卡的显存算起来是差不多的……上面预算给的紧就很难受

评论

其实最大好处是,如果你之后还有其他人做,三台电脑,你们不会互相抢

评论
深度学习机器至少要64G内存的,不然随便用用就没了。cpu一般不是瓶颈,我写的程序只用4个核就够了,所有计算都放在显卡上

评论
老板说是什么就是什么了
如果你自己是新手老板,看学校有什么合作伙伴
如果不是学校,看公司的章程,问IT部门

评论
取决于是否需要11GB以上的显存,需要的话只能买Quadro
Titan V支持FP16,如果能用上的话还行,用不上就尴尬了
另外可能还需要双电源,4张卡预留1200W



评论
nv控制消费级的显存大小,是为了有深度学习需求的公款消费者去买专业卡,看看aws上的p2, p3显存多大

评论

1,不推荐买titan v,titan v是用于通用科学计算,而非单一类别的科学计算。特别是深度学习用不上的fp64单元大量占用晶体管。
2,不推荐买不带tensor core的显卡,目前很多框架已经支持无缝tensor core调用了,不需要以前那种繁琐的编程,需要自己算tile展开之类,以后tensor core的利用率会越来越高。
3,不推荐买无法nvlink统一寻址的显卡。这也是拒绝titan v的原因,不支持nvlink统一寻址的话,跨gpu访问将会面对极高的延迟,基本上别用了,亲测。这其实是一种劣等的分布式设计。

所以,根据上面的描述,所有volta架构前的显卡全部否决。然后根据上面的描述,titan v否决,除非你能搞到volta ceo版,他有32GB显存。v100不是预算内能买到的。
那么可选的只有quadro rtx系列和rtx 20系。
不推荐quadro rtx系列的原因当然一个是价格,你的预算只买得起5000,sp性能可能只跟2070差不多(我没具体了解)。第二,如果铁了心花高价买quadro rtx,不如等真正的图灵计算卡(如果有的话)或post图灵计算卡。
rtx 2080ti基本上是唯一的选择,rtx的sp与tensor core性能是非常值得一看的,标称已经接近titan v,而且超频能力据称比titan v强,另外它还有多倍int能力,推理性能强到爆表了(当然实验室未必会用到极限推理能力,刷paper当然需要数据好看,除了专门做模型压缩降维或推理性能优化的)。
当然它有些限制,比如它的nvlink只能连两张卡,所以如果买4张,你需要组两组,这种奇葩的非对称结构可能需要自己调整分布式的代码吧。
最大的担心当然是老黄在软件上封锁rtx 2080ti的深度学习能力,或封锁虽然可怜但很有用的1way nvlink,虽然可能性很低。不过等卡发售了马上就知道了。

评论

Tesla T4的ppt上有一项提到Tensor Core 混合精度,应该是支持FP16了
老黄要砍一刀很可能在这里下手,只限制显存容量似乎太良心了

评论

十分感谢

评论

干货满满,感谢分享~❤

评论

硬件上都是支持的,T4主要还是推理卡。

评论

行家啊!兄弟论坛应该有打赏机制  这个答案是值钱的

评论

才发现这个成年老帖了


评论
多卡得买涡轮散热的吧? 电路 电子 维修 求创维42c08RD电路图 评论 电视的图纸很少见 评论 电视的图纸很少见 评论 创维的图纸你要说 版号,不然无能为力 评论 板号5800-p42ALM-0050 168P-P42CLM-01 电路 电子 维修 我现在把定影部分拆出来了。想换下滚,因为卡纸。但是我发现灯管挡住了。拆不了。不会拆。论坛里的高手拆解过吗? 评论 认真看,认真瞧。果然有收
 ·日本留学生活 求个大阪合租
·日本留学生活 自家房招租求
·日本留学生活 东京地区出9成新lv钱包
·日本育儿教育 孩子从国内过来如何学习日语
·日本育儿教育 明年四月横滨招月嫂
·日本育儿教育 请问咋让娃突破识字关?感谢分享中文共读和学习经验的妈妈
 ·中文新闻 东区明星迈克尔·格列柯,53 岁,将在第一次出生两年后第二次
·中文新闻 《爱情岛》明星卡米拉·瑟洛和杰米·朱维特在透露即将迎来第三

维修经验

CPUcpu-z 1.77版低调发布

日本维修技术更新: New benchmark “submit and compare” feature New clocks dialog reporting all system’s clock speeds in real-time Preliminary support for Intel Kaby Lake AMD Bristol Ridge processors 主要是增加了支持I、A两个新架构的 ...

维修经验

CPU这几天经常开机黑屏,热重启后又正常

日本维修技术这几天经常开机黑屏,热重启后又正常,今天热重启也不管用了。折腾半天总算点亮,显示超频失败,以前出这个画面我是不理它的,直接重启就能正常进系统了,今天不敢托大,因为 ...

维修经验

CPU超频求助!关于华擎H170和6700K

日本维修技术问题见楼主的show贴 https://www.chiphell.com/thread-1634895-1-1.html 这次华擎的H170 Hyper最大的特色应该是自带时钟发生器可以自由超外频 可是楼主好久没有折腾超频了。。。 两图中除了CPU外频 以 ...

维修经验

CPU液态金属会侵蚀cpu核心吗?

日本维修技术前阵子看到有人说,液态金属时间长了会侵蚀cpu铜盖,那么问题来了,这货会不会侵蚀核心呢? 评论 这玩意儿好像只对铝起反应 评论 不是说,cpu的盖子是铜的吗。。。 评论 不会,核 ...

维修经验

CPUm6i究竟支不支持e3 1231v3

日本维修技术官网上看支持列表没写有e3 1231v3,装机帖又有人晒,百度也没个明确答案,那究竟能不能点亮?有在用的chher说一下么 评论 升级最新bios肯定可以支持 评论 我的p67evo官网上也没说支持12 ...

维修经验

CPU华擎 HYPER 妖板 正确玩法

日本维修技术600元的 B150,10相供电,释放洪荒之力 注意必须官网 Beta 区的 BIOS 有 AVX 的 CPU 可能会掉缓存 启动时按 X 键激活 SKY OC,重启后进入 BIOS 160924164727.jpg (95.63 KB, 下载次数: 1) 2016-9-24 17:47 上传 ...

维修经验

CPUE5 2686 V3和i7 6800K如何选择

日本维修技术默认用,不超频,两者功耗是一模一样的 E5 2686 V3:2.0主频,3.5睿频, 18核心36线程 ,45M L3 咸鱼大约2500~3000元 i7 6800K : 3.5主频,3.8睿频 ,6核心12线程 ,盒装3000元 评论 性能应该是26 ...

维修经验

CPUHD530硬解4K能力还是有点弱呀!

日本维修技术播放器用PotPlay 64bit,各种优化后,跑4K @120Hz视频只能到70帧左右的速度,勉强能用! 显示器用的4K的优派VP2780 未标题-1.jpg (211.97 KB, 下载次数: 0) 2016-9-26 21:29 上传 评论 这个估计你没优化 ...

维修经验

CPU6900k 1.25V到4.2体质怎么样

日本维修技术如图,体质怎么样,ring是35,没敢试了,都说ring高了毁硬件 评论 不错的U,但不算雕,上4.4就大雕了,这电压上4.5的目前没见有人发图 评论 谢谢前辈告知 评论 我这个用1.2V超的4.2,R ...

维修经验

CPUI3 6100 华擎B150M pro4超4.5g测试。

日本维修技术看看论坛没多少i3 6100的帖子,就转下自己发的show贴里面的数据,给大家参考下。家里还有当年的神U i3 540 oc 4.5G在给老妈用。 不知道数据上正常吗?有6100的朋友可以告诉下,另外是不有 ...

维修经验

CPU7系u会兼容100系主板吗?

日本维修技术RT,听说要推200系板,100系还能用吗以后。。 评论 兼容的 评论 感谢!以后换u就行了,目前消息200系板会有新的特性吗? 评论 24条PCI-E 3.0通道、支持Intel Optane混合存储技术、十个USB 3 ...

维修经验

CPU有心入5820k了,求教下温度问题

日本维修技术一直徘徊在6700k和5820k之间,6700k现在这德行直接把我推向了5820k啊,从2600k升级上来,三大件都要换,现在唯一疑惑的是IB-E ex这种顶级风冷能不能压住4.5g的5820呢?毕竟刚刚买一个多月。 ...

维修经验

CPU6600&6600K才100的差价

日本维修技术太少了吧。。。 6600.JPG (106.91 KB, 下载次数: 0) 2016-10-1 10:30 上传 评论 毕竟只是i5而已…… 评论 上z170 6600也能超,等于没区别,差价能有100已经不错了 评论 然后又见不超频人士推荐超频 ...