日本电子维修技术 SSDAVAGO MegaRAID SAS 9460-16i挂12块三星850PRO 1T RAID 50测




上次说到上个月买的超微7049GP-TRT到货了,最近又刚刚到了LSI 9460 16i(这货现在的价格真贵,还要1.2w)但因为显卡还没到,就做个简单的磁盘性能测试吧:

在管理界面中做RAID 50:

lsi.jpg (203.88 KB, 下载次数: 1)

2018-1-24 23:25 上传

磁盘RAID 50组合方式:

raid50.jpg (188.88 KB, 下载次数: 0)

2018-1-24 23:48 上传


具体的参数设置:

raidconf1.png (110.69 KB, 下载次数: 0)

2018-1-24 23:08 上传

raidconf2.png (70.07 KB, 下载次数: 0)

2018-1-24 23:08 上传

raidconf3.png (98.7 KB, 下载次数: 0)

2018-1-24 23:08 上传

raidconf4.png (63.42 KB, 下载次数: 0)

2018-1-24 23:08 上传

raidconf5.png (46.73 KB, 下载次数: 0)

2018-1-24 23:08 上传



正在初始化:最后使用
动态磁盘NTFS格式GPT分区为3个。

raidint.png (340.01 KB, 下载次数: 0)

2018-1-24 23:08 上传



ASS测试:(E盘和F盘测了2次)

raid1.jpg (182.12 KB, 下载次数: 1)

2018-1-24 23:25 上传

raid1-test2.jpg (175.84 KB, 下载次数: 0)

2018-1-24 23:25 上传



对比原装的Intel 600P 1T:

intel.jpg (176 KB, 下载次数: 0)

2018-1-24 23:25 上传



HD Tune 5.7测试:

raid2.jpg (252.53 KB, 下载次数: 0)

2018-1-24 23:25 上传



最后看数据感觉性能也一般啊。不是很开心。


@ltycomputer
@黑色会
@li0510





评论
楼主的成绩明显不正常啊

评论


4K单线程

4K64的读取

比单盘还慢N多

楼主是设置出问题了吧

延迟也不正常。。。






评论

RAID 50的锅?这块RAID卡也没有其他高级RAID模式(比如zRaid),RAID 50应该是安全和速度折中的方案了吧。

评论

没有用过RAID 50,不知道。。。

可以的话试试RAID 0测试下性能就知道了

评论

看来是不能实现了...已经开始写入数据了。

评论
你这个性能,看了还以为是10来个机械盘弄的

评论
来喽 来喽

TIM截图20180124161201.png (56.52 KB, 下载次数: 0)

2018-1-25 06:12 上传


你的确实有点问题 就算raid不怎么增加IOPS 但是比单盘还少不太正常吧?


评论

是不是因为某个配置没开?https://www.chiphell.com/thread-1765879-1-1.html

评论
好像也没啥问题
Raid50 Maximizing Performance中也只是提到要控制Spans的数量 但是2组Span不应该有降级的影响

不过我也是新手 我目前只需要raid0 之后再考虑Raid2z

评论

SSD用在ROC上本身就不是很推荐的方案, 要喂饱这么多SATA SSD最好是HBA+ZFS+大容量RDIMM+Optane ZIL & SLOG

评论
也就是说ROC本身的性能带不动这么多ssd 反而还是HBA+CPU走软路线更好?

评论
。。现在都是这么玩了么。。

评论

差不多是这个意思, SSD完全没有必要HW RAID

评论

OK 多谢指教

评论

这个卡能否当HBA卡用呢?

评论

9460我看官网好像没有类似IR刷IT的固件, 暂时应该不能

评论
小声问句各位大佬,9460到底支不支持CacheCade?有没有用LSI00290硬key试过?
在官网手册里没见到9460支持CacheCade,给官网客服发邮件问,回复是9460没有CacheCade,难道从这一代卡开始没有了,那机械盘做阵列岂不是还不如9361了?卡上key插座是给那个啥safestore准备的???

阿里旺旺图片20180413184658.jpg (162.62 KB, 下载次数: 0)

2018-4-13 18:48 上传

00.jpg (213.41 KB, 下载次数: 0)

2018-4-13 18:42 上传



还有软key都是从softwarelicense.lsi.com买吗?这玩意咋注册呢

Snipaste_2018-04-13_18-54-03.jpg (123.06 KB, 下载次数: 0)

2018-4-13 18:54 上传



评论

safestore简单讲就是管理钥匙的软件
注册:
SN码:
购买地址:
设备名称:
购买日期:

评论

输入卡上的贴纸上的SN就提示Please provide only un-assinged LAC. 包括彩盒的,难道都被人注册过?或着说这个号不是卡上的SN码,那么从哪搞到呢

评论
有没有可能是测试软件和对该硬件不能正确识别导致    如果真实效果和测试一致  那ssd组raid也不能解决目前硬盘传输的瓶颈了


评论

问题是这样的

希望楼主能重测下,12盘raid0或者raid5应该iops不低

最近有时间搞了个2G的缓存和BBU给m5210加上,还是之前的两块HUSMM1600 400G做raid0,习惯性direct IO,开启witeback,和readahead!然后跑分,4K写入不论Q16T4,还是Q32T1都非常辣眼睛,只有188MB,比板主4盘HUS1600MM 200G跑出来的207MB还滑稽,还不如单盘JBOD模式下的速度,然后开始找原因。

发现太多太多一样的测试!比如 9460-16i挂12块三星850PRO 1T RAID 50测试,也是一样的悲催。
仔细想了下,可以排除固件限制。问题就在缓存上,google后答案在这里,
http://sqlblog.com/blogs/joe_cha ... s-cough-giggle.aspx

就这么回事,问题出在回写设置,VD设置改成direct IO,write through,no readahead再测试。速度终正常了!

结论是,企业级SSD不管什么接口的,掉电保护都足够强大,很多企业级固件还有raise,xor等类似raid冗余的功能,所以不论什么raid等级都可以直接忽略LSI RAID卡缓存,有的SSD自带的都不止1G 2G,关writeback和readahead,有UPS更好!

家用级,比如850 pro等没有掉电保护或者掉电保护不是很强大的,也是不论什么raid等级先关write back,raid0请慎重!

详见 http://bbs.pceva.com.cn/forum.php?mod=viewthread&tid=140951


评论

感谢LS的详尽分析,不过已经这么改了,但貌似没什么用:


评论

4K 64线程写入注意和之前的对比,disk cache policy那改成 unchanged,direct IO,write through,no readahead不变。这个跑分软件就太娱乐了



评论

disk cache policy和stripe size现在好像都改不了了。
另外我好像在哪里看到RAID 50推荐256来着。

评论
上古SAS2108+机械盘的推荐配置Write Policy: Write-Back,按楼上说看来固态盘可以关了,很多地方也是这么推荐https://knowledgebase.starwindso ... -hdd-and-ssd-disks/。strip size推荐大小除了应用方面的考虑,是不是和卡的型号也有关?SAS3108开始的raid卡默认是256

001.jpg (373.56 KB, 下载次数: 0)

2018-4-25 16:45 上传

Snipaste_2018-04-25_16-40-15.jpg (79.54 KB, 下载次数: 0)

2018-4-25 16:45 上传




评论

除了stripe size 其他都可以改,安心用吧

评论

关于stripe size呢,基本上没多大影响了,机械盘默认256就256吧,大概 512N扇区时代是64KB比较好,512E 4KN扇区时代256KB默认。SSD做阵列建议还是64KB,下面回帖有更新。


评论

绑定学习,好东西。

评论

再更新下 楼主这个SSD阵列为什么这么慢 因为可能成功避开了Fastpath加速,另外就是糟糕的raid5写惩罚(RAID5 6对SSD写放大也不小),12块三星850PRO 1T也一样掉成渣。典型的反面教材。

全SSD阵列的话,Fastpath至关重要92XX,93XX(要加CC key才有) ,94XX 默认带针对SSD阵列的Fastpath加速,STRIPE SIZE 64KB大多数应用场合下最优(联想文档),DELL文档有提到只有IO块大小比STRIPE SIZE小的情况下FastPath加速有效,RAID 50 60没Fastpath加速。联想文档只含糊说所有RAID等级,50 60暂照DELL文档所说没有Fastpath加速。

fastpath.png (74.24 KB, 下载次数: 0)

2018-9-11 12:36 上传



参见
https://lenovopress.com/lp0592-u ... f-megaraid-fastpath

https://www.dell.com/support/man ... 4d7c2e85&lang=en-us

全SSD做阵列设置就是
DIRECT IO
WRITE THROUGH
NO READ AHEAD
DISK CACHE UNCHANGED
STRIPE SIZE 64KB,全SSD阵列256KB的SRIPE SIZE没多大好处,因为SSD盘主控写入单位都很小,具体SSD厂家规格书会提到,另外CacheCade那个VD实际也是SSD阵列,STRIPESIZE也是64KB最佳,默认也是。满足Fastpath加速的设置,必须有下面两个,DIRECT IO,NO READ AHEAD。全SSD用WRITE THROUGH,但是CacheCade加速机械盘或者全机械盘还是得用Writeback,下面有分析。

机械盘阵列现在都默认256KB STRIPE SIZE,全械盘阵列只要满足Fastpath加速设置,即使没有开CacheCade实际也能享受Fastpath的低延迟读取。
NRA&WB&DIO满足Fastpath读取加速设置 读取延迟降低,如果有CacheCade 加速读取延迟还能更低,基本接近SATA SSD。

R-NRA&WB&DIO.PNG (63.14 KB, 下载次数: 0)

2018-9-12 12:31 上传


RA&WB&DIO不满足Fastpath读取加速设置读取延迟和单盘差不多

R-RA&WB&DIO.PNG (67.41 KB, 下载次数: 1)

2018-9-12 12:32 上传


这是万转SAS 2.5的读取延迟6.6 也比Fastpath加速后的慢很多

10K 1.2T LAT.PNG (60.56 KB, 下载次数: 0)

2018-9-12 12:37 上传



CacheCade(SSD阵列后做缓存)加速机机械盘阵列,机械盘VD还是得开Writeback,关Read Ahead。如果开Write Trough读写都会掉成渣。
机械盘RAID6 NRA&WT&DIO

W-NRA&WT&DIO.PNG (65.15 KB, 下载次数: 0)

2018-9-12 12:45 上传



开Writeback后写入顺序是先到卡载RAM缓存L1,有CC的话再到CC L2,最后到机械盘L3。和强悍的企业级SSD比起来,4K写入刚好有是卡载RAM缓存的瓶颈。这样的话CacheCade对4K写的提升该是有限的,基本就是写入卡载RAM缓存的IOPS,主要提升是小文件读取速度和延迟。
这里也有用CacheCade加速机械盘开Write Trough和Writeback的对比,
http://we.poppur.com/thread-1760838-1-1.html


建议玩RAID 10或者9盘11盘raid5加热备。
大致性能可以参考这里https://mp.weixin.qq.com/s/pCQU3_qNwDpD4zqpV9bUSw

有Fastpath加速,SSD RAID0性能的话有几块盘顺序和4K多线程差不多就翻几个倍
三盘RAID5 写惩罚严重

1600MM 6.0 DIF1 3D400GRAID5.PNG (261.29 KB, 下载次数: 0)

2018-9-11 13:27 上传


3盘RAID0

1600MM 6.0 DIF1 3D400GRAID0.PNG (256.64 KB, 下载次数: 0)

2018-9-11 13:28 上传



2盘raid0

1600MM 6.0 DIF1 RAID0.PNG (57.68 KB, 下载次数: 0)

2018-9-11 13:29 上传


没了CC,是不是算退步了 电路 电子 维修 求创维42c08RD电路图 评论 电视的图纸很少见 评论 电视的图纸很少见 评论 创维的图纸你要说 版号,不然无能为力 评论 板号5800-p42ALM-0050 168P-P42CLM-01 电路 电子 维修 我现在把定影部分拆出来了。想换下滚,因为卡纸。但是我发现灯管挡住了。拆不了。不会拆。论坛里的高手拆解过吗? 评论 认真看,认真瞧。果然有收
 ·日本留学生活 求个大阪合租
·日本留学生活 自家房招租求
·日本留学生活 东京地区出9成新lv钱包
·日本育儿教育 孩子从国内过来如何学习日语
·日本育儿教育 明年四月横滨招月嫂
·日本育儿教育 请问咋让娃突破识字关?感谢分享中文共读和学习经验的妈妈
 ·中文新闻 东区明星迈克尔·格列柯,53 岁,将在第一次出生两年后第二次
·中文新闻 《爱情岛》明星卡米拉·瑟洛和杰米·朱维特在透露即将迎来第三

维修经验

CPUcpu-z 1.77版低调发布

日本维修技术更新: New benchmark “submit and compare” feature New clocks dialog reporting all system’s clock speeds in real-time Preliminary support for Intel Kaby Lake AMD Bristol Ridge processors 主要是增加了支持I、A两个新架构的 ...

维修经验

CPU这几天经常开机黑屏,热重启后又正常

日本维修技术这几天经常开机黑屏,热重启后又正常,今天热重启也不管用了。折腾半天总算点亮,显示超频失败,以前出这个画面我是不理它的,直接重启就能正常进系统了,今天不敢托大,因为 ...

维修经验

CPU超频求助!关于华擎H170和6700K

日本维修技术问题见楼主的show贴 https://www.chiphell.com/thread-1634895-1-1.html 这次华擎的H170 Hyper最大的特色应该是自带时钟发生器可以自由超外频 可是楼主好久没有折腾超频了。。。 两图中除了CPU外频 以 ...

维修经验

CPU液态金属会侵蚀cpu核心吗?

日本维修技术前阵子看到有人说,液态金属时间长了会侵蚀cpu铜盖,那么问题来了,这货会不会侵蚀核心呢? 评论 这玩意儿好像只对铝起反应 评论 不是说,cpu的盖子是铜的吗。。。 评论 不会,核 ...

维修经验

CPUm6i究竟支不支持e3 1231v3

日本维修技术官网上看支持列表没写有e3 1231v3,装机帖又有人晒,百度也没个明确答案,那究竟能不能点亮?有在用的chher说一下么 评论 升级最新bios肯定可以支持 评论 我的p67evo官网上也没说支持12 ...

维修经验

CPU华擎 HYPER 妖板 正确玩法

日本维修技术600元的 B150,10相供电,释放洪荒之力 注意必须官网 Beta 区的 BIOS 有 AVX 的 CPU 可能会掉缓存 启动时按 X 键激活 SKY OC,重启后进入 BIOS 160924164727.jpg (95.63 KB, 下载次数: 1) 2016-9-24 17:47 上传 ...

维修经验

CPUE5 2686 V3和i7 6800K如何选择

日本维修技术默认用,不超频,两者功耗是一模一样的 E5 2686 V3:2.0主频,3.5睿频, 18核心36线程 ,45M L3 咸鱼大约2500~3000元 i7 6800K : 3.5主频,3.8睿频 ,6核心12线程 ,盒装3000元 评论 性能应该是26 ...

维修经验

CPUHD530硬解4K能力还是有点弱呀!

日本维修技术播放器用PotPlay 64bit,各种优化后,跑4K @120Hz视频只能到70帧左右的速度,勉强能用! 显示器用的4K的优派VP2780 未标题-1.jpg (211.97 KB, 下载次数: 0) 2016-9-26 21:29 上传 评论 这个估计你没优化 ...

维修经验

CPU6900k 1.25V到4.2体质怎么样

日本维修技术如图,体质怎么样,ring是35,没敢试了,都说ring高了毁硬件 评论 不错的U,但不算雕,上4.4就大雕了,这电压上4.5的目前没见有人发图 评论 谢谢前辈告知 评论 我这个用1.2V超的4.2,R ...

维修经验

CPUI3 6100 华擎B150M pro4超4.5g测试。

日本维修技术看看论坛没多少i3 6100的帖子,就转下自己发的show贴里面的数据,给大家参考下。家里还有当年的神U i3 540 oc 4.5G在给老妈用。 不知道数据上正常吗?有6100的朋友可以告诉下,另外是不有 ...

维修经验

CPU7系u会兼容100系主板吗?

日本维修技术RT,听说要推200系板,100系还能用吗以后。。 评论 兼容的 评论 感谢!以后换u就行了,目前消息200系板会有新的特性吗? 评论 24条PCI-E 3.0通道、支持Intel Optane混合存储技术、十个USB 3 ...

维修经验

CPU有心入5820k了,求教下温度问题

日本维修技术一直徘徊在6700k和5820k之间,6700k现在这德行直接把我推向了5820k啊,从2600k升级上来,三大件都要换,现在唯一疑惑的是IB-E ex这种顶级风冷能不能压住4.5g的5820呢?毕竟刚刚买一个多月。 ...

维修经验

CPU6600&6600K才100的差价

日本维修技术太少了吧。。。 6600.JPG (106.91 KB, 下载次数: 0) 2016-10-1 10:30 上传 评论 毕竟只是i5而已…… 评论 上z170 6600也能超,等于没区别,差价能有100已经不错了 评论 然后又见不超频人士推荐超频 ...