日本电子维修技术 网络求教——关于家庭万兆(10G)网络




最终解决方案:


一、交换机的选择

网件M4300(全万兆,光口电口各一半)。满足:
2. 稳定
3. 性能好(全端口线速转发)
4. 维护方便
Plus:这种交换机的性能绝非普通x86软路由/软交换可比。不要说使用10年前的Intel X520网卡,即使使用刚上市的XILINX ALVEO-U25网卡也未必能战。事实上,现在网卡都在向跳过内核和CPU,直接使用ASIC/FPGA和应用交互的方向发展了。至此,软路由/软交换与硬路由/硬交换性能谁更强的争论可以画上句号了,显然是硬件方案取得了最终胜利

二、网卡的选择

Qlogic FastlinQ 41000 10G/25G CNA。满足:
1. 支持 SR-IOV

三、模块的选择

交换机/网卡的兼容性列表中的型号。SFP+ 10G-LR 1310nm

四、光纤的选择


成品铠装单模双芯跳线LC-LC






前言:

最近 SSD 的价格不错,我就想着组装一台固态存储服务器(全部使用 U.2 硬盘)。但是家里内网还是千兆的,这会严重限制固态存储的能力。因此,我想先升级家庭网络至全万兆光网(不要电口)。我是网络小白,有很多问题不明白,也看不懂文档。我的需求很简单,请各位大神多加指教。万分感谢!



问题:

一、交换机的选择

考虑成本和效果,我决定使用全光网。选定了如下几个型号的交换机:
1. 华为 S6720S-26Q-LI-24S-AC (2*40G, 24*10G)
2. 华为 S1720X-16XWR-E (16*10G)
3. 华为 S6720S-16X-LI-16S-AC (16*10G)
4. 华为 S1720-28GWR-4X-E (不选,因为10G端口太少)

除了 S6720S-26Q-LI-24S-AC 有40G端口外,另外两个都只有 10G 端口。由于我是网络小白,看不懂技术手册。请问论坛大神:这几台交换机哪个更适合呢?需求如下:
1. 噪音小
2. 稳定
3. 性能好(全端口线速转发)
4. 维护方便
5. 功耗低



二、网卡的选择

10G 光口网卡在淘宝上数不胜数,品牌甚众,型号甚众。我选定了下述网卡:

1. Mellanox MCX456A-ECAT (有 100G ,可配上述交换机1)
2. Intel X520-DA2
3. Intel X710-DA2
4. Mellanox ConnectX-3 (不选,因为新系统无驱动)

这些网卡哪个更适合呢?需求如下:

1. 支持 SR-IOV
2. 支持 WOL from S5
3. 支持 SMBus,取代板载网卡实现IPMI(主板是超微X10SRA-F)(Supermicro证实:BMC/IPMI不能使用任何独立网卡)



三、模块的选择


1. 这网卡和交换机挑模块吗?淘宝上的那些兼容模块能用吗?
2. 请推荐几种模块



四、光纤的选择


1. 使用某宝定制LC双芯铠装跳线,避免熔接、冷接。这样可以吗?





评论
全光网络??那你主机 用户终端都要走光口以太网卡了??带 光口的交换机从来不便宜

评论
你还不如在NAS上多装几个光口网卡然后每个机器装一个,拿NAS当交换机用

评论
家里的10G设备能放在一个房间里的,都放在一个房间里。这些设备全部用DAC线和交换机连接。

我有一块山寨Intel X520,效果很好。

家里如果没有专门一个房间放交换机,那交换机噪音是第一考虑,别的什么发热、功耗、性能、价格全部是次要的。四口那个华为的,是静音设计的,很好。


评论

我家每个卧室都有一台电脑,书房有一台工作站,一台Mac,一台服务器。我要把它们都升级为万兆设备,所以S1720-28GWR-4X-E不够用。我打算买来交换机,把风扇换成猫扇,实现静音。

评论
是什么让您认为猫扇静音呢?

评论
只能说土豪

评论

信仰

评论
你弄个软路由吧,还好耍

一块X520也没几个钱,买三块,插上,有俩冗余

评论

对啊,就是准备都走光口。其实价格不算太贵,我上面提到的全光交换机都不超过4K,比qnap的那个还便宜呢。

评论

考虑过,但是有几个问题:
1. 这些网口间没有交换芯片,性能可能不行
2. 不能做端口镜像,缺少交换机的一些基本功能

评论

这一套弄下来总费用不超8K,远远配不上“土豪”二字

评论
不满足千兆通常我都推荐链路聚合,成本低,翻一倍。
已经装好的房子硬上全屋万兆,还是走尾纤吧。问题就是光交换机贵了一点。


信什么猫扇静音什么的倒是没什么毛病,但那是家用机。。。



评论

尾纤的话你要走多长呢?长的尾纤通常都要订货,而且尾纤本身不靠谱,及其 容易搞断报销,

评论

尾纤这不是细一点吗,门框,地脚线都能走,美观点。

20米的就够了吧?这多大房子啊。我看京东上最长50米的也有。再长就得自己熔了,不会就去找施工队。

怕断就用带钢丝的那种,毛坯房走竖井入户的,都是粗活也没见几个有问题。



评论
在用楼主不用的那个S1720-28GWR-4X-E
便宜,静音
自己diy的NAS,跑满万兆没问题

评论

没看过哪个万兆交换机电口的比光口便宜。

评论
cx3咋能没驱动呢,你是啥系统,我cx2 win10都直驱

评论

软路由,插3个X520,一个4口千兆,主板自带俩,1230L V3足够了,全套下来2K有找

交换机性能,芯片?! 需要考虑吗?

评论

尾纤是塑料的,没啥保护一扯就断,至于找人熔纤,那还不如弄几百米光缆围着房子走一圈,反正找人熔光缆也是按照芯数来收费的

评论

说实在话千兆的光口都比千兆的电口快

评论

这是什么谬论。。。

评论
如果只需要8个10g接口的话,买个8口带电口的交换机的话,感觉上七类网线还比较适合家庭点~

评论
一直不太懂万兆网目前的应用场景,你的nas在什么时候需要到万兆速率读写?十台机器同时看4k千兆都能轻松应付了,难不成整天传输几t文件?没有这种需求的话,千兆网体验上区别不大啊。退一万步说,你传个1t文件那十几分钟都不愿意等的吗?很难想象。

评论

当然需要考虑。

多块网卡(以两块单口网卡为例)网口间会话:NIC_1_LAN-网络控制器1-CPU-网络控制器2-NIC_2_LAN,必须过CPU;

交换机网口间会话:LAN1-交换芯片-LAN2。这个要快得多。

这就是路由器(含软路由及硬路由)不能代替交换机的原因。

评论

不会快得多,甚至没有区别,5G的骨干网现在都在往基于X86服务器的NFV上迁移,主要看软件

评论

哦,原来如此。受教了。非常感谢。

评论

http://fast.dpdk.org/doc/perf/

建议你看一下性能报告.

评论
我记得 H3C 有一个 16  光口的 万兆 交换机  比 华为这个 便宜点

评论

时代变了~  就好像当年都说银行系统不能用X86,必须400以上级别一样

现在除了最骨干的,最核心的,主要是安全问题,X86无处不在了
就是掩饰低,响应快

就好像很多人喜欢起步快的车一样,不管极速

评论

谢谢您提供资料,受教了。

从资料上看:

1. 网卡是否能做到线速转发与CPU有很大关系

2. Intel X710-DA4、 XL710-QDA2 64字节包转发率近似60%线速,单核30%+线速

3. Intel 82599ES 64字节包转发率逼近线速,单核80%线速

4. Intel X520-SR2 64字节包转发率逼近线速,单核80%线速

5. Mellanox逼近线速

资料太多,不一一列明。总之Intel网卡不能用作交换机,不仅性能不能达到线速,而且配置非常麻烦(需考虑CPU核心和队列的关系)。还是交换机更好!

评论
我有个CE6851 感觉性能很不错,就是噪音爆表

评论

就在搞DPDK。和交换机的性能比还是差。尤其是需要做7层处理的。要想性能好肯定要软件结合,现在intel就出了款带FPGA的网卡,转发面和控制面分离还是有用的。

评论

延时低肯定是硬件交换。软交换延迟肯定上升。软路由的优势是更丰富的4 7层功能,而不是性能

评论

本来就是,我自己就是搞通信行业的

评论

刚才坛友rehtkcalb分享了性能测试报告,看起来用x86平台+网卡充当交换机还是不行,难以达到线速。性能相比硬交换机差不少(起码Intel是这样的),而且配置上要麻烦太多。

评论
之前也是同样的想法,想用vSwitch挂载4口万兆网卡作为交换机,现在看来以目前的硬件万兆内网软交换实现线速转发还是有性能问题的。

评论

他说千兆网光都比铜缆快(延迟方面),是这样吗?有影响业务应用的差距吗?

评论
推荐电口啊,以后的新的主板什么的肯定会慢慢上电口,既然已经到万兆交换机这一步了,还是推荐上个电口的,不一步到位,慢慢扩展。

评论

对,就是这个意思,延迟不是一个档次。只部你感兴趣可以查点资料来看看,光口和电口走的传输协议是不是一样的,电口的碰撞检测协议效率低

评论

1. 电口就算了。我认为这事得向数据中心看齐。它们如果都用光口,我就用光口;它们如果用电口,我就用电口。我是个网络小白,很多不懂,但是数据中心肯定懂。复制它们应该是最省心的方案。

2. 这次因为要布线,5年内内不打算再改动。考虑到40G+以上都是光口,所以还是用光网。

评论
给一个便宜的方案啊:国产的博通芯片12-16口万兆交换机+DAC线缆或者万兆模块+LC光纤。风扇直接拔掉彻底静音,至于兼容性方面大部分万兆SFP+可以使用,最次强制为万兆模式。LC光纤可以选择好一点的牌子的,整套下来不贵的。万兆的网卡可以选择HP的NC550SFP或者NC552SFP,在ESXI和DSM、WIN10等os中测试都正常。

评论

非常感谢。简直是开启了一片新天地……

评论

电口有便宜的方案吗

评论

没有,RJ45基本都很贵。

评论
我也来说一下,光纤传输确实铜缆好得多,光纤低延时抗干扰能力强,这也是为什么大中型项目对于10G甚至千兆网络采用光纤传输。但是一般家用这个可以忽略,而光纤方案成本更低,所以我建议还是以光为主!

评论
家庭要w兆,只是玩玩吗

评论

是不是无风扇设计呀,真的静音吗?

评论

问题是,他一个家用,用得到那种低延时吗?

如果真的要那种,那你总的出口要不要配个CSCIO的路由啊,最好连送的那个垃圾光猫全换掉

既然是家用,讲究可以的~  功能性,还是指标性,选择一个也就可以了

如果非要把自己的房间打造成电子竞技用的工作室的话,那就别8000了,来着看吧

评论

实际上达不到线速的几个测试都是总转发带宽在40G以上的,你家用有这么高带宽的需求吗?

评论

实际上总带宽不高的话两个口之间线速转发问题不算太大,60%线速的那几个测试都是4个10G口或者两个40G口这种程度的带宽了

评论

终于看到一个懂行的。
猫扇就是吹出来的,我买了一堆都闲置。
特别是现在高风压的需求,猫扇简直垃圾。

评论

就是骗骗韭菜的

评论

我只是罗列两种的优缺点。而且你本意是软路由延迟低,但是软路由的优势是功能丰富啊

评论

没有没有~我的意思是,光卡比电卡延时低,软路由肯定这个方面没硬的响应好

只不过,这份响应,他是否需要

评论
同求静音!静音!静音!万兆交换机........受够了飞机起飞

评论

请教有什么别的选择啊?求推荐

评论
他自己否定的华为 S1720-28GWR-4X-E (不选,因为10G端口太少)其实是最合适他的,无风扇,静音,便宜,带网管。端口少再加一台堆叠。没管理需求上QNAP QSW-804-4C/1208-8C。上软路由万兆省钱也可以,至于说啥跑不满线速的,纯属想多了,两口间万兆妥妥的,家用延迟不配上905P、900P,上ONU跟上根本没意义。

评论

S1720那个、QNAP的,最合适,价格也便宜,一个无风扇,一个声音绝对小。
1. 其实否定掉 华为 S1720-28GWR-4X-E 我也考虑了很多,这真的是一台好交换机,很适合家用,它的定位就是办公室级接入交换机。但是,它毕竟万兆口才有4个,太少了。同时又不支持插卡,没有扩展能力,也不支持通过堆叠扩展万兆口。您说可以堆叠,但我没有看到相关资料。以上是否定它的最主要原因。也许多番评估需求后,最终还是选它。

2. QNAP QSW-804-4C 和 QSW-1208-8C 也不错,但是有两点缺陷:不支持管理;价格太高! QSW-804-4C 与华为 S1720X-16XWR-E (16*10G) 和华为 S6720S-16X-LI-16S-AC (16*10G) 的价格近似,都是3K+,但是端口数量和功能比华为差远了。QSW-1208-8C 报价5K+,比华为 S6720S-26Q-LI-24S-AC (2*40G, 24*10G) 还贵!我不明白它为什么这么贵。

评论

vswitch问题是一个包光转发就得四次中断

评论

数据中心是不会上最快的,还有走线什么的距离大于效率

评论

谢谢,个人偏向HW 毕竟专业大厂

评论

1、前面意思可能没表达清楚,2台交换机直接光口用DAC线连接扩展。
2、QNAP不支持管理可以和支持管理的S1720搭配使用。QNAP为啥贵?你可以实际体验下S6720这些企业交换机惊人的功耗和噪音适不适合家用。QNAP可以做到20db以下,不趴在边上听不到声音。

评论
战略性马克

评论

1. 这样连接是级联,不是堆叠。级联会大大削弱性能,肯定不行。

2. 华为 S6720S-16X-LI-16S-AC (16*10G) 的典型功耗:45.2W
华为 S6720S-26Q-LI-24S-AC (2*40G, 24*10G) 的典型功耗:67.1W
华为 S1720X-16XWR-E (16*10G) 的典型功耗:63.1W
QNAP QSW-804-4C 的功耗(满载):41W
QNAP QSW-1208-8C 的功耗(满载):49W

以上数据来自各品牌官网。华为没有说“典型功耗”是满载功耗还是无连接功耗。假设是满载功耗,那么16光口的华为显然平均每光口功耗比QNAP低。即使看总功耗,华为 S6720S-16X-LI-16S-AC (16*10G) 也比QNAP QSW-1208-8C 低。

噪音我没法评价,因为确实我没用过华为的企业设备。华为 S1720X-16XWR-E (16*10G) 提到了“风扇智能调速”,但是到底转速和噪音是多少,我也不知道……看参数QNAP都是接近19分贝,还是很安静的。

评论

发重了,编辑掉。

评论

我有一个大胆的想法:

把华为交换机了,然后猫扇,实现降噪。(这就是帖子第一页关于猫扇讨论的根源)



评论

讲道理,日后的主板肯定会2.5G电口到5G电口再到类似于Mac mini 2018的10G电口,QNAP的12口交换机是可以有8电+4光、或者12光的的,感觉缺就缺在不可管理上。

评论
又讨论万兆?我刚从里面走出来,又看到这样的帖子了。。。

交换机 我在美亚上找了几款,但是 我的网线分发都是在弱电箱,这样看的话,还得搞个弱电箱的万兆,但市面上的应该都是千兆的(能放进弱电箱的),就这个问题让我从万兆里走出来了。。。。

要么就是 NAS,设备都在一块,但这样又不好看了。。。

纠结来纠结去,其实我只是要个能播放家庭影院的,在家里能有多少文件传来传去去,软路由Aria2解决下载,然后HTPC 映射网络磁盘。。。。这样想,我就够用了。。。。

其实看到万兆我依然心痒痒。。。。。

评论

S1720-28GWR-4X-E这个交换机就很爽啊,我现在就在用,很爽,毕竟0噪音,并且功耗还不到20w,之前还海涛了一个XS712,正在吃灰了

评论

我觉得2.5G/5G这种都是奇葩,肯定不会考虑……似乎网络设备速度的发展路径是直接由1G到10G的,之后才衍生出2.5G/5G这种速度……(依据:参考Intel X520 X540 X550的发展路径,开始只支持1G/10G,后来才支持1G/2.5G/5G/10G)
我家的Mac mini 2018就是10G版本的。本次网络改造,这也是原因之一。


评论

华为10G x 16的都是46分贝的噪音。家用就基本忽视吧。

评论

要是剪个片子,大量素材不可能存本地ssd上。快速的从 nas 吞吐,就会凸显万兆乃至四万兆的好处了。

如果只是看个电影,读个蓝光原盘,千兆足以。

评论

这么大声音!!!那只能拜拜了……

评论

包括我在内,多数用那个4口华为交换机的都不是因为它好或者便宜

唯一原因就是静音啊

评论

对。。。。。qnap为什么贵就在于它多口万兆还足够静音,而且支持N-BASET,可以连接802.11ax的路由器当AP。我现在是qnapqsw-1208-8c和华为S1720级联,这样VLAN和链路聚合也都有了。

评论
要是不太懂,直接本地找个HW的小代理商问下就是了

评论

对了请问下
对CPU 性能有没有要求导致瓶颈。 目前8代 i3 8100T,  奔腾G5400T 这一类民用低端低压U, 带2个   4口千兆 或者 2个双口万兆 级别的网卡。会遇到严重CPU性能瓶颈吗? (如果不会低于硬件设备 80% 性能,我就没当有严重瓶颈。 民用马马虎虎就行,只要差距不太大。)


评论

请先看28楼提供的测速报告。



我是网络小白,发表一点拙见:

1. 如果用作客户端,那应该没问题。

2. 如果用作服务器,做二层/三层转发,且高并发,那肯定不行。报告中连Intel XEON可扩展铂金都不能达到线速……

3. 报告中有一点很值得注意:x86架构软路由/交换的网络性能与转发时CPU用到的线程数有很大关系。因此,在程序设计方面合理设计队列和CPU的配合非常重要。不过这种级别的调优对于非专业人士是不可能的。要省心,还是需要硬路由/交换。

评论

不会,双口间跑到19Gbps线速肯定没问题,你要再上去没测试过。

评论

28楼报告是40G双向线速。。。。。。

评论

编辑掉~~~~ LAG  重复了

评论
要是看的懂我还来问啥啊老铁。

我没有要求达到线速度啊 我只要能接近线速度的80%性能就行啊

评论

手里有个1L 小钢炮 支持PCEI,目前上的4口千兆做软路由,未来考虑万兆的时候换个万兆网卡。

评论

应该没问题

我自己是,

硬件:

i3 8300T,8G内存(DDR4的4G懒得买),自带俩千兆插了个540X,4个千兆

应用:

常年30Mb,上行服务器(反向代理5台),这是不停的哦

动不动迅雷一下,70MB下行(限速了,不然干到95M,联通封我30秒,我们整个楼的交换机才1000M,我吃了小800)干几个4K原盘,看看视频啊

测试过,迅雷限速50M(留点带宽吧),油管8K 60P,加上其他应用,服务器不停

CPU占用率13%

评论

明白了。  我自己是联想的1L小机。  G5400T 4GX2。 目前是PCIE 上350T4 V2 四口千兆。看了这个帖子有考虑。未来可能换成一个双万口PCIE卡。

评论

8G内存,从来就没吃到1G过~ 不管你怎么费劲交换~

我后来想到,除非你是连续多路并发,才有可能吃掉所谓的背板内存

评论
正推倒家里的nas和网络结构 绑定一下
手持1720交换机 准备鱼线光纤走明线
白裙416p作为资料和照片备份完全够了 先不换8盘位
黑裙整到十几块硬盘想走硬raid
因为这台nas唯一的作用就是存电影和音乐文件
还差一台性能nas 做干活用的暂存
zfs不能随便加硬盘有点蛋疼
就服你。。。。


评论

软路由没有交换芯片,所有流量都走CPU转发,性价比很低的

评论

你的性价比的概念是什么?

多少钱以内?!  

评论

举个简单例子:
目前国内外网千兆顶天了
要达成更高速度,需要安装多条宽带做均衡负载
软路由的话,至少需要一个万兆光口+2-4个千兆电口
CPU至少7200U以上
那这里多少钱了?

要是硬路由,1100搞定,10个千兆电口+一个万兆光口

所以软路由基本毫无性价比。

评论

额~~ 给你个图

主板 600.00,CPU E3 1220L V3  13W,  175.00  内存8G,135.00 ,4口千兆 200一块

贵了200多, 性能方面,区别是多少?!  应用上差多少?!


评论

。。。
你的意思是,因为走了CPU,所以要花大钱,所以性价比低?!

那为什么不说,走了CPU,花不了多少钱,性能提升很巨大,性价比很高呢?


评论

给你个场景:
4条宽带,每条宽带40上300下双拨后共8个拨号,路由做均衡负载带宽叠加
你软路由没有交换芯片,这4条wan线路全部要走cpu转发到lan口,这是不是无用的消耗?!
给你几个我的实测数据:
3865U安装ESXi,仅仅运行一个ROS,仅仅能做到150M上行+150M下行,CPU就几乎吃满了,而且有非常严重的丢包。

2500K直装ROS,能做到200M上行+400M下行,此时CPU占用70%+,轻微丢包(超4.5G+2133后性能有一定提升,但丢包依旧存在)


换成700的RB450Gx4,不同于华硕**这些系统,得益于ROS允许在做了多线叠加后开启部分硬件加速功能,能做到200M下行+500M上行,此时CPU占用80%+,无丢包。

再换成1100的RB4011iGS+,能做到300M上行+700M下行,CPU在40%左右。这个数据估计是电信那边瓶颈了,毕竟我家目前7条线路全是从同一个二级分光器出来的。


还有一个问题:上ESXi,PVE会损失性能(即便是网口直通),不上这些的话跟硬路由区别又不大

我用过的软路由有D525,3865U,2500K,甚至是e5-2650v2,最后家里全部换成了硬路由,为啥?我闲钱多买了软路由又出掉换硬路由?

1,丢包,软路由通病,负载一高就丢包,不论是爱快,ros,lede都一个尿性


2,性能跟同价位硬路由没法比

我都没拿全新的跟你二手的比,默认是全新的硬路由vs你二手的软路由

当然我也不否认,单条宽带,就算是1000M,3865U这个级别的软路由或以上问题不会太大,但一旦涉及到多个网口之间数据的转发,那就是另外一回事了。

484383800559733394.jpg (266.42 KB, 下载次数: 0)

2019-6-20 20:07 上传



目前设备:主路由700块的RB450Gx4,跑服务的聚合路由1100块的RB4011iGS+,两个备用路由是300块的RB750Gr3

以此证明我并非键盘党


评论

这个论坛,隔壁论坛都有实测,在仅仅单WAN+单LAN,只有一条NAT,连PPPoE拨号都没有做,而且是软路由直装爱快的情况下(爱快性能还是还是软路由系统里边比较好的),N3160跑1500的大包,只能跑910-940左右,CPU已经去到70-80了

那也就是说,包转发才1.5Mpps

我算你E3-1220L-V3有N3160的3倍,5Mpps如何?

你E3-1220L-V3呢?

单纯跑个转发+NAT才5Mpps,加上策略多少?加上PPPoE拨号多少?还有因为没有交换芯片,所有流量在多线叠加情况下都要*2,也就是性能还要砍半,砍半之后多少?不要忘了软路由连PPPoE拨号这个消耗资源大户也是需要吃CPU的。

然而1100的RB4011开启硬件加速能做到50M,关闭全部硬件加速功能,并加上25条策略之后还有5M,还有因为有交换芯片,有硬件加速,各个网口间互相转发,PPPoE拨号等等均不不消耗资源。而且实际上就算加了策略,也可以部分开启硬件加速功能,所以实际带业务包转发率是要大于5Mpps的。

所以花了不少钱,性能倒退很明显,性价比很低。

评论

多WAN这个地方我没考虑过~

多拨,也不敢

我自己用的I3 8300T,长期上行吃到30M,下行就没谱了,开的300m,经常吃个95MB下载,加上乱七八糟的应用,也不少吧。我自己试过,单拨上行到60Mb,下行,800Mb,这个时候,连AP,无线,视频啊,也没什么,下行小波动,在700~800吧,CPU占用率17%~ 所以我觉得,家用,现阶段看,基本上没有问题

但是,你的这些场景,确认都是家用的!?有几个家庭是4条宽带双拨的?

还有,大量的J1900多拨个3 6个,跑个800M,不管CHH还是隔壁都很多啊

我现在不是说质疑单片不好,主要是,什么适合~

评论

软路由直接外接万兆交换机怎么样呢?

评论

隔壁不是有测试esxi 直通跑满千兆占用只有20%多

51AEF745-9E13-465A-8C4B-6C78945A52AE.png (184.55 KB, 下载次数: 0)

2019-10-31 13:23 上传




评论

基本上每次涉及到软路由,他总会出来说性价比差,然后举例家中的多播环境,pt下载什么的,然后推荐一波mikrotik的硬件设备,并不是说他说的不对,但他家的环境真的没多少人能达到,也许我们只是入门级,他是专业级吧

评论

我并不反对软路由,我是反对无脑上软路由。对于路由+NAS+不可描述来说,至少要预留到千兆宽带+多盘位(至少2个3.5)+2个网口。而这种配置下成品机少有合适的,自己组的话当然也可以。像是HP的Z230 SFF就非常适合(大小适中,盘位多,PCI多,可上标压4代u,预留万兆都可以)。而一般情况下都要配上ap以实现无线设备的接入。
而且就算是这么一套组合,可扩展性也只能说是一般般。
如果是500M宽带不多拨不多线,玩玩虚拟化,不可描述的话,软路由性价比还可以。但既然是上万兆的家庭,考虑到扩展性(折腾性)那对应的软路由就至少是HEDT平台了,这时候性价比在哪里?

评论

他这个并不是实际使用环境
实际使用环境至少打5折
而且前提是全部跑的大包,有小包的话还要再打折

评论

我自己帮朋友配过很多一体机,都是esxi虚拟化路由+NAS+智能家居系统+不可描述服务的形式
直接点就是你要调个网口或者vlan都可能导致家里断网,而且这么做下来其实并没有省很多钱,调试的时候难度却增加不少。
实际上只要是7621以上CPU的硬路由,我宁愿把路由功能放在硬路由上,esxi服务器专门做除了路由外的其他工作包括不可描述,价格差不多的同时整个系统的稳定性,可升级性都会强上一个档次。

评论

讨论已经脱离楼主本来的意愿了,他本身只想实现内网万兆,现在倒好,变成了软路由是否能满足上网需求,被带偏了;有楼推荐使用多张万兆网卡替换掉一台万兆交换机,这或许是一个比较有性价比的方案,基于他自己需要组一台存储服务器情况下,但现在的情况是否还有讨论的必要,他的需求不是软路由,而是内网万兆

评论

楼主,你确定你能把家里的网线都换成光缆,还能找到人给你施工。。。

好像熔接光缆是按每个算钱。
网线起码施工方便,我家里的网线都是我自己做的头和接模块。


评论

十几分钟1T。。你这是真万兆了。。千兆一小时才360G呢。。

评论
很有学习和借鉴的意义,马克一下

评论

https://item.jd.com/100006848994.html 为啥我看京东介绍~光口是上行端口,千兆下行~这个的意思是万兆是wan口么?


评论

nas怎么组的,给来个清单

评论
你这不是有台固态服务器了么?直接做成万兆软路由比较好。

以后sdn是趋势,国内top2的电信设备供应商和supermicro合资搞了家公司,卖的就是sdn x86服务器,以后没有卖光盘设备了。

评论

请问这是什么板子?

评论

P9DMH

但是软路由系统,要查一下,有没有驱动

高通的万兆,容易驱动不起来

评论

单纯转发可以不走CPU,需要硬网卡,支持网卡直接转发的。

评论

没看懂你说的什么因为没有交换芯片,所有流量在多线叠加情况下都要*2。我就说下我的环境吧:
CPU:E3 1231 V3内存:32G 非ECC
网卡: Mellanox ConnectX-4 LX 双口万兆 网卡不直通
系统:Esxi 6.7 一体机,除了运行CHR,还有1个ubuntu 用来下PT,1个ubuntu 跑upnp代理(实现ROS的多线UPNP功能),3个小融X86,1个黑群,1个Win7+1个Win Server 2019作日常用机, 1个Openwrt科学上网
WAN: 移动200M下 30上 2根   每根 15拨 PCC后下行可达1000M,上行400M(ISP 端口限速)
           联通200M下 30上 1根  100M下 20M上 2根  每根4拨  PCC后下行1000M,上行300M(ISP 端口限速)
          这些外网均是先联接到H3C S5130-28S-EI后再通过万兆口联接到ESXI。


CHR分配1G内存,2个CPU, 1个VMXNET3网卡作WAN口, 5个VMXNET3作LAN口(划分了不同的网段)。其中WAN口根据不同的WAN进线分不同的VLAN(共5个VLAN)
策略的话(以下仅统计有效的策略):
mangle: 559条
raw:3条
nat:242条(主要是给小融开的UPNP端口映射,动态调整)
filter:18条

这样运行下来带宽占用大的时候(移动线路主要用来PT,高的时候到300M+的上行,联通用来挂小融,基本上有200M+的上行), CHR中显示CPU占用60%-75%。此时网页打开顺畅,局域网啥的更不用说了,不会出现说有很多vlan而局域网就打不开了。
丢包啥的倒没有特别关注过,ping sina 3分钟,0丢包(联通线路出去)




评论

另外,这是CCR1016的block diagram:


这是RB450G4的:


CCR1016是所有网口直连CPU,RB450G4是通过交换芯片连接CPU,你说的交换芯片是这东西吗?作路由的话,我只知道可以有硬件加速,但能够绕过CPU,只在交换芯片中转发?那CPU怎么参与各种策略?



评论

以下说法为道听途说,没有亲自验证过:

只有不加载策略或仅带有特定策略的包可以直接由此交换芯片转发,这些包不过CPU,不占用CPU资源,速度快。但是,一旦包带有超出范围的策略,就会被交换芯片交给CPU,CPU处理后再交还给交换芯片进行转发。所以,采用这种设计方案的路由器,CPU性能往往比不含交换芯片的方案差。这种路由器在处理大量某种类型(符合交换芯片要求)的包时效率高且CPU占用低;但是,如果包的类型超出了交换芯片要求,那么效率就会有明显下降,使用场景受限。所以,在Mikrotik CCR系列较高端的新型号中,几乎都放弃了CPU+交换芯片的设计方案,转而使用纯CPU方案。


顺便提个醒:本帖讨论的是关于万兆内网的问题,和路由器没有关系。交换机才是讨论重点。家庭网络/小型局域网的核心从来都不是路由器,而是交换机。

评论

完全同意你上述的结论。routeros中对fasttrack和fastpath有严格的要求。很容易就会使fastpath失效。可能这也是一个原因,在高端的CCR中反倒没了交换芯片。

另外提醒的是,本站主要讨论万兆交换机,只是看到上述有在讨论说软路由的事,觉得和我实际的情况有点出入以及一些疑问,所以我说了一下我的实际情况。

说到交换机,我觉得S1720-28GWR-4X或者是H3C S5130-28S-EI(18年底闲鱼1100入手全新,虽然有风扇,但即便在夏天,它也没有启动,很凉爽,以至于我都忘了它有风扇这回事。注意要对所有电口开启down状态接口节能功能及开启EEE功能)我都觉得不错。4口万兆对我来说也够了。不可能家里所有设备都要万兆口。且命令行丰富,想怎么玩怎么玩。弱三层交换机,足够家用玩了。

评论

同样给你参考:
RB4011iGS+ v6.46.1

8条300下40上电信全部直接接路由器电口,每条双拨合计16个拨号
全部PCC,mangle300条不到(主要是有些设备可以走PCC,有些设备需要独立ip),开启部分fasttrack

上行吃满(600M左右)的时候CPU占用大概在15不到(1.4G未超频,实际上这路由器官方支持超频到2.0G,而且我实测稳定)

另一个参考:
2680v2 128G(16*8 1866) i350网卡 esxi6.7u3最新补丁

CHR ROS v6.46.1
分配2C2T 512M 两个vmxnet3网卡一进一出
只带一条下500上50
整个Firewall里边除了一条伪装啥都没有

上50下50的时候ESXi宿主机看CPU占用已经达到1.5G
只带了5个小融(3*N1,一个原版,一个X86)以及两台win7电脑(PC流量可忽略不计)
ROS CHR还算好的,要是爱快,吃得更多

捕获.PNG (77.25 KB, 下载次数: 0)

2019-12-30 02:08 上传



ccr的asic cpu和x86不一样

评论

硬路由比软路由高效,这点我没意见。只是你说的不走交换芯片,流量翻倍,这点不是很明白。还有就是即使有交换芯片,有策略(尤其是复杂策略)的情况下是不可能不走CPU而只走交换芯片的。还有就是有多VLAN的情况下局域网就可能打不开了,这点也和我的实际不同。

你上面的截图,CHR 50上50下的时候,CPU频率到了1.5G能够说明啥呢?你要看占用率啊。

评论

RB4011当时我也想入手的,不过这货被喷的最多的就是交换芯片是螃蟹的,且到CPU只有2.5G。不过如何价格到心理价位,也会收一个。


评论

可能是我没表述清楚
不走交换芯片的情况下,wan to lan负担是要翻倍的

还有就是策略问题,ros的硬件加速是可以单独设置的,就算是PCC,也能享受到硬件加速的福利

我上面的截图也能说明一部分问题啊,2680v2全核3.4,8*3.4=27.2G,那1.5G就等于吃掉我5%的性能了,这还是50上50下的情况下

评论
硬件加速单独设置是指?有没有具体案例?
PCC是否可以享受到硬件加速,这个倒没研究过。不过总的来说硬路由的最大优势也就是硬件加速了。

评论

就手问一下

你在多拨方面,看来吃很透啊

我现在马上两条千兆入户了,都是联通,每条1000

当年装修留下的祸根,还好,一条光纤,分光后,各衰25,将将够联通光猫的标准,同时单猫测任意一条分光,都没问题,千兆都有

双猫拉进来,然后出两个千兆,这个时候,怎么来进行双线单拨的叠加啊

本地联通,多拨不可能了,只希望单播两条叠加能舒服

这个功能,是只有ROS吗?或者是说,只有硬的ROS路由有?

然后就是,软路由万兆光卡,PC 和NAS做交换,最高就800多M,难受死了,可能是卡和系统吧,两个直连能吃满,所以,我还是要老老实实加交换机了估计

评论

羡慕啊。千兆,还2条。
叠加的话,很多都支持,比如openwrt, 爱快,高恪。不分硬的软的。

PC和NAS作交换,你是指通过软路由中转?这个想跑满万兆难度比较大了。可以先试试桥接。我在CHR上试过,只能到4G多,就上不去了。

话说回来,这种纯交换的,还是挂个交换机吧。

评论

这个,三层转发不管是不是交换芯片都要过CPU的呀,除非三层交换机,但是你的这个又不是三层交换机,而且我也不认为三层交换机能实现PPPoE拨号
虽然或许你的专用路由器的确性能表现比软路由要好,但是这并不是因为交换芯片带来的优势
然后LZ需要的是一个二层设备,你拿三层的性能表现来决定二层设备的选择,恐怕并不是很靠谱呢


评论

我也是觉得这个比较奇怪。3层转发是不大可能不过CPU的。当然这其中可能硬路由会有一些硬件加速。

评论

明白了

OP,是可以直接支持,对吧

如果软的可以解决,我就不买硬的了,或者虚拟一个ros了,这个太难玩了,当然,这个效率很好

评论

支持的。用mwan3

评论

好~~

感谢,感谢,到时候,搞~

只要是一个运营商,就可以叠加吧

评论

策略好,再加上应用支持的话(应用支持的话会很高效,不支持的话效果会差一些),不管是不是同一运营商,都可以的。

评论

好的~~

两条不叠加,就太亏了

评论

嗯,可能有PPPoE卸载或者NAT卸载,但是那应该是在CPU的以太网控制器上,也不是在交换芯片上。交换芯片可能顶多能配几条策略路由,但是有PPPoE的话应该没啥卵用

评论

在mangle里边单独添加即可
以RB4011iGS+为例,8*2条300/40宽带PCC
不添加fasttrack CPU要吃到50+,四个核心中的一个几乎吃满
添加的话同样负载15不到

评论

叠加这功能不止ROS有
但两条千兆的话,建议至少2C4T的i3起步,这是在不虚拟化的情况下
虚拟化的话,CPU还要再往上
所以这时候给我选择的话,我不会选择软路由,而是购买一个硬路由作为宽带接入,NAS可以专机专用(NAS和科学上网是一台单独的X86机器,因为专机专用一个可以购买低功耗的X86设备,价格和功耗都比较合适)
X86设备去兼职路由器的话妥协非常大,而且虚拟化host有点啥问题或者打个补丁什么的全家都要断网,非常难受

评论

第一有PPPoE卸载是肯定的
其次你N条(N大于1)宽带(N个wan)转发到lan这一步硬路由是可以加速的,就算做了PCC负载均衡,也没有影响
这些步骤X86都要通过CPU去执行,算力根本就是白白浪费

评论

实测ros和op比爱快高格要强点(CPU占用,延迟,丢包等)
但ros难上手(但一旦上手了它就是效率最高最稳定的)
op的话,不推荐用隔壁论坛那个,可以考虑lean的那个

评论

都这里一起回复了吧

OP的叠加实际上就可以了吧,就不必再上个ROS虚拟了,那个上手确实难受

然后就是,我现在是8300T,如果两千兆进来,主板是H370 ITX,自带俩 千兆,一块4口千兆,X16插了一个双口万兆光~ (X4的4口千兆我用M2转出来的,还算稳定)

就算我不虚拟ROS,我PC 跟NAS万兆交换不厉害,这颗4C4T也差不多吃满了吧

那我选择一个硬的MikroTik,在前面就可以了吧,哪个型号可以。。。  尽量便宜点,双千进,有万出,后面是接个万兆交换我还在想

如果不接万兆交换,我现有的怎么样好。 我现在是软路由  PC  NAS,都完全独立,我一直在想,要不要搞万兆交换机

评论
自顶,让感兴趣的朋友能够看到最终解决方案

评论
大佬,能不能pm下,最终方案你的硬件购买地址,哈哈我就直接抄作业了。谢谢分享。

评论
我的方案是 搞了一台6个万兆网口的超微主板,esxi下 软路由  黑群晖  win   all in one 方案   1150针cpu选择的是志强1265lv3 45w低功耗

评论
家里最近要装修,搜索到这个帖子,留个脚印,有什么不懂得再来请教各位大神!

评论
[email protected]��他领先这里大部分人十年以上。

评论

不要听他瞎忽悠,骨干网哪里用X86了,骨干全是Cisco。另外你说的是有道理的,除了用DPDK以外,X86的软路由做交换机毫无优势,然而支持DPDK的软路由系统例如6wind,根本买不起 ~ 全是运营商定制的。

评论
眼睛看花了,脑壳看大了

评论

来来来,让你体验一下,我家里的多线路接入。

https://koolshare.cn/thread-192806-1-1.html

眼下正在找适合的解决方案。暂时是用软路由先用着的,就是发现它掉包、延时相当严重,还在到处爬文找替换方案的。

三根移动500M,实测可以达到下行620M,上行120M,一根电信200M,可以稳定四拨。
所有线路叠加下去,测速可以达到1.8Gbps下行,上行350M+ 电路 电子 维修 我现在把定影部分拆出来了。想换下滚,因为卡纸。但是我发现灯管挡住了。拆不了。不会拆。论坛里的高手拆解过吗? 评论 认真看,认真瞧。果然有收 电路 电子 维修 求创维42c08RD电路图 评论 电视的图纸很少见 评论 电视的图纸很少见 评论 创维的图纸你要说 版号,不然无能为力 评论 板号5800-p42ALM-0050 168P-P42CLM-01
 ·日本留学生活 求个大阪合租
·日本留学生活 自家房招租求
·日本留学生活 东京地区出9成新lv钱包
·日本育儿教育 孩子从国内过来如何学习日语
·日本育儿教育 明年四月横滨招月嫂
·日本育儿教育 请问咋让娃突破识字关?感谢分享中文共读和学习经验的妈妈
 ·中文新闻 东区明星迈克尔·格列柯,53 岁,将在第一次出生两年后第二次
·中文新闻 《爱情岛》明星卡米拉·瑟洛和杰米·朱维特在透露即将迎来第三

维修经验

CPUcpu-z 1.77版低调发布

日本维修技术更新: New benchmark “submit and compare” feature New clocks dialog reporting all system’s clock speeds in real-time Preliminary support for Intel Kaby Lake AMD Bristol Ridge processors 主要是增加了支持I、A两个新架构的 ...

维修经验

CPU这几天经常开机黑屏,热重启后又正常

日本维修技术这几天经常开机黑屏,热重启后又正常,今天热重启也不管用了。折腾半天总算点亮,显示超频失败,以前出这个画面我是不理它的,直接重启就能正常进系统了,今天不敢托大,因为 ...

维修经验

CPU超频求助!关于华擎H170和6700K

日本维修技术问题见楼主的show贴 https://www.chiphell.com/thread-1634895-1-1.html 这次华擎的H170 Hyper最大的特色应该是自带时钟发生器可以自由超外频 可是楼主好久没有折腾超频了。。。 两图中除了CPU外频 以 ...

维修经验

CPU液态金属会侵蚀cpu核心吗?

日本维修技术前阵子看到有人说,液态金属时间长了会侵蚀cpu铜盖,那么问题来了,这货会不会侵蚀核心呢? 评论 这玩意儿好像只对铝起反应 评论 不是说,cpu的盖子是铜的吗。。。 评论 不会,核 ...

维修经验

CPUm6i究竟支不支持e3 1231v3

日本维修技术官网上看支持列表没写有e3 1231v3,装机帖又有人晒,百度也没个明确答案,那究竟能不能点亮?有在用的chher说一下么 评论 升级最新bios肯定可以支持 评论 我的p67evo官网上也没说支持12 ...

维修经验

CPU华擎 HYPER 妖板 正确玩法

日本维修技术600元的 B150,10相供电,释放洪荒之力 注意必须官网 Beta 区的 BIOS 有 AVX 的 CPU 可能会掉缓存 启动时按 X 键激活 SKY OC,重启后进入 BIOS 160924164727.jpg (95.63 KB, 下载次数: 1) 2016-9-24 17:47 上传 ...

维修经验

CPUE5 2686 V3和i7 6800K如何选择

日本维修技术默认用,不超频,两者功耗是一模一样的 E5 2686 V3:2.0主频,3.5睿频, 18核心36线程 ,45M L3 咸鱼大约2500~3000元 i7 6800K : 3.5主频,3.8睿频 ,6核心12线程 ,盒装3000元 评论 性能应该是26 ...

维修经验

CPUHD530硬解4K能力还是有点弱呀!

日本维修技术播放器用PotPlay 64bit,各种优化后,跑4K @120Hz视频只能到70帧左右的速度,勉强能用! 显示器用的4K的优派VP2780 未标题-1.jpg (211.97 KB, 下载次数: 0) 2016-9-26 21:29 上传 评论 这个估计你没优化 ...

维修经验

CPU6900k 1.25V到4.2体质怎么样

日本维修技术如图,体质怎么样,ring是35,没敢试了,都说ring高了毁硬件 评论 不错的U,但不算雕,上4.4就大雕了,这电压上4.5的目前没见有人发图 评论 谢谢前辈告知 评论 我这个用1.2V超的4.2,R ...

维修经验

CPUI3 6100 华擎B150M pro4超4.5g测试。

日本维修技术看看论坛没多少i3 6100的帖子,就转下自己发的show贴里面的数据,给大家参考下。家里还有当年的神U i3 540 oc 4.5G在给老妈用。 不知道数据上正常吗?有6100的朋友可以告诉下,另外是不有 ...

维修经验

CPU7系u会兼容100系主板吗?

日本维修技术RT,听说要推200系板,100系还能用吗以后。。 评论 兼容的 评论 感谢!以后换u就行了,目前消息200系板会有新的特性吗? 评论 24条PCI-E 3.0通道、支持Intel Optane混合存储技术、十个USB 3 ...

维修经验

CPU有心入5820k了,求教下温度问题

日本维修技术一直徘徊在6700k和5820k之间,6700k现在这德行直接把我推向了5820k啊,从2600k升级上来,三大件都要换,现在唯一疑惑的是IB-E ex这种顶级风冷能不能压住4.5g的5820呢?毕竟刚刚买一个多月。 ...

维修经验

CPU6600&6600K才100的差价

日本维修技术太少了吧。。。 6600.JPG (106.91 KB, 下载次数: 0) 2016-10-1 10:30 上传 评论 毕竟只是i5而已…… 评论 上z170 6600也能超,等于没区别,差价能有100已经不错了 评论 然后又见不超频人士推荐超频 ...