10万兆升级相关---拿到卡了，上机测试中

高卢鸡

blackeyed 发表于 2021-3-5 14:04
一万兆=10000mbps=1250MB/s
不用raid0, 就现在随便一块nvme盘的上限速度都超过了啊
而且我前面说了, 万兆 ...

卡没啥区别，但是交换还是有点区别的。
直插我试过，10g测速5线程7.xGb，如果接交换机，3线程就能到9.xGb。
散热也是要考虑的，除非单独有房间放交换和存储服务器。

高卢鸡

无字仓颉 发表于 2021-3-4 21:18
不知道，不怎么看知乎，不用qq

建议去找找，比自己上网搜资料快些，群里也有很多人玩，知道哪里是坑

llions

我这看40G模块就只有QSFP和CFP可选，家用有必要玩这个吗

----发送自 samsung SM-N9600,Android 10

高卢鸡

blackeyed 发表于 2021-3-5 14:04
一万兆=10000mbps=1250MB/s
不用raid0, 就现在随便一块nvme盘的上限速度都超过了啊
而且我前面说了, 万兆 ...

大佬是直接上了一个大的nvme固态做软件和游戏的存储，然后视频之类的走阵列卡通道么？

blackeyed

高卢鸡 发表于 2021-3-8 23:53
大佬是直接上了一个大的nvme固态做软件和游戏的存储，然后视频之类的走阵列卡通道么？ ...

你正在处理的所有东西都放nvme固态, HDD阵列同步从nvme固态里备份

这样还有个额外好处, 就是可以有版本控制, 比如你想让你的nvme盘恢复成昨天的内容, 就可以做到了……

lwa190212

blackeyed 发表于 2021-3-5 14:52
我不知道你说的万兆软路由是只当路由, 还是要同时当交换机
如果你要当交换机的话, 劝你放弃, 这完全就是我 ...

听说ovs+dpdk搞万兆软交换性能没问题

不过因为绑定的cpu核心就轮询干转发的事，100%占用，感觉你之后转用epyc这种核很多+单核功率不会很高的话还是可以绑定两个核心试一试的

高卢鸡

blackeyed 发表于 2021-3-9 00:01
你正在处理的所有东西都放nvme固态, HDD阵列同步从nvme固态里备份

这样还有个额外好处, 就是可以有版本 ...

但是nvme的容量就要比较大了。
我主要是用来存视频。
我先现在是使用snapraid，但是这样的问题就是容量可以算是减半，但是备份的文件没法用来提升硬盘系统的速度，所以我打算改成raid10了。

oskneo

blackeyed 发表于 2021-3-9 00:01
你正在处理的所有东西都放nvme固态, HDD阵列同步从nvme固态里备份

这样还有个额外好处, 就是可以有版本 ...

现在可以开始布置网络了，求布置10g或40g攻略啊。
现在搜了一下，网卡是最简单了。
交换机看着根本没家用的型号，体积都死大，求推荐型号。
网线也是头疼，要8类线吗。
看着像要自己买钳来装，毕竟太少家用这个

—— 来自 HUAWEI VOG-AL10, Android 10上的 S1Next-鹅版 v2.4.4.1

blackeyed

oskneo 发表于 2021-8-18 22:05
现在可以开始布置网络了，求布置10g或40g攻略啊。
现在搜了一下，网卡是最简单了。
交换机看着根本没家用 ...

10G现在很便宜了, 选择也很多, tplink交换机挺小挺便宜的
网线的话CAT6就可以了, 讲究一点就CAT6A
但我建议不管是啥网线, 每个管子都走两根……因为网线八根心, 断其中一根, 你就不是没有万兆用的问题了, 而是只有百兆可用了
如果要考虑的更长远的话……其实建议光纤一次走

40G交换机洋垃圾就三千块, 主要是吵……非常吵, 没有单间放交换机的话就算了

oskneo

blackeyed 发表于 2021-3-4 23:23
我组的40G, 但是我不用unraid, 而是直接windows server

你要rdma的话, 你需要确定unraid是否支持rdma(我估 ...

现在才看到这个，现在正是面对这问题。
网卡是cx342a，现在才发现是最坑爹的xcgn，
不是pro的roce v2，不是v1，而是roe，不懂这是啥。现在偶客户端放虚拟机里，必须较新的server和sriov。
而这卡在调了固件，驱动和驱动设置后，iovsupportedreason还是空，hyperv还是出不了virtual function。event那里写是无法分配虚拟功能vf。不知道有没救，没的话求推网卡。

详情看这里
https://bbs.saraba1st.com/2b/thread-2058912-0-1.html

—— 来自 HUAWEI LYA-AL00, Android 10上的 S1Next-鹅版 v2.5.2

oskneo

blackeyed 发表于 2021-3-4 23:30
40G网络对比10G网络, 你别看速度只是提升了四倍…40G网络的随机读写速度提升了十倍以上

比如你的SSD的4K读 ...

想问一下你说40g随机性能好，
那么10兆随机能到达什么水平呢。
因为偶数据盘放机械硬盘raid6，
实际原生随机性能有限，
不知道万兆加rdma是否也够了？
不过之前以为40g全是24口以上的交换机。
今天意外看到12口卖3000的sx6012。
看似有点接近可接受的水平，而且支持rdma infiniband。
毕竟家用万兆交换机基本不支持rdma。
就是不知道噪音什么水平。
40g除了交换机贵，好像模块特别是电口模块也超贵。即使弄一个接电口交换机，不说万兆，就是千兆都贵。

—— 来自 HUAWEI LYA-AL00, Android 10上的 S1Next-鹅版 v2.5.2

oskneo

暗影翔 发表于 2021-3-5 09:25
前几天我用千兆网crystal mark测过iscsi和smb，smb领先很多。很奇怪的结果

现在不知道为啥crystal直接不显示smb映射盘，
不知道为啥。
能测映射盘4k速度的具体是什么版本之前呢。
还是有别的软件推荐？

—— 来自 HUAWEI LYA-AL00, Android 10上的 S1Next-鹅版 v2.5.2

暗影翔

oskneo 发表于 2022-3-22 23:29
现在不知道为啥crystal直接不显示smb映射盘，
不知道为啥。
能测映射盘4k速度的具体是什么版本之前呢。

好久不折腾了。atto试试

oskneo

blackeyed 发表于 2021-8-18 22:29
10G现在很便宜了, 选择也很多, tplink交换机挺小挺便宜的
网线的话CAT6就可以了, 讲究一点就CAT6A
但我建 ...

现在sriov的性能和兼容性始终有问题，现在发现服务器和虚拟机连反而是一个网卡两个网口直通给它们两个速度反而最好。本来想买个完整版的cx312b，因为ocp版是一个网口扩张出来，无法直通给两个虚拟机。但看价格，这个跟40g的双口ib卡也差不了多少，而且直连也不需要交换机。
所以现在是想pve上一个单口以太10g连交换机，再一个双口40g给虚拟机自己连，请问这样有没问题？ib网和以太连起来有什么注意点？
要买的25cm的dac是否以太和ib通用的？

—— 来自 HUAWEI LYA-AL00, Android 10上的 S1Next-鹅版 v2.5.2