1 (edytowany przez bern 2023-05-16 06:07:58)

Temat: Czy karta 10G będzie działać na wolniejszym złączu pcie?

Cześć,
Ostatnio chodzi mi po głowie zbudowanie domowej sieci 2.5G dla kilku klientów.
Inspiracją do tego są stosunkowo oszczędne switche 8 portowe 2.5G z portem uplink 10G SFP+.
https://www.servethehome.com/finally-mo … ch-review/

Do komputera/rutera chciałbym kupić i zainstalować jednoportową kartę 10G Mellanox connectx-3 MCX311A (bo z tego co widzę używana nie jest droga i można ją mieć za ok 30 USD).
https://network.nvidia.com/related-docs … Manual.pdf
Problemem jest złącze PCI. Bo karta wymaga pcie ver. 3.0 oraz x4 a ja mam w kompie dostępne złacze pcie ver 3.0 ale 2x.
Czy karta będzie działać? Jeśli by działała to rozumiem z obniżoną predkością?
Do sieci 2.5G nie potrzebuję pełnej prędkości 10G ale czy karta będzie działać po 'wynegocjowaniu' przepustowości 2x zamiast 4x?

Co o tym myślicie?
Czy są dostępne jakieś niedrogie karty pcie 5G lub 10G  PCIe z portem SFP+? co polecacie?

2

Odp: Czy karta 10G będzie działać na wolniejszym złączu pcie?

Cx-2 dziala na x1 więc pewnie ta też zadziała, bier bo to świetna karta i nie ma problemów z wkładkami sfp czy też dac-ami.

Dom : router https://i.imgur.com/IuB6Zwy.png | TP-LINK T1700G-28TQ |Zyxel XGS-1210-12 | 6x Ruckus r310 unleashed  + Ruckus icx7150-c12p | Truenas scale 124TB 25Gb| Xpenology 12TB | apc smart ups 750 lcd smile 100Mb/s - 25Gb/s
Podróżne : GL.Inet MT3000  +1TB hdd
Działka : rb260gs 1j wdm 1Gb+ ruckus r310 + nb m5 + kilka kamer ip  + panel 285Wp + lifepo4 12v 60Ah .

3

Odp: Czy karta 10G będzie działać na wolniejszym złączu pcie?

ambrozy5 napisał/a:

Cx-2 dziala na x1 więc pewnie ta też zadziała, bier bo to świetna karta i nie ma problemów z wkładkami sfp czy też dac-ami.

Dzięki.

Jak odczytuje z poniższego linku z kartą  connectx-3 MCX311A oraz pcie ver. 2.0 x1 w malinie (RPi) się nie udało:
https://github.com/geerlingguy/raspberr … issues/143

Trzeba spróbować i potestować jak sytuacja będzie wyglądać z pcie ver.3.0 i x2 na architekturze x64.

4 (edytowany przez ambrozy5 2023-05-16 20:14:05)

Odp: Czy karta 10G będzie działać na wolniejszym złączu pcie?

bern napisał/a:
ambrozy5 napisał/a:

Cx-2 dziala na x1 więc pewnie ta też zadziała, bier bo to świetna karta i nie ma problemów z wkładkami sfp czy też dac-ami.

Dzięki.

Jak odczytuje z poniższego linku z kartą  connectx-3 MCX311A oraz pcie ver. 2.0 x1 w malinie (RPi) się nie udało:
https://github.com/geerlingguy/raspberr … issues/143

Trzeba spróbować i potestować jak sytuacja będzie wyglądać z pcie ver.3.0 i x2 na architekturze x64.

jaka plyta? zaraz wsadze do h820c i zobaczysz

https://allegro.pl/oferta/karta-sieciow … 3629833380
ta mam wolna albo x520

Dom : router https://i.imgur.com/IuB6Zwy.png | TP-LINK T1700G-28TQ |Zyxel XGS-1210-12 | 6x Ruckus r310 unleashed  + Ruckus icx7150-c12p | Truenas scale 124TB 25Gb| Xpenology 12TB | apc smart ups 750 lcd smile 100Mb/s - 25Gb/s
Podróżne : GL.Inet MT3000  +1TB hdd
Działka : rb260gs 1j wdm 1Gb+ ruckus r310 + nb m5 + kilka kamer ip  + panel 285Wp + lifepo4 12v 60Ah .

5

Odp: Czy karta 10G będzie działać na wolniejszym złączu pcie?

Zapewne to 'Compute Module 4 IO Board - Raspberry Pi' na którym testują różne  karty nie jest dopracowany bo Cx-2 też im nie działa.
https://github.com/geerlingguy/raspberr … /issues/21

Ja planuję nabyć płytę Asrock N100M (jak już będzie dostępna):
PunBB bbcode test

Co zżera mniej prądu Cx-2 czy x520?

6 (edytowany przez ambrozy5 2023-05-17 20:33:48)

Odp: Czy karta 10G będzie działać na wolniejszym złączu pcie?

Pobór energii jest podobny, najmniej na kablu dac pasywnym, sprawdzałem dzis z asrock j3455-itx, działa bezproblemowo z prędkością x1 w slocie x1, iperf między hostami pokazuje ok 2.7Gbps w jedną stronę, sprawdzałem z parametrem 2m i -P 4. Host testowałem na mint cinamon 21. Nie miałem czasu sprawdzać w czymś innym. Karta działa bezproblemowo także z xpenology .

https://drive.google.com/file/d/1y06b83 … zgQnc/view

Dom : router https://i.imgur.com/IuB6Zwy.png | TP-LINK T1700G-28TQ |Zyxel XGS-1210-12 | 6x Ruckus r310 unleashed  + Ruckus icx7150-c12p | Truenas scale 124TB 25Gb| Xpenology 12TB | apc smart ups 750 lcd smile 100Mb/s - 25Gb/s
Podróżne : GL.Inet MT3000  +1TB hdd
Działka : rb260gs 1j wdm 1Gb+ ruckus r310 + nb m5 + kilka kamer ip  + panel 285Wp + lifepo4 12v 60Ah .

7 (edytowany przez bern 2023-05-17 22:19:40)

Odp: Czy karta 10G będzie działać na wolniejszym złączu pcie?

Dzięki za informację. Z pcie ver 3.0 i x2 transfery powinny być wyższe i wystarczające by obsłużyć 8-portowy switch 2.5Gb.
A i zużycie energii powinno być mniejsze dla x2 zamiast x4. W datashhet connectx-3 MCX311A jest informacja, że typowe zużycie przy pasywnym kablu powinno wynosić około 3.47W. Rozumiem, że dla pcie x2 powinno być mniejsze.

Zastanawiam się nad driverem do connectx-3 MCX311A w Linuxie...
Zamierzam działać z Ubuntu server. Obecnie w Ubuntu 23.04 kernel ma numerek 6.2.
Widzę że, karta connectx-3 nie jest już aktywnie supportowana. Support dla driverów mlnx_ofed kończy się na Ubuntu 20.04 i na kernelu 5.x
https://network.nvidia.com/products/inf … mlnx_ofed/

ale rozumiem, że można korzystać z driverów mlx4, które są wbudowane w kernel.
https://github.com/torvalds/linux/tree/ … lanox/mlx4
Czy można liczyć, że dalej będzie wsparcie dla tej karty w Linnuxie? Czy osobno należy instalować firmware?
Zapewne pobnie jest w przypadku Twojej w connectx-2.

8 (edytowany przez ambrozy5 2023-05-18 08:50:40)

Odp: Czy karta 10G będzie działać na wolniejszym złączu pcie?

Nie wiem , w mincie drivery się załadowały same, tak samo z cx3 czy karta na broadcomie, intelu czy leciwym już chelsio .w debianie nie miałem z tym jeszcze problemu ani w mincie.daca mam bo tanio kupiłem kilka szt 5m i raz ,że wychodzi taniej niż wkładki i światło , dwa, że mniej prądu zużywa a trzy, że jest wytrzymalszy niż patchcordy om4 które mam , no i te karty mellanoxa łykają wszystkie wkładki a nie jak intel musi mieć brandowane do intela...

Dom : router https://i.imgur.com/IuB6Zwy.png | TP-LINK T1700G-28TQ |Zyxel XGS-1210-12 | 6x Ruckus r310 unleashed  + Ruckus icx7150-c12p | Truenas scale 124TB 25Gb| Xpenology 12TB | apc smart ups 750 lcd smile 100Mb/s - 25Gb/s
Podróżne : GL.Inet MT3000  +1TB hdd
Działka : rb260gs 1j wdm 1Gb+ ruckus r310 + nb m5 + kilka kamer ip  + panel 285Wp + lifepo4 12v 60Ah .

9

Odp: Czy karta 10G będzie działać na wolniejszym złączu pcie?

bern napisał/a:

ale rozumiem, że można korzystać z driverów mlx4, które są wbudowane w kernel.
https://github.com/torvalds/linux/tree/ … lanox/mlx4

Właśnie producent często nie udostępnia nowych wersji bo sterowniki weszły w skład kernela i tam są aktywnie utrzymywane i rozwijane.
Jak byś spojrzał na historię w linku który podałeś to widzisz że aktywne w nich się coś dzieje cały czas.

Masz niepotrzebny router, uszkodzony czy nie - chętnie przygarnę go.

10

Odp: Czy karta 10G będzie działać na wolniejszym złączu pcie?

Dzięki,
Zdecyowałem i zamówiłem kartę Mellanox ConnectX-3 MCX311A-XCAT oraz krótki, 0,5m kabel SFP+ 10G DAC 0.5m AWG30.
Teraz jeszcze zakup switcha 8x2.5Gb, płyty głównej SoC i zabawa z softwarem...

11

Odp: Czy karta 10G będzie działać na wolniejszym złączu pcie?

Ja kupiłem wczoraj XGS1010-12 za 389pln, mam juz XGS1210-12 i jest ok jak za tą cenę, nie potrzebuję zbytnio 2.5gb bo jedynie dwa porty do ap na przyszłość, za to 10gb już mam kilka urządzeń. Choć z moich testów z wifi 6 to  jak narazie nie widzę potrzeby inwestowania w szybszy sprzęt bo i tak na openwrt nie uzyskam satysfakcjonującej prędkości ze względu na brak wpełni działającego offloadingu w sprzętach soho. Może z wifi 7 się to znieni ale tam już będą porty 10gb w standardzie. Ale za to na ali widziałem switcha 2.5gb w świetnej cenie - tenda bodaj.

Dom : router https://i.imgur.com/IuB6Zwy.png | TP-LINK T1700G-28TQ |Zyxel XGS-1210-12 | 6x Ruckus r310 unleashed  + Ruckus icx7150-c12p | Truenas scale 124TB 25Gb| Xpenology 12TB | apc smart ups 750 lcd smile 100Mb/s - 25Gb/s
Podróżne : GL.Inet MT3000  +1TB hdd
Działka : rb260gs 1j wdm 1Gb+ ruckus r310 + nb m5 + kilka kamer ip  + panel 285Wp + lifepo4 12v 60Ah .

12

Odp: Czy karta 10G będzie działać na wolniejszym złączu pcie?

Na ali jest ciekawy switch teraz na promce horaco 8x 2.5Gb plus 1x10Gb sfp+ , jest w dodatku oparty o soc realteka więc zapewne jak ktoś się pochyli to i wsparcie openwrt dostanie.

Dom : router https://i.imgur.com/IuB6Zwy.png | TP-LINK T1700G-28TQ |Zyxel XGS-1210-12 | 6x Ruckus r310 unleashed  + Ruckus icx7150-c12p | Truenas scale 124TB 25Gb| Xpenology 12TB | apc smart ups 750 lcd smile 100Mb/s - 25Gb/s
Podróżne : GL.Inet MT3000  +1TB hdd
Działka : rb260gs 1j wdm 1Gb+ ruckus r310 + nb m5 + kilka kamer ip  + panel 285Wp + lifepo4 12v 60Ah .

13 (edytowany przez bern 2023-05-21 04:41:41)

Odp: Czy karta 10G będzie działać na wolniejszym złączu pcie?

To jeden z tych wymienionych w video w pierwszym  linku tego wątku; oparty na  RTL8373-CG oraz RTL8224-CG.
Ja czekam na większą promocję...
Parę tygodni temu kosztował podobno 30 USD mniej. Ale wtedy był mniej popularny.

14

Odp: Czy karta 10G będzie działać na wolniejszym złączu pcie?

Ale wiesz, że on jest niezarządzalny? Dla mnie już na tym etapie odpada niestety.

Dom : router https://i.imgur.com/IuB6Zwy.png | TP-LINK T1700G-28TQ |Zyxel XGS-1210-12 | 6x Ruckus r310 unleashed  + Ruckus icx7150-c12p | Truenas scale 124TB 25Gb| Xpenology 12TB | apc smart ups 750 lcd smile 100Mb/s - 25Gb/s
Podróżne : GL.Inet MT3000  +1TB hdd
Działka : rb260gs 1j wdm 1Gb+ ruckus r310 + nb m5 + kilka kamer ip  + panel 285Wp + lifepo4 12v 60Ah .

15

Odp: Czy karta 10G będzie działać na wolniejszym złączu pcie?

ambrozy5 napisał/a:

Ale wiesz, że on jest niezarządzalny? Dla mnie już na tym etapie odpada niestety.

Tak jest niezarządzalny.
Ale to prosty i w miarę tani switch (jak na switch 2.5Gb). Podobno jego główną zaletą jest to, że nie zżera dużo prądu.
W domowej, niedużej sieci może być ok.

16

Odp: Czy karta 10G będzie działać na wolniejszym złączu pcie?

@bern: dzięki za polecenie tego Mellanoxa connectx-3, w stacjonarnym sprawdza się świetnie, znacznie lepiej niż asusowy rog areion 10g, tylko nie zwróciłem uwagi że to low profile i trza go było trytytkami przymocować zanim normalny śledziu doślą wink

17

Odp: Czy karta 10G będzie działać na wolniejszym złączu pcie?

Shoonay napisał/a:

@bern: dzięki za polecenie tego Mellanoxa connectx-3, w stacjonarnym sprawdza się świetnie, znacznie lepiej niż asusowy rog areion 10g, tylko nie zwróciłem uwagi że to low profile i trza go było trytytkami przymocować zanim normalny śledziu doślą wink

Ja się tylko zastanawiałem nad tym connectx-3 i zamówiłem go w końcu (dzięki opiniom innych forumowiczów m. inn. @ambrozy5). Obecnie czekam na dostawę z Chin. I zapene trochę zejdzie zanim skopletuje cały zaplanowany sprzęt...

Ale ciszę się, że u Ciebie śmiga. Czy w Twoim kompie działa z pełną prędkościoą pcie x4 i w wersji 3.0? W jakim OS?

18

Odp: Czy karta 10G będzie działać na wolniejszym złączu pcie?

bern napisał/a:

Czy w Twoim kompie działa z pełną prędkościoą pcie x4 i w wersji 3.0? W jakim OS?

Tak, wygląda na to że śmiga na fulla, to w miarę nowa płyta pod gry na Windows 11 wink
https://i.imgur.com/AHYGP4J.png

19

Odp: Czy karta 10G będzie działać na wolniejszym złączu pcie?

Cześć,
W końcu zrezygnowałem z interfejsu 10G w sieci LAN bo jednak konsumuje zbyt dużo prądu (3-4W). Domową sieć LAN 2.5G zamierzam zbudować w oparciu o Realtek RTL8125 (wstawiając taką kartę do komputera pracującego jako router) i używając switch 2.5G. To rozwiązanie tymczasowe bo czekam na upowszechnienie się standardu 5G.
W przyszłym roku ma wyjść układ RTL8126, który będzie obsługiwał 5G.

Zrezygnowałem również z wspomnianej wyżej płyty głównej Asrock N100M bo okazało się że płyta w trybie Idle konsumuje 12-13W. To dla mnie zbyt dużo. Dlatego zostanę na razie z komputerkiem Fujitsu Futro S940 (procek Intel J5005), który w Idle pobiera 5W.