Przełączanie top-of-rack czy end-of-row
To, gdzie stoi przełącznik dostępowy, decyduje o tym, co biegnie korytkami kablowymi, ile portów stoi bezczynnie i jaką część infrastruktury dotknie awaria jednego przełącznika.
Opcje
- Top-of-rack (ToR – przełącznik w szafie) – Jeden lub dwa przełączniki dostępowe na szafę i krótkie połączenia miedziane w jej wnętrzu.
- End-of-row (EoR / MoR – wspólny przełącznik na rząd) – Wspólne przełączniki dostępowe w szafie na końcu lub w środku rzędu.
Obie nazwy opisują, gdzie fizycznie znajduje się warstwa dostępowa. W układzie top-of-rack każda szafa ma własne przełączniki dostępowe, serwery łączą się krótką miedzią wewnątrz szafy, a z szafy wychodzi niewiele łączy uplink. W układzie end-of-row kilka szaf dzieli przełączniki umieszczone w szafie sieciowej na końcu rzędu – albo w jego środku, co jest tym samym pomysłem, zwykle nazywanym middle-of-row – a każde połączenie serwera biegnie do niej poziomo.
Nazwy są też nieco mylące. „Top-of-rack” to topologia, a nie miejsce montażu: przełącznik często instaluje się w środku szafy, skąd kable do serwerów powyżej i poniżej są najkrótsze. Liczy się to, że port dostępowy jest w szafie, a nie to, że jest na jej górze.
Zestawienie
| Top-of-rack | End-of-row | |
|---|---|---|
| Gdzie jest przełącznik dostępowy | W każdej szafie, jeden lub dwa na szafę. | We wspólnej szafie sieciowej obsługującej kilka szaf w rzędzie. |
| Okablowanie serwer–przełącznik | Krótkie odcinki miedzi, które nie wychodzą poza szafę. | Poziome odcinki miedzi z każdej szafy do szafy sieciowej rzędu. |
| Co wychodzi z szafy | Niewiele światłowodowych łączy uplink. | Każde połączenie serwera, jako miedziane okablowanie strukturalne. |
| Liczba przełączników | Większa – rośnie z liczbą szaf. | Mniejsza – rośnie z liczbą rzędów. |
| Wykorzystanie portów | W częściowo zapełnionych szafach porty mogą stać niewykorzystane. | Porty są wspólne dla wielu szaf, więc wykorzystanie jest zwykle wyższe. |
| Domena awarii jednego przełącznika | Jedna szafa. | Grupa szaf w rzędzie. |
| Obciążenie tras kablowych | Lekkie – w korytkach głównie światłowody. | Duże – gęste wiązki miedzi wzdłuż rzędu. |
| Dokładanie szafy później | Dokładasz szafę z własnymi przełącznikami i łączami uplink. | Ciągniesz nowe okablowanie poziome i liczysz, że przełącznik rzędu ma jeszcze wolne porty. |
| Gdzie zwykle się sprawdza | Gęste, jednolite szafy i sieci leaf-spine. | Zróżnicowane lub słabo zapełnione szafy i środowiska z okablowaniem strukturalnym. |
Niewykorzystane porty to typowy argument przeciw top-of-rack
Przełącznik z 48 portami dostępowymi w szafie z 12 serwerami zostawia 36 portów bezczynnych – i nie da się ich pożyczyć sąsiedniej szafie. Pomnóż to przez całą halę częściowo zapełnionych szaf, a strata staje się realna: w nakładach, w jednostkach U zajętych przez przełączniki oraz w mocy i cieple, które dokładają do szafy.
End-of-row łączy te porty w pulę dla kilku szaf, więc te same fizyczne porty obsługują tę szafę, w której faktycznie są serwery. Cenę płaci się w okablowaniu: każde z tych połączeń to poziomy odcinek, który trzeba ułożyć, uporządkować, udokumentować i utrzymywać – i który biegnie tymi samymi trasami co cała reszta.
Okablowanie to nie tylko koszt – to fizyczne obciążenie
Gęste wiązki miedzi zajmują miejsce w korytkach i pod podłogą, dokładają ciężaru i mogą blokować przepływ powietrza tam, gdzie biegną. W sali z podłogą techniczną zatłoczone trasy podpodłogowe konkurują wprost z powietrzem, które podłoga ma dostarczać. To termiczna konsekwencja decyzji sieciowej – łatwa do przeoczenia, bo obie sprawy są na różnych rysunkach.
Top-of-rack wyprowadza większość tej objętości ze wspólnych tras: miedź jest krótka i zostaje w szafie, a przez salę biegnie kilka światłowodów na szafę. Za to w samej szafie robi się tłoczniej – ten kompromis warto sprawdzić pod kątem przepływu powietrza i prowadzenia kabli w szafie.
Domeny awarii wyznacza przełącznik, a nie nazwa
Awaria jednego przełącznika dostępowego wyłącza wszystko, co jest do niego podłączone. Przy top-of-rack to jedna szafa, przy end-of-row – grupa szaf. Żaden wariant nie jest automatycznie lepszy. Liczy się to, czy obciążenie zniesie taką domenę awarii i czy projekt w ogóle ma podwójne ścieżki dostępowe.
Podwójne przełączniki zmieniają obraz w obu układach i rodzą to samo pytanie, które Akademia zadaje o tory zasilania A/B: czy obie ścieżki są naprawdę niezależne, czy spotykają się wyżej – we wspólnym uplinku, wspólnej obudowie (chassis), wspólnym torze zasilania albo wspólnej trasie kablowej? Dwa przełączniki w jednej szafie na jednej listwie zasilającej to nie są dwie ścieżki.
Wybór splata się z siecią szkieletową powyżej
Top-of-rack naturalnie pasuje do sieci leaf-spine, w których każdy przełącznik szafy jest liściem (leaf) z łączami uplink do kilku przełączników spine, a ruch wschód–zachód (east-west) ma przewidywalną liczbę przeskoków. End-of-row dojrzewał razem ze starszymi projektami trójwarstwowymi, w których warstwa agregacji leżała między dostępem a rdzeniem.
Ta historia częściowo wyjaśnia preferencje, ale nie jest regułą. Przydatne pytanie nie brzmi, która nazwa jest nowocześniejsza, tylko co faktycznie robi ruch, na ile jednolite są szafy, jak bardzo będą zapełnione pierwszego dnia, a jak w trzecim roku, i co uniosą trasy kablowe.
Gdzie która opcja zwykle się sprawdza
To warunki często kojarzone z każdą z opcji, a nie procedura decyzyjna. Prawdziwy wybór opiera się na danych z obiektu, przyjętych normach i ograniczeniach konkretnego budynku.
Warunki, które zwykle przemawiają za top-of-rack
- Szafy są gęste, jednolite i zapełnione do przewidywalnego poziomu.
- Sieć ma architekturę leaf-spine, a dominuje ruch wschód–zachód.
- Trasy kablowe są ciasne i nie mogą przyjąć dużej ilości miedzi.
- Szafy wdraża się jako powtarzalne moduły, a nie zapełnia stopniowo.
Warunki, które zwykle przemawiają za end-of-row lub middle-of-row
- Szafy są zróżnicowane, słabo zapełnione albo zapełniają się powoli.
- Środowisko opiera się na okablowaniu strukturalnym i normie okablowania.
- Mniej zarządzanych urządzeń jest warte więcej niż krótsze odcinki kabli.
- Sprzęt w szafach różni się na tyle, że planowanie portów osobno dla każdej szafy prowadzi do marnotrawstwa.
Gdzie kończy się to porównanie
Ta strona porównuje rozmieszczenie, a nie produkty. Dobór przełączników, współczynniki nadsubskrypcji, wymiarowanie łączy uplink, wybór mediów, budżety mocy i chłodzenia w szafie oraz norma okablowania stosowana w obiekcie to osobne decyzje inżynierskie z własnymi ograniczeniami.
Rzeczywiste środowiska rzadko są czyste. Układy mieszane – top-of-rack dla gęstych zasobów obliczeniowych i end-of-row dla pamięci masowych lub starszego sprzętu – są częste i mogą być dobrym rozwiązaniem. To porównanie pomaga rozumować o rzędzie, a nie ustalać politykę dla całego obiektu.
Najczęściej zadawane pytania
Co to jest przełącznik top-of-rack?
To przełącznik dostępowy zainstalowany w szafie serwerowej: serwery w tej szafie łączą się z nim krótkimi odcinkami miedzi, a z szafy wychodzi niewiele światłowodowych łączy uplink. Nazwa opisuje topologię, a nie wysokość montażu – fizycznie przełącznik często jest w środku szafy.
Czy top-of-rack jest lepszy od end-of-row?
Żaden nie jest ogólnie lepszy. Top-of-rack trzyma miedź z dala od wspólnych tras i ogranicza awarię przełącznika do jednej szafy, kosztem większej liczby przełączników i niewykorzystanych portów. End-of-row łączy porty w pulę dla wielu szaf i wymaga mniej przełączników, kosztem gęstego okablowania poziomego i większej domeny awarii.
Czy przełącznik top-of-rack musi być na górze szafy?
Nie. Często montuje się go w środku szafy, żeby kable do serwerów powyżej i poniżej były jak najkrótsze. O układzie decyduje to, że port dostępowy jest wewnątrz szafy.
Co to jest przełączanie middle-of-row?
Ten sam pomysł co end-of-row, ale wspólna szafa sieciowa stoi w środku rzędu, a nie na jego końcu, co mniej więcej o połowę skraca najdłuższy poziomy odcinek kabla.
Ile przełączników top-of-rack na szafę?
Jeden, jeśli jest jedna ścieżka dostępowa, i dwa, gdy projekt przewiduje niezależne ścieżki A i B. Dwa przełączniki dają niezależność tylko wtedy, gdy ich łącza uplink, tory zasilania i trasy kablowe też są niezależne.
Czy top-of-rack współpracuje z leaf-spine?
Tak – to typowe połączenie. Każdy przełącznik szafy działa jako liść (leaf) z łączami uplink do wielu przełączników spine, co daje ruchowi wschód–zachód przewidywalną liczbę przeskoków.
Źródła
Na tych źródłach opiera się powyższe podsumowanie. W prawdziwej pracy korzystaj z aktualnie przyjętego wydania, zweryfikowanych informacji o obiekcie i oceny wykwalifikowanego specjalisty.