
Guten Tag, Freunde! Heute setze ich die Reihe fort, die sich mit dem Entwurf von Enterprise-Netzwerken widmet.
In diesem Artikel werde ich versuchen, so kurz wie möglich:
- den modularen Ansatz fĂŒr das Design von Enterprise-Netzen zu erlĂ€utern,
- die verschiedenen Varianten des Aufbaus eines der wichtigsten Module im Unternehmensnetz â dem Backbone-Netz (ip-campus) â zu betrachten,
- die Vor- und Nachteile der Optionen zur Redundanz kritischer Knoten im Netzwerk zu beschreiben,
- an einem abstrakten Beispiel ein kleines Enterprise-Netz zu planen/aktualisieren,
- Extreme Switches fĂŒr das geplante Netzwerk auszuwĂ€hlen,
- mit Glasfasern und IP-Adressierung zu arbeiten.
Dieser Artikel wird vor allem Netzwerkingenieure und Netzwerkadministratoren ansprechen, die gerade erst ihre Karriere als "Netzwerker" beginnen, nicht so sehr erfahrene Ingenieure, die viele Jahre bei Telekommunikationsanbietern oder groĂen Unternehmen mit geografisch verteilten Netzwerken gearbeitet haben.
Jedenfalls bitte ich Interessierte, weiterzulesen.
Modularer Ansatz zur Netzwerkgestaltung
Ich beginne meinen Artikel mit einem recht populĂ€ren modularen Ansatz im Netzwerkdesign, der es ermöglicht, ein Puzzle aus Netzwerkkomponenten zu einem einheitlichen Bild zusammenzufĂŒgen.
ZunĂ€chst etwas Abstraktes â ich stelle mir diesen Ansatz oft wie eine Zoom-Funktion auf geografischen Karten vor, bei der im ersten Schritt das gesamte Land sichtbar ist, im zweiten die Regionen, im dritten die StĂ€dte usw.
Nehmen wir als Beispiel folgendes:
- 1. Nahansicht â das gesamte Unternehmensnetzwerk besteht aus einer Vielzahl verschiedener Ebenen:
- das Backbone-Netzwerk oder Campus
- Grenzebene
- Betreiberebene
- Remote-Bereiche
- 2. Zweite Betrachtungsweise â jede dieser Ebenen wird in separate Module unterteilt
- das Backbone-Netzwerk oder Campus besteht aus:
- einem 3- oder 2-Ebenen-Modul, das das Unternehmensnetzwerk und seine Ebenen â Zugang, Verteilung und/oder Kern â beschreibt
- einem Modul, das das Rechenzentrum â die Serverseite der Infrastruktur â beschreibt
- die Grenzebene besteht wiederum aus:
- einem Modul fĂŒr die Internetanbindung
- einem WAN- und MAN-Modul, das fĂŒr die Anbindung geografisch verteilter Unternehmensstandorte zustĂ€ndig ist
- einem Modul zum Aufbau von VPN-Tunneln und Remote-Access-Zugriff
- Oft haben viele kleine Unternehmen mehrere dieser Module oder sogar alle in einem kombiniert.
- Anbieterlevel:
- In diesem Level sind Verbindungen âin die AuĂenweltâ â dunkle Glasfasern (Miete von Fasern bei Betreibern), KommunikationskanĂ€le (Ethernet, G.703 usw.), Internetzugang.
- Fernzugriffslevel:
- Das sind hauptsÀchlich die Niederlassungen eines Unternehmens, die innerhalb einer Stadt, Region, eines Landes oder sogar auf verschiedenen Kontinenten verteilt sind.
- Zu diesem Bereich kann auch ein Backup-Rechenzentrum gehören, das die Arbeit des Hauptzentrums dupliziert.
- Und natĂŒrlich gewinnen Teleworker (FernarbeitsplĂ€tze), die in letzter Zeit an PopularitĂ€t gewinnen, ebenfalls an Bedeutung.
- das Backbone-Netzwerk oder Campus besteht aus:
- Die dritte AnnĂ€herung â jedes der Module wird in kleinere Module oder Ebenen unterteilt. Zum Beispiel in Campus-Netzwerken:
- Ein dreistufiges Netzwerk setzt sich zusammen aus:
- Zugangsebene
- Verteilungsebene
- Kernebene
- In komplexeren FĂ€llen kann ein Rechenzentrum in Folgendes unterteilt werden:
- Eine 2- oder 3-stufige Netzwerkteil
- Serverteil
Ich werde alles, was oben beschrieben wurde, in der folgenden vereinfachten Skizze darstellen:

Wie aus dem obigen Bild ersichtlich ist, erleichtert der modulare Ansatz die Detaillierung und Strukturierung des Gesamtbildes in einzelne Elemente, mit denen anschlieĂend gearbeitet werden kann.In diesem Artikel werde ich mich auf die Campus-Enterprise-Ebene konzentrieren und diese nĂ€her beschreiben.
Arten von IP-CAMPUS-Netzwerken
WĂ€hrend meiner Zeit bei einem Anbieter und insbesondere spĂ€ter als Integrator bin ich auf unterschiedliche "Reifestufen" von Netzwerken bei Kunden gestoĂen. Ich verwende den Begriff Reifheit nicht ohne Grund, da es hĂ€ufig vorkommt, dass die Netzwerkstruktur mit dem Wachstum des Unternehmens selbst wĂ€chst, was im Grunde genommen logisch ist.
In einem kleinen Unternehmen, das sich in einem einzigen GebĂ€ude befindet, kann das Unternehmensnetzwerk lediglich aus einem grenzwertigen Router bestehen, der die Funktion eines Firewalls ĂŒbernimmt, einigen Zugangsswitches und ein oder zwei Servern.
Ich nenne ein solches Netzwerk fĂŒr mich selbst ein âeinstufigesâ Netzwerk â es fehlt dort vollstĂ€ndig eine klare Kernnetzwerkebene, die Verteilungsebene ist auf den grenzwertigen Router verschoben (mit den Funktionen Firewall, VPN und möglicherweise Proxy), wĂ€hrend die Zugangsswitches sowohl die Computer der Mitarbeiter als auch die Server bedienen.

Im Falle eines Unternehmenswachstums â mit zunehmender Anzahl an Mitarbeitern, Diensten und Servern â ist es oft notwendig:- die Anzahl der Switches im Netzwerk und der Zugangsports zu erhöhen
- die ServerkapazitÀten zu steigern
- sich mit Broadcast-DomĂ€nen auseinanderzusetzen â Netzsegmentierung und Routing zwischen den Segmenten zu implementieren
- NetzausfĂ€llen entgegenzuwirken, die zu Ausfallzeiten bei den Mitarbeitern fĂŒhren, da dies zusĂ€tzliche finanzielle Kosten fĂŒr das Management verursacht (der Mitarbeiter steht still, das Gehalt wird gezahlt, aber die Arbeit wird nicht erledigt)
- bei der BekĂ€mpfung von AusfĂ€llen ĂŒber die Redundanz kritischer Netzwerkkomponenten nachzudenken â Router, Switches, Server und Dienste
- die Sicherheitsrichtlinien zu verschĂ€rfen, da kommerzielle Risiken auftreten können und erneut â fĂŒr einen stabileren Netzwerkbetrieb
All dies fĂŒhrt dazu, dass der Ingenieur (Netzwerksadministrator) irgendwann ĂŒber die sinnvolle Strukturierung des Netzwerks nachdenkt und zu einem 2-Ebenen-Modell gelangt.
Dieses Modell hebt sich klar durch zwei Ebenen ab â die Zugriffsebene und die Verteilungsebene, die gleichzeitig als Kernlevel (collapsed-core) fungiert.
Die kombinierte Verteilungsebene und der Kern erfĂŒllen folgende Funktionen:
- Sie aggregiert die Verbindungen von Zugangsswitches.
- Sie fĂŒhrt die Segmentierung des Netzwerks ein â die Anzahl der Benutzer und GerĂ€te ist so hoch, dass sie nicht in ein /24-Netzwerk passen. Wenn sie es tun, verursachen Broadcast-StĂŒrme stĂ€ndige AusfĂ€lle (insbesondere wenn Benutzer dabei helfen, Schleifen zu erzeugen).
- Sie gewĂ€hrleistet die Kommunikation zwischen benachbarten Segmenten von Switches (ĂŒber schnellere Verbindungen).
- Sie stellt die Verbindung zwischen Benutzern und ihren GerĂ€ten sowie der Serverfarm sicher, die zu diesem Zeitpunkt ebenfalls in ein separates Netzwerksegment â das Rechenzentrum â ĂŒbergeht.
- beginnt, zusammen mit den Zugangsswitches, eine Sicherheitsrichtlinie umzusetzen, die zu diesem Zeitpunkt im Unternehmen zu entstehen beginnt. Das Unternehmen wÀchst, und auch die kommerziellen Risiken nehmen zu (hier beziehe ich mich nicht nur auf die Geheimhaltungsbestimmungen, den Zugriffsschutz usw., sondern auch auf grundlegende AusfÀlle im Netzwerk und bei den Mitarbeitern).
Somit entwickelt sich das Netzwerk frĂŒher oder spĂ€ter zu einem zweistufigen Modell:

In diesem Modell entstehen besondere Anforderungen sowohl an die Zugriffsswitches, die die Verbindungen von Benutzern und GerĂ€ten im Netzwerk (Drucker, Access Points, VoIP-GerĂ€te, IP-Telefone, IP-Kameras usw.) aggregieren, als auch an die Verteilungsswitches und Kern-Switches.Die Zugangsswitches mĂŒssen intelligenter und funktioneller sein, um den Anforderungen an Leistung, Sicherheit und FlexibilitĂ€t des Netzwerks gerecht zu werden, und sie sollten:
- verschiedene Arten von Zugangs- und Backbone-Ports haben â idealerweise mit der Möglichkeit, sowohl beim Datenverkehr als auch bei der Anzahl der Ports WachstumskapazitĂ€ten einzurĂ€umen.
- ĂŒber ausreichende Switching-KapazitĂ€t und Bandbreite verfĂŒgen.
- eine notwendige SicherheitsfunktionalitĂ€t zu haben, die den aktuellen Sicherheitsrichtlinien entspricht (idealerweise auch zukĂŒnftigen Anforderungen gerecht wird).
- die Möglichkeit zu haben, schwer zugĂ€ngliche NetzwerkgerĂ€te ĂŒber Power over Ethernet (PoE, PoE+) zu versorgen und sie aus der Ferne neu zu starten.
- die Möglichkeit, die eigene Stromversorgung zu reservieren, um sie dort zu nutzen, wo sie benötigt wird.
- weiterhin (wenn möglich) Wachstumspotenzial fĂŒr die FunktionalitĂ€t zu haben â ein hĂ€ufiges Beispiel ist, wenn ein Zugangsswitch im Laufe der Zeit zu einem Verteilungsswitch wird.
An Verteilungsswitches werden ebenfalls entsprechende Anforderungen gestellt:
- sowohl hinsichtlich der Backbone-Downlink-Ports zu den Zugangsswitches als auch zu den Peer-Interfaces benachbarter Verteilungsswitches (und in Zukunft möglichen Uplink-Interfaces zum Kern).
- in Bezug auf L2- und L3-FunktionalitÀt.
- in Bezug auf Sicherheitsfunktionen.
- in Bezug auf die GewÀhrleistung von Ausfallsicherheit (Redundanz, Clusterbildung und Reservierung der Stromversorgung).
- in Bezug auf die FlexibilitÀt bei der Lastenverteilung des Datenverkehrs.
- Potenzial fĂŒr zukĂŒnftige Funktionserweiterungen (Transformation des AggregationsgerĂ€ts im Laufe der Zeit in ein Kernsystem) haben.
- In bestimmten FĂ€llen kann es sinnvoll sein, PoE und PoE+ Ports in Verteilungsswitches zu nutzen.
Nachhaltiges Wachstum: Bei der Umsetzung einer aktiven Wachstumspolitik durch die Unternehmensleitung wird auch das Netzwerk weiterhin wachsen â das Unternehmen kann beginnen, benachbarte GebĂ€ude zu mieten, eigene BĂŒrogebĂ€ude zu errichten oder kleinere Wettbewerber zu ĂŒbernehmen, wodurch die Anzahl der ArbeitsplĂ€tze steigt. Gleichzeitig vergröĂert sich auch das Netzwerk, was Folgendes erfordert:
- Bereitstellung von ArbeitsplĂ€tzen fĂŒr Mitarbeiter â neue Zugriffsswitches mit Zugangports sind erforderlich.
- Vorhandensein neuer Verteilungsswitches zur Aggregation von Verbindungen von Zugriffsswitches.
- Bau neuer sowie Modernisierung bestehender Kommunikationsverbindungen.
Als Konsequenz steigt der Datenverkehr aus folgenden GrĂŒnden:
- aufgrund der Zunahme der Zugriffports und entsprechend der Nutzer im Netzwerk.
- aufgrund des erhöhten Verkehrs benachbarter Subsysteme, die das Unternehmensnetzwerk fĂŒr Transporte nutzen â Telefonie, Sicherheit, Ingenieursysteme usw.
- aufgrund der EinfĂŒhrung zusĂ€tzlicher Dienste â mit dem Wachstum des Personals entstehen neue Abteilungen, die spezielle Software benötigen.
- die Rechenleistung des Rechenzentrums steigt, um den Anforderungen der Infrastruktur und Anwendungen gerecht zu werden.
- die Sicherheitsanforderungen an Netzwerk und Informationen wachsen â die berĂŒhmte CIA-Triade (ein Scherz), aber im Ernst, CIA â Vertraulichkeit, IntegritĂ€t und VerfĂŒgbarkeit:
- in diesem Zusammenhang entstehen zusĂ€tzliche Anforderungen an Ausfallsicherheit und Reservierung fĂŒr kritische Netzwerkebenen â Verteilung und Rechenzentrum.
- erneut steigt der Datenverkehr durch die Implementierung neuer Sicherheitssysteme â beispielsweise RKV und andere.
So oder so wird das Wachstum von Datenverkehr, Diensten und Benutzerzahl irgendwann die Notwendigkeit zur EinfĂŒhrung einer zusĂ€tzlichen Netzwerkebene bedeuten â des Kerns, der die hochgeschwindigkeitsfĂ€hige Paketvermittlung/-routing mit schnellen Kommunikationslinks durchfĂŒhren wird.
An diesem Punkt kann das Unternehmen zu einem dreistufigen Netzwerkmodell ĂŒbergehen:

Wie in der obigen Abbildung zu sehen ist, gibt es in einem solchen Netzwerk eine Kernschicht, die die Hochgeschwindigkeitsverbindungen von den Verteilungsschaltern aggregiert. Daher mĂŒssen auch an die Kernswitches folgende Anforderungen gestellt werden:- KapazitĂ€t der Schnittstellen â 1GE, 2.5GE, 10GE, 40GE, 100GE
- Leistung des Switches (Switching-KapazitÀt und Forwarding-Performance)
- Schnittstellentypen â 1000BASE-T, SFP, SFP+, QSFP, QSFP+
- Anzahl und Art der Schnittstellen
- Redundanzmöglichkeiten (Stacking, Clustering, Redundanz von Steuerplatinen (gilt fĂŒr modulare Switches), Redundanz der Stromversorgung usw.)
- FunktionalitÀt
Auf dieser Netzwerkebene ist eine technische Modifikation definitiv erforderlich:
- Redundanz fĂŒr Knoten und Verbindungen im Kern (sehr, sehr, sehr wĂŒnschenswert)
- Redundanz fĂŒr Knoten und Links im Verteilungslevel (je nach KritikalitĂ€t)
- Redundanz fĂŒr Links zwischen Zugangsswitches und Verteilungsebene (nach Bedarf)
- EinfĂŒhrung von Protokollen zur dynamischen Routenfindung
- Lastverteilung sowohl im Kernel als auch auf den Verteilungs- und Zugangsebenen (bei Bedarf)
- Implementierung zusÀtzlicher Dienste - sowohl Transportdienste als auch Sicherheitsdienste (bei Bedarf)
so wie die gesetzlichen Vorgaben, die die Netzwerksicherheitsrichtlinie des Unternehmens definieren und die allgemeine Sicherheitsrichtlinie ergÀnzen in Bezug auf:
- Anforderungen an die Implementierung und Konfiguration bestimmter Sicherheitsfunktionen auf den Zugriffs- und Verteilerschaltern
- Zugangs-, Ăberwachungs- und Verwaltungsanforderungen fĂŒr NetzwerkgerĂ€te (Remote-Zugriffsprotokolle, erlaubte Segmente zur Verwaltung, Protokollierungseinstellungen usw.)
- Anforderungen an die Redundanz
- Anforderungen an die Erstellung eines minimal notwendigen ZIPlist-Kits
In diesem Abschnitt habe ich kurz die Entwicklung des Netzwerks und des Unternehmens von wenigen Switches und ein paar Dutzend Mitarbeitern zu mehreren Dutzend (oder vielleicht Hunderten) von Switches und mehreren Hunderten (wenn nicht Tausenden) von Mitarbeitern beschrieben, die direkt im Unternehmensnetzwerk arbeiten (und es gibt noch Produktionsabteilungen und Ingenieurnetzwerke).
Es ist klar, dass eine derart "wundersame" und schnelle Entwicklung eines Unternehmens in der RealitÀt nicht stattfindet.
Normalerweise vergehen Jahre, bis ein Unternehmen und sein Netzwerk von der anfĂ€nglichen Stufe 1 auf die von mir beschriebene Stufe 3 gewachsen sind.Warum schreibe ich all diese Binsenwahrheiten? Weil ich in diesem Zusammenhang den Begriff ROI â Return on Investment (Rendite/RĂŒckfluss von Investitionen) erwĂ€hnen möchte und die Aspekte betrachten möchte, die direkt die Auswahl der NetzwerkausrĂŒstung betreffen.
Bei der Auswahl von AusrĂŒstung entscheiden sich Netzwerkingenieure und ihre Vorgesetzten oft auf der Grundlage von zwei Faktoren â dem aktuellen Preis der AusrĂŒstung und dem minimalen technischen Funktionsumfang, der momentan fĂŒr die Lösung einer bestimmten Aufgabe oder Aufgaben erforderlich ist (ĂŒber den Erwerb von AusrĂŒstung fĂŒr Redundanz werde ich spĂ€ter berichten).
Dabei werden selten die Möglichkeiten fĂŒr eine zukĂŒnftige "ErtĂŒchtigung" der Hardware in Betracht gezogen. Kommt es zu einem Punkt, an dem die GerĂ€te in Bezug auf FunktionalitĂ€t oder Leistung nicht mehr ausreichen, wird anstelle einer AufrĂŒstung hĂ€ufig neue, leistungsstĂ€rkere Hardware angeschafft, wĂ€hrend die alte entweder eingelagert wird oder irgendwo im Netzwerk verbleibt, um "irgendwo zu stehen" (dies ist auch ein Grund fĂŒr die Entstehung eines groĂen Patchworks aus Hardware und der Anschaffung vieler Informationssysteme, die damit arbeiten).
Auf diese Weise wird anstelle des Kaufs von zusĂ€tzlichen Lizenzen fĂŒr erweiterte Funktionen und höhere Leistungen, die viel gĂŒnstiger sind als neue, leistungsstarke Hardware, oft neue GerĂ€te angeschafft, und die GrĂŒnde dafĂŒr sind folgende:
- Das Netzwerk wĂ€chst oft nur langsam, und die Erweiterung der FunktionalitĂ€t oder Leistung des Switches in Ihrem Netzwerk kann fĂŒr eine lange Zeit ausreichend sein.
- Es ist kein Geheimnis, dass die Hardware von auslĂ€ndischen Anbietern an auslĂ€ndische WĂ€hrungen (Dollar oder Euro) gebunden ist. Um ehrlich zu sein â der Anstieg des Dollars oder Euros (oder die gelegentliche Mini-Abwertung des Rubels, je nach Blickwinkel) fĂŒhrt dazu, dass der Dollar vor 10 Jahren und der Dollar heute aus Sicht des Rubels zwei völlig unterschiedliche Dinge sind.
Zusammenfassend möchte ich anmerken, dass die Anschaffung von Netzwerkhardware mit breiterer FunktionalitĂ€t jetzt zu Einsparungen in der Zukunft fĂŒhren kann.
Hier betrachte ich die Kosten fĂŒr den Erwerb von Hardware im Kontext einer Investition in mein Netzwerk und meine Infrastruktur.So verfolgen viele Anbieter (nicht nur Extreme) das Prinzip 'pay-as-you-grow', wobei sie in die Hardware eine Vielzahl von Funktionen und Möglichkeiten zur Steigerung der Schnittstellenleistung integrieren, die spĂ€ter durch den Erwerb separater Lizenzen aktiviert werden. Sie bieten auch modulare Switches mit einer breiten Palette von Schnittstellen- und Prozessorkarten, sowie die Möglichkeit einer schrittweisen Erweiterung sowohl ihrer Anzahl als auch ihrer LeistungsfĂ€higkeit.
Reservierung kritischer Knoten
In diesem Abschnitt des Artikels möchte ich die grundlegenden Prinzipien der Sicherung wichtiger Netzwerk-Knoten wie Core-Switches, Rechenzentren oder Verteilungsnetze kurz erlĂ€utern. Ich beginne mit einem Ăberblick ĂŒber die gĂ€ngigen Sicherungsmethoden â Stacking und Clustering.
Jede dieser Methoden hat ihre Vor- und Nachteile, ĂŒber die ich sprechen möchte.
Nachfolgend finden Sie eine allgemeine Vergleichstabelle der beiden Methoden:

- Verwaltung Wie aus der Tabelle ersichtlich, hat das Stacking in diesem Bereich Vorteile, da es aus Verwaltungssicht als ein einziger Switch mit einer gröĂeren Anzahl von Ports dargestellt wird. Anstelle von 8 unterschiedlichen Switches, die beim Clustering verwaltet werden mĂŒssen, können Sie beim Stacking nur einen verwalten.
- Entfernung Aktuell ist der Vorteil der Clusterbildung nicht mehr so deutlich, da Technologien zum Stapeln von Switches ĂŒber Stapelports oder Dual-Ports (zum Beispiel SummitStack-V von Extreme, VSS von Cisco usw.) aufgetaucht sind, die ebenfalls von den Transceiver-Typen abhĂ€ngen. Hier liegt der Vorteil der Clusterbildung darin, dass beim Stapeln Optionen existieren, bei denen herkömmliche Stapelports verwendet werden mĂŒssen, die oft mit speziellen Kabeln begrenzter LĂ€nge von 0.5, 1, 1.5, 3 oder 5 Metern verbunden sind.
- Software-Update Hier sehen wir, dass die Clusterbildung gewisse Vorteile gegenĂŒber dem Stacken bietet. Bei einem Update der Software muss beim Stacking die Software auf dem Master-Switch aktualisiert werden, der dann die Rolle ĂŒbernimmt, die neue Software auf den Standby-Mitgliedsswitches des Stacks zu installieren. Einerseits erleichtert dies Ihre Arbeit, andererseits erfordert das Software-Update oft einen Hardware-Neustart, was zur vollstĂ€ndigen Neustart des gesamten Stacks fĂŒhrt und damit zu einem Ausfall seiner Funktion und aller darauf basierenden Dienste fĂŒr die Zeit des Neustarts. Dies ist in der Regel sehr kritisch fĂŒr das Kernnetz und Rechenzentren. Bei der Clusterbildung hingegen haben Sie zwei voneinander unabhĂ€ngige GerĂ€te, auf denen Sie die Software nacheinander aktualisieren können. So können Serviceunterbrechungen vermieden werden.
- Konfigurationseinstellungen Hier liegt der Vorteil natĂŒrlich beim Stacking, da Sie in diesem Fall nur die Einstellungen eines GerĂ€ts und seiner Konfigurationsdatei anpassen mĂŒssen. Bei der Clusterbildung hingegen entspricht die Anzahl der Konfigurationsdateien der Anzahl der Knotenelemente des Clusters.
- Ausfallsicherheit â hier sind beide Technologien ungefĂ€hr gleich, jedoch hat die Clusterbildung einen kleinen Vorteil. Der Grund dafĂŒr liegt darin, dass, wenn man den Stack aus der Sicht der laufenden Prozesse und Protokolle betrachtet, Folgendes zu sehen ist:
- es gibt einen Master-Switch, auf dem alle Hauptprozesse und Protokolle (wie z.B. das Protokoll der dynamischen Routenwahl â OSPF) aktiv sind.
- es gibt weitere Slave-Switches, auf denen die Hauptprozesse laufen, die fĂŒr den Betrieb im Stack und die Verarbeitung des durch sie flieĂenden Traffics erforderlich sind.
- Wenn der Master-Switch ausfÀllt, erkennt der nÀchstpriorisierte Slave-Switch den Ausfall des Masters.
- Er initiiert sich selbst als Master und startet alle Prozesse, die auf dem Master aktiv waren (einschlieĂlich des beobachteten Protokolls OSPF).
- Nach einer gewissen Startzeit der Prozesse (in der Regel recht kurz) beginnt das OSPF-Protokoll zu arbeiten.
- Bei einem Ausfall eines Knotens arbeitet OSPF in der Cluster-Konfiguration etwas schneller als bei der Stacking-Methode (wĂ€hrend der Zeit, die fĂŒr den Start und die Initialisierung von Prozessen und Protokollen auf dem Slave-Switch des Stacks erforderlich ist). Es sei jedoch darauf hingewiesen, dass moderne Stacking-Protokolle und Switches sehr schnell arbeiten; oft dauert die Unterbrechung des Datenverkehrs beim Wechsel zwischen Stacks weniger als eine Sekunde. Dennoch gewinnt die Clusterbildung nominal in diesem Punkt.
- Schwierigkeit â wie aus der Tabelle ersichtlich, hat das Stacking in Bezug auf die Schwierigkeit die Nase vorn. Dies ist eine direkte Folge der Punkte âVerwaltungâ und âKonfigurationseinstellungenâ. Ein einzelner Knoten benötigt deutlich weniger Zeit fĂŒr Einstellungen und Verwaltung. Zudem erfordert die Clusterkonfiguration hĂ€ufig die Anpassung zusĂ€tzlicher Routing-Protokolle oder Gateway-Redundanzprotokolle â VRRP, HSRP und andere.
- Austausch von Knoten â hierbei hat das Stacking ganz klar einen Vorteil. HĂ€ufig sind fĂŒr den Austausch eines Switches im Stack nur minimal erforderliche GerĂ€teeinstellungen vorzunehmen, zum Beispiel:
- Aktualisieren Sie die Software des neuen Switches auf die Version des Software-Stapels (dies kann sofort bei der Ankunft der Switches im ZEP erfolgen)
- Einrichten mehrerer grundlegender Befehle fĂŒr das Stapeln (fĂŒr einige Switch-Typen kann dies sogar nicht erforderlich sein)
- Einen defekten Switch aus dem Stapel entfernen und einen neuen anschlieĂen
- Stromversorgung und Patchkabel anschlieĂen
- ElastizitĂ€t - betrachte ich als eines der Hauptparameter. Im GroĂen und Ganzen ist ElastizitĂ€t eine komplexe Eigenschaft, die bedeutet, dass etwas unter Belastung verĂ€ndert wird und nach deren Beseitigung in seine ursprĂŒngliche Form zurĂŒckkehrt. MerkwĂŒrdigerweise wird sie fĂŒr das Cluster-Setup sogar höher sein, selbst bei einer 4:3-Bewertung zugunsten des Stappelns. Es liegt am menschlichen Faktor. Ja, Sie haben richtig gehört â in der StĂ€rke solcher Parameter des Stappelns, wie einheitliches Management, Konfiguration der Einstellungen und vereinfachte KomplexitĂ€t, liegt die SchwĂ€che des Stappelns, sobald der menschliche Faktor ins Spiel kommt.
In meiner Arbeit im IT-Bereich habe ich bereits viele Situationen erlebt (um ehrlich zu sein, bin ich auch selbst mehrmals darĂŒber gestolpert, besonders am Anfang), in denen Ingenieure beim Einrichten von Stack-Komponenten einen Fehler bei der Eingabe eines Befehls oder beim Aktivieren/Deaktivieren bestimmter Funktionen auf der Hardware gemacht haben, was zu einem Ausfall des gesamten Stacks und dessen manueller Neuinitialisierung fĂŒhrte. Besonders erwĂ€hnenswert sind die Fans des Putty-Programms fĂŒr Windows (oh, dieses Kopieren mit der rechten Maustaste).
TatsĂ€chlich sind beide Technologien ziemlich gut (insbesondere im Vergleich zu fehlender Redundanz), und jede hat ihre eigenen StĂ€rken und SchwĂ€chen. FĂŒr den Kernbetrieb und in stark frequentierten Rechenzentren wĂŒrde ich jedoch Clusterlösungen bevorzugen.
Das ist nur meine Meinung. Viele professionelle Ingenieure, die seit Jahren auf hohem Niveau im Netzwerk-Support tĂ€tig sind, können ebenso gut mit beiden Technologien umgehen â es kommt ganz auf die Erfahrung und Qualifikation an.
Neben den Stacking- und Redundanztechnologien gibt es auch allgemeine Prinzipien zur Redundanz von Netzwerkkomponenten und der Verbindungen zwischen diesen Komponenten:
Unter der Redundanz innerhalb der Netzwerkknoten verstehe ich:
- Stromversorgung Redundanz â das Einrichten von zwei redundanten Stromversorgungsblöcken, die idealerweise an eine erste Kategorie der Stromversorgung angeschlossen sind, kann Ihnen das Leben erheblich erleichtern.
- Redundanz von Steuerkarten â bezieht sich hauptsĂ€chlich auf modulare Switches, die den Anschluss mehrerer redundanter Steuerkarten ermöglichen.
- Redundanz von Schnittstellenkarten â betrifft ebenfalls ĂŒberwiegend modulare Switches.
Unter der Redundanz von Verbindungen/Kabeln verstehe ich hauptsÀchlich das Vorhandensein redundanter Kabelstrecken (oder Funkverbindungen in offenen RÀumen) mit:
- Verteilung ĂŒber verschiedene KabelschĂ€chte und -kanĂ€le innerhalb des GebĂ€udes
- geografische Verteilung ĂŒber das Gebiet auf der Ebene von zwei oder mehr GebĂ€uden, StĂ€dten, Regionen oder LĂ€ndern (sogenannte volumetrische Ringe)
Bei der Erstellung redundanter Verbindungslinien mĂŒssen bestimmte Empfehlungen fĂŒr die GerĂ€te beachtet werden:
- Im Falle von duplizierten Schnittstellenkarten des modularen Switches oder bei vorhandenem Stack mĂŒssen die Links zwischen den Einheiten verteilt werden â zwischen den Schnittstellenkarten bei modularen Switches und zwischen den Switches bei einem Stack.
- Es ist empfehlenswert, Protokolle zur Link-Aggregation (LACP, MLT, PAgP usw.) zu verwenden, um Links in Gruppen zusammenzufassen und die Last zwischen ihnen zu verteilen.
- Verwenden Sie Router, die ECMP-Protokolle (Equal-Cost-Multi-Path) unterstĂŒtzen â wenn mehrere Pakete auf einem Weg geliefert werden, gehen diese Pakete nicht ĂŒber einen besten Pfad (und Schnittstelle), sondern werden auf mehrere beste Pfade (und Schnittstellen) verteilt, die auf der Gleichheit der Metriken des Routingprotokolls basieren, das fĂŒr die BefĂŒllung der endgĂŒltigen Routingtabelle verantwortlich ist.
Und nun, wie versprochen, werde ich einen realen Fall aus meiner Praxis beschreiben und das Prinzip der Kosteneinsparung bei der Reservierung kritischer Knoten, das vor einigen Jahren stattfand:
- In einem Unternehmen, das ich X nennen möchte, gab es ein standardmĂ€Ăiges dreistufiges Netzwerkmodell:
- mit mehreren Kernen
- einigen Dutzend Aggregationen
- einigen Tausend Zugangsswitches
- mehrere zehntausend Benutzer
- Das Netzwerk war ziemlich komplex aufgebaut:
- mit einer Vielzahl von dynamischen Routing-Protokollen und Protokollen â OSPF, MP-BGP, MPLS, PIM, IGMP, IPv6 usw.
- vielen Diensten â Internetzugang, L2 und L3 VPN, VoIP, IPTV, dedizierten Leitungen usw.
- Doch es gab einen Engpass im Netzwerk â den Border Router, der die Funktionen eines BGP-Edges kombinierte und einige Benutzer-Dienste terminierte.
- Ja, er kostete so viel wie ein FlugzeugflĂŒgel (mehrere Millionen Rubel).
- Ja, zu diesem Zeitpunkt war er eines der Spitzenprodukte des renommiertesten Netzwerk-Anbieters.
- Ja, er sollte sehr zuverlĂ€ssig sein â mit einer hervorragenden MTBF-Rate.
- Ja, er hatte 4 Netzteile, die im 2x2-Setup mit verschiedenen USV und EingÀngen konfiguriert waren.
Aber das Ànderte nichts daran, dass er der einzige Ausfallpunkt im Netzwerk war.
An einem, fĂŒr mich und meine Kollegen, alles andere als perfekten Tag, verabschiedete sich dieser Router (spĂ€ter stellte sich heraus, dass es einen Ausfall in der Stromversorgung gab, der gleichzeitig zwei Netzteile lahmlegte. Dabei wurde eines der Netzteile beschĂ€digt, was zu einem Defekt des RP-Moduls und der Schnittstellenkarte fĂŒhrte, die an den gemeinsamen Datenbus des GerĂ€ts angeschlossen waren).
Wir hatten keine Ersatzplatinen â weder fĂŒr das RP-Modul noch fĂŒr die Schnittstellenkarte, jedoch bestand ein Vertrag zur Ersatzlieferung von GerĂ€ten oder deren Komponenten mit einem unserer Partner im NBD-Modell.
Leider hatte der Partner zu diesem Zeitpunkt nur die Schnittstellenkarte auf Lager, wÀhrend das RP-Modul erst einige Tage spÀter (nach 3 Tagen) eintraf.
Insgesamt fĂŒhrte das Vorhandensein eines einzigen Ausfallpunkts im Netzwerk (selbst mit einem Support- und Ersatzvertrag) zu folgenden finanziellen Kosten:
- Der Anteil der Unternehmensleistungen, der auf diesen Border entfiel, betrug etwa 60-70%.
- Wie spÀter berechnet wurde, belief sich der Tagesgewinn zu diesem Zeitpunkt auf etwa 900.000 Rubel.
- So war theoretisch wÀhrend der drei Tage Ausfallzeit ein Gewinn von zwischen 1,62 Millionen und 1,89 Millionen Rubel verloren gegangen.
NatĂŒrlich waren die tatsĂ€chlichen Verluste geringer, da ein GroĂteil der EntschĂ€digungen nicht in Form von Geld, sondern in Form von Dienstleistungen zurĂŒckgegeben wurde. Dennoch gab es sie:
- Teil der EntschĂ€digungen fĂŒr Unternehmenskunden
- erhöhte Kosten fĂŒr die Mitarbeiter des Unternehmens, die wĂ€hrend dieser 3-4 Tage vollstĂ€ndig im Einsatz waren â Ăberstunden, Nachtschichten, erweiterte Schichten usw.
- Reputationsverluste, was ebenfalls nicht unwichtig ist.
- und das Wichtigste â die Nerven sowohl des Managements als auch der Mitarbeiter und Kunden.
Infolgedessen wurde die Politik des Unternehmens ĂŒberarbeitet:
- auf den Vertrag fĂŒr den Austausch gemÀà NBD-Bedingungen verzichtet
- den normalen Wartungsvertrag beibehalten
- einen zusÀtzlichen Router im Wert von etwa 1 bis 1,3 Millionen Rubel zur Sicherung von 90 % der Funktionen des Hauptrouters angeschafft.
Die anschlieĂende Anschaffung zusĂ€tzlicher Hardware und die Sicherung des HauptgerĂ€ts ermöglichten es, die Last zwischen ihnen auszugleichen, sowohl hinsichtlich der externen Verbindungen als auch des Traffics und der Nutzer, und boten dem Unternehmen fĂŒr zukĂŒnftige NotfĂ€lle einen Sicherheitsspielraum.
Beispiel fĂŒr das Design eines Unternehmensnetzwerks
In diesem Abschnitt des Artikels möchte ich die wichtigsten Punkte bei der Planung des Backbone-Netzes eines Unternehmens erlĂ€utern. Ich werde Sie nicht mit der gesamten PPDIOO-Methodik (Prepare-Planning-Design-Implement-Operate-Optimize) ĂŒberladen, sondern lediglich die Hauptaspekte hervorheben:
- Prepare/Vorbereitung â Es ist wichtig, sich mit der GeschĂ€ftsfĂŒhrung ĂŒber die Ziele der Netzmodernisierung abzustimmen, die Sie erreichen möchten â sei es die Erhöhung der Ausfallsicherheit oder die Implementierung neuer Dienste oder Technologien. Die Festlegung der technischen und organisatorischen EinschrĂ€nkungen lasse ich hier aus, da ich davon ausgehe, dass Sie Mitarbeiter der Organisation sind und ĂŒber ausreichend Zeit verfĂŒgen, um diese zu ĂŒberwinden. Zum Thema Budget komme ich spĂ€ter zurĂŒck.
- Planning/Planung â Hier sollten Sie eine vollstĂ€ndige Beschreibung Ihres aktuellen Netzwerks erstellen (falls Sie diese noch nicht kennen), d.h. das Netzwerk so beschreiben, wie es derzeit ist:
- Anzahl und Typ der GerÀte
- Anzahl und Typen der Ports
- bestehende Kabeltrassen und VerkabelungsplÀne innerhalb von GebÀuden und zwischen diesen
- Stromversorgungsschemata
- L2- und L3-Adressierung
- Karten der Wi-Fi-Netzwerke erstellen mit Angaben zu Access Points und Controllern
- Ihre Serverfarm beschreiben
- Es ist ratsam, alle Ihre Dienste und deren ZusammenhÀnge zu beschreiben.
- Wenn Sie bereits in irgendeiner Form eine Netzwerksicherheits- und Zugriffsrichtlinie implementiert haben, sollten Sie diese unbedingt bei der Planung berĂŒcksichtigen.
- Ich möchte gleich darauf hinweisen, dass der zweite Schritt im Wesentlichen eine vollstĂ€ndige Inventarisierung des Netzwerks darstellt, beginnend mit der Verkabelungsinfrastruktur und den Stromversorgungsschemata bis hin zu den Diensten (Anwendungen und deren Ports). Dieser Schritt ist sehr arbeitsintensiv und manchmal sogar mĂŒhselig. Wenn Sie oder Ihr VorgĂ€nger keine Dokumentation oder sogar ein einfaches Ăberwachungssystem gefĂŒhrt haben, ist jetzt der richtige Zeitpunkt, darĂŒber nachzudenken. Netzwerke neigen dazu, sich im Laufe der Zeit in unterschiedlichem MaĂe zu Ă€ndern, und nur die Pflege aktueller Dokumentation oder eines Ăberwachungssystems kann Ihnen helfen, den Zustand des Netzwerks im Blick zu behalten und die Verwaltung zu erleichtern. Aber das gehört bereits zum Schritt Betrieb.
- Design/Projektierung Bewaffnet mit umfassendem Wissen ĂŒber Ihr Netzwerk, das Sie im vorherigen Schritt erworben haben, setzen Sie sich letztendlich hin und ĂŒberlegen, wie Sie Ihr Netzwerk modernisieren können. Nachfolgend werde ich versuchen, ein kleines Beispiel fĂŒr die Berechnung eines Netzwerks zu demonstrieren.
Ich habe eine kleine Liste von Ausgangsdaten erstellt, die ich bei der Berechnung und Planung des Backbone-Netzwerks verwenden werde.
Lassen Sie uns den Schritt 'Prepare' in Form einer Liste darstellen, was wir an Materialien haben und was geplant ist:
- es gibt ein recht groĂes Unternehmen mit etwa 700-800 ArbeitsplĂ€tzen (hier spreche ich von den Mitarbeitern, die Zugang zum Unternehmensnetzwerk benötigen)
- es gibt mehrere freistehende GebÀude auf dem UnternehmensgelÀnde:
- HauptgebÀude:
- Anzahl der GebĂ€ude â 2
- Anzahl der Etagen im GebĂ€ude â 7
- Anzahl der TelekommunikationsschrĂ€nke pro Etage in einem GebĂ€ude â 3 (insgesamt 21)
- Anzahl der Mitarbeiter im GebÀude =~ 250 Personen
- ZusÀtzliche GebÀude:
- Anzahl der GebĂ€ude â 10
- Anzahl der Etagen im GebĂ€ude/Werk â 2
- Anzahl der TelekommunikationsschrĂ€nke im GebĂ€ude â 3
- Anzahl der Mitarbeiter im GebÀude =~ 20 Personen
- Das aktuelle Niveau des Kernnetzwerks (ĂŒbrigens ein sehr verbreitetes Schema, das ich schon oft in irgendeiner Form und Portzusammensetzung gesehen habe) ist dargestellt:
- 2 L2-Switches:
- 1Gb Ports vom Typ RJ-45 â 24
- 1Gb SFP Ports â 4
- 1. L2-Switch:
- 1Gb SFP-Ports â 24 StĂŒck
- Kernel-Topologie â Ring
- Peer-to-Peer-Verbindungen zwischen den Switches sind mit Glasfaser verbunden
- Die Switches befinden sich in kleinen ServerrÀumen mit SchrÀnken
- 2 L2-Switches:
- Aktuelles Verteilungsebenen:
- kombiniert mit der Kernnetzebene zur Aggregation der Links von den Zugangsswitches
- L3-Adressierung wurde auf den Grenzrouter und/oder die Firewall verlagert
- Aktuelle Zugriffsebene:
- L2-Switches mit 16 x 100 Mb RJ-45 Zugangsports und 2 Gigabit Combo-Uplink-Ports RJ-45/SFP
- Die Switches sind in SchrÀnken auf den Etagen untergebracht
- Zugriffs-Switch-Topologie:
- Stern (Hub-and-Spoke) mit dem Kern-/Verteilungsswitch in der Mitte
- Branchenswitches sind eine Kette von Switches auf den Etagen â 3 StĂŒck in Reihe
- Es gibt unmanaged Zugangsswitches
- Switches in 9 zusĂ€tzlichen GehĂ€usen sind ĂŒber Medienkonverter (Optisches Signal zu elektrischen) verbunden
- Aktuelle Kabelinfrastruktur:
- Kabelsystem zwischen den GebÀuden:
- Es gibt ein Glasfaserkabel zwischen 2 HauptgebÀuden mit 8 Fasern
- Es gibt jeweils ein optisches Kabel zwischen einem der zusÀtzlichen GebÀude (in dem der Kern-Switch installiert ist) und jedem der HauptgebÀude mit je 8 Fasern.
- Es gibt jeweils ein optisches Kabel zwischen den zusÀtzlichen GebÀuden und den GebÀuden mit installierten Kern-Switches, die 4 Fasern haben (deren Verteilung ist in der Abbildung unten dargestellt).
- Der Faserntyp in allen Kabeln ist monomode/SMF.
- Es werden 2-Faser monomodale SFP-Transceiver verwendet.
- Einige Kabel enden an optischen Verteilern (ODF) in separaten RÀumen (VerteilungssÀlen/ServerrÀumen), wÀhrend andere Kabel in Etagenverteilern terminiert werden.
- Kabelsystem innerhalb der GebÀude:
- Es gibt eine gemischte Kabelstruktur zwischen den ServerrÀumen und den ersten SchrÀnken auf den Etagen:
- Kupferkabel Cat5e â 10 StĂŒck (oder 100 Adernpaar-Kabel).
- Ein optisches Mehrfaser-/MMF-Kabel mit 4 oder 8 Fasern â 1 StĂŒck.
- Optisches Mehrfaser-/MMF-Kabel mit 4 Fasern zwischen den Etagen-SchaltschrÀnken.
- Kupferkabel Cat5e zwischen den Etagen-SchaltschrÀnken und den Zugangspunkten.
- Aktuelles Rechenzentrum:
- Es sind mehrere Server vorhanden, zum Beispiel 6 StĂŒck.
- Sind mit 1Gb Ports in den Kern-Switch im ersten HauptgebÀude verbunden.
- Alle Unternehmensanwendungen werden auf Servern gehostet.
- Adressierung L2, L3 und Routing:
- Im Netzwerk gibt es mehrere VLANs - 2 bis 3 pro GebÀude.
- Die Server sind in ein separates /24 Netzwerk untergebracht.
- FĂŒr interne Zwecke werden graue Netzwerke der Klasse B im Bereich 172.16.0.0/16 verwendet.
- L3-Adressen werden am Grenzrouter und/oder an der Firewall terminiert.
- Es wird statisches Routing verwendet.
- ZusÀtzliche Informationen:
- Telekommunikation:
- In den GebÀuden und einigen Komplexen ist traditionelle Telefonie mit digitalen alten Telefonanlagen (nicht IP-TK) implementiert.
- NeugebĂ€ude mĂŒssen telefoniert werden, ohne hohe Kosten fĂŒr die Verlegung teurer Kupferkabel mit bestimmter KapazitĂ€t und den Aufbau einer redundanten Verkabelung fĂŒr die Telefonie innerhalb der GebĂ€ude.
- Langfristig ist die EinfĂŒhrung von IP-Telefonie im gesamten Unternehmensbereich geplant, die VerknĂŒpfung mit CRM-Systemen und die Umstellung aller Mitarbeiter darauf.
- KapazitÀt der Ports:
- Es ist erforderlich, die aktuelle KapazitĂ€t der Backbone-Ports und Zugangsports zu analysieren und mindestens 25-30% fĂŒr zukĂŒnftige BedĂŒrfnisse zu reservieren.
- Analysieren Sie die Angemessenheit der aktuellen Bandbreite der Zugangs- und Backbone-Links.
- Stellen Sie sicher, dass PoE/PoE+-Ports fĂŒr GerĂ€te aus verwandten Systemen wie VideoĂŒberwachung und Telefonie vorhanden sind.
- VideoĂŒberwachung:
- Es ist geplant, das Unternehmensnetzwerk als Transportmittel fĂŒr das VideoĂŒberwachungsnetz zu nutzen.
- Es mĂŒssen PoE-Ports fĂŒr die Ăberwachungskameras vorgesehen werden.
- Drahtlose Systeme:
- Geplant ist die Implementierung einer drahtlosen Infrastruktur zur MobilitÀt der Mitarbeiter.
- Es mĂŒssen PoE-Ports fĂŒr die Zugangspunkte vorgesehen werden.
- Budget, Zeitrahmen und Anforderungen an die AusrĂŒstung:
- Nutzen Sie vorhandene Hardware optimal aus.
- BerĂŒcksichtigen Sie bei der Netzwerkplanung die Möglichkeit, die NetzwerkkapazitĂ€t um N Jahre zu erweitern.
- BerĂŒcksichtigen Sie bei der Netzwerkplanung die UnterstĂŒtzung aller erforderlichen Sicherheitsfunktionen â von Port-Security bis hin zu Benutzerauthentifizierung und -autorisierung ĂŒber 802.1x.
- Es ist wichtig, kritische Netzwerknoten von höchster PrioritĂ€t â das Kernnetz und das Rechenzentrum â zu reservieren und die Möglichkeit der Sicherung von weniger wichtigen Knoten â Verteilungsknoten â vorzusehen.
- Das Projektbudget muss eine schrittweise Finanzierung in mehreren Etappen vorsehen.
- Der Budgetbetrag â hierbei legt jedes Unternehmen selbst fest, basierend auf seinen finanziellen Kennzahlen.
- Fristen â im besten Fall gibt es keine festen Fristen, da es sich um ein internes Projekt handelt, das von den Mitarbeitern des Unternehmens umgesetzt wird. Alternativ könnten sie relativ angenehm sein â zum Beispiel 1 Jahr (oder mehr). Im ungĂŒnstigsten Fall könnte dies zwischen 3 Monaten und einem halben Jahr liegen.
- Aktuelle Netzwerkprobleme beheben:
- Paketverluste
- Probleme mit DHCP an relativ intelligenten Zugangsswitches im Zusammenhang mit der Verwendung des STP-Protokollfamilie zur Vermeidung von Schleifen an den Zugangsports.
- Die Notwendigkeit eines DHCP-Server-Interfaces in jedem VLAN der Mitarbeiter beseitigen.
- entstehende Switch-Schleifen, die durch die unkontrollierte Aktivierung von verwalteten/unverwalteten Switches in den RÀumen und den Anschluss verschiedener GerÀte an diese verursacht werden
- die Liste kann endlos fortgesetzt werdenâŠ
Schritt Planung â die Charakteristik des Zustands Ihres aktuellen Netzwerks hĂ€ngt, wie bereits erwĂ€hnt, von der VerfĂŒgbarkeit eines hochwertigen Monitoringsystems und dem Grad seiner Dokumentation ab. In diesem Schritt mĂŒssen Sie:
- mindestens das bestehende Netzwerk fĂŒr eine weitere Analyse skizzieren
- Daten von den GerÀten sammeln:
- Verkehr ĂŒber die Hauptports
- Fehler an den Ports
- CPU-Auslastung und Speichernutzung der Switches und Router
- L2-L3-Schemata nach VLANs und IP-Adressen aufschlĂŒsseln
- Kabelstrecken-Schemata erstellen:
- Faser-Schemata und Schemata fĂŒr die Verkabelung optischer Patchfelder
- Schemata der Kupferkabelverteilungen zwischen ServerrÀumen und Etagen
- Schemata der Kupferkabelverteilungen zwischen Etagen und RĂ€umen
- ĂberprĂŒfen, ob optische Patchfelder und Patchpanels in den ServerrĂ€umen und SchrĂ€nken vorhanden sind
- ĂberprĂŒfen der Stromversorgungsschemata in den Server- und Etagen-SchrĂ€nken
- ĂberprĂŒfen der VerfĂŒgbarkeit von USVs und Batterien an kritischen Knotenpunkten
- alle Daten analysieren
Basierend auf den Daten aus der Vorbereitungsphase habe ich ein grobes logisches Schema erstellt:

Als nĂ€chstes, im Sinne eines modularen Ansatzes, mĂŒssen die Ebenen und Module des Unternehmens hervorgehoben werden:
Die Grenzen (Edge) werde ich in diesem Artikel nicht behandeln, aber ich möchte kurz die grundlegenden Thesen zu jedem der Campus-Module wiederholen:- Zugang â auf dieser Ebene sollte sichergestellt werden:
- die notwendige Anzahl an Ports fĂŒr den Netzwerkzugang der Benutzer
- die Einhaltung von Sicherheitsrichtlinien â Filterung von Datenverkehr und Protokollen
- die Reduzierung von Broadcast-DomÀnen und die Segmentierung des Netzwerks mithilfe von VLANs
- die Implementierung separater VLANs fĂŒr Sprachverkehr
- die UnterstĂŒtzung von QoS
- die UnterstĂŒtzung von PoE-Zugangports
- die UnterstĂŒtzung von IP-Multicast
- die Ausfallresistenz der aufsteigenden Verbindungen zusammen mit der Verteilungsebene (wĂŒnschenswert)
- Verteilung â auf dieser Ebene sollte sichergestellt werden:
- die notwendige Anzahl an Ports fĂŒr den Anschluss von Zugriffsswitches
- Aggregierung und Redundanz von Switch-Verbindungen
- IP-Routing
- Paketfilterung
- die UnterstĂŒtzung von QoS
- die Ausfallresistenz auf der Ebene der Verbindungen, der Hardware und der Stromversorgung (sehr wĂŒnschenswert)
- Kern â sollte gewĂ€hrleisten:
- hohe Geschwindigkeit bei der Paketvermittlung und -routierung
- die erforderliche Anzahl von Ports zum Anschluss von Verteilungsswitches
- UnterstĂŒtzung von IP-Routing und dynamischen Routing-Protokollen mit schneller Netzwerk-Konvergenz
- die UnterstĂŒtzung von QoS
- Sicherheitsfunktionen zum Schutz des Zugangs zu GerÀten und der Steuerungsebene
- Fehlertoleranz auf Hardware- und Stromversorgungsebene (unbedingt erforderlich)
- Das Rechenzentrum - die Netzebene dieses Moduls muss Folgendes gewÀhrleisten:
- hochgeschwindigkeits Verbindungen
- die erforderliche Anzahl von Ports zum Anschluss von Servern
- Redundanz der Verbindungen sowohl zwischen Servern und Rechenzentrums-Switches als auch zwischen Rechenzentrums-Switches und dem Kernnetz (unbedingt erforderlich)
- Redundanz von Hardware und Stromversorgung (unbedingt erforderlich)
- die UnterstĂŒtzung von QoS
Als nĂ€chstes mĂŒssen wir unsere Ports und Verbindungen zĂ€hlen und die Anforderungen festlegen.
Wir haben die Verteilung der Zugangspunkte nach GebĂ€uden erhalten. Nun gilt es, die Anforderungen an die Zugangsebene zu analysieren sowie Anmerkungen zu berĂŒcksichtigen und LösungsansĂ€tze zu skizzieren.
Als NĂ€chstes berechnen wir die Ports und Verbindungen fĂŒr die folgenden Ebenen:
Bei der Berechnung erhielten wir Folgendes:
- Zugangsebene â Es werden 24- und 48-Port-Zugangsswitches benötigt, idealerweise mit 1Gb-Zugangsports und optischen uplink-Ports SFP, die PoE unterstĂŒtzen und eine umfangreiche FunktionalitĂ€t bieten:
- Insgesamt werden sie 504 Zugangsports bereitstellen, was grundsĂ€tzlich den Anforderungen an Ersatzports entspricht, falls entschieden wird, 2 Ports pro Arbeitsplatz â IP-Telefon und Datenport â zu verwenden.
- Es könnte sinnvoll sein, auf jeder Etage einen 48-Port-Switch mit PoE-FunktionalitĂ€t zu verwenden, der die Zugangsports fĂŒr die Anforderungen bereitstellt:
- Reserve â etwa 102 Ersatzports (22 %) in den HauptgebĂ€uden. FĂŒr zusĂ€tzliche GebĂ€ude etwas mehr â 25 %.
- VideoĂŒberwachung
- WLAN
- Verteilungsebene â Erforderlich sind Switches mit einem Portfolio von SFP-Ports von 12 bis 48 Ports, wobei mindestens 2 SFP+-Ports vorhanden sein mĂŒssen, mit der Möglichkeit zur Stapelung und erweiterten FunktionalitĂ€ten sowie redundanten Stromversorgungsmodulen.
- Kernebene â Es werden Hochgeschwindigkeits-Switches mit 12 bis 24 SFP/SFP+-Ports benötigt, die sowohl Stapelung als auch Clusterbildung mit UnterstĂŒtzung fĂŒr MC-LAG ermöglichen. Es sollte erwĂ€hnt werden, dass auch Routing-Mittel zur Lastenverteilung genutzt werden können. Die neuesten Generationen von L3-Switches und Routern unterstĂŒtzen ECMP mit Lastenverteilung ĂŒber 4 und mehr Routen mit identischer Metrik.
- Rechenzentrumsniveau â Es werden Switches mit 8 bis 24 SFP/SFP+-Ports benötigt, die sowohl Stapelung als auch Clusterbildung mit UnterstĂŒtzung fĂŒr MC-LAG ermöglichen.
Das Zielnetzwerkdiagramm sieht letztendlich so aus
Auswahl von Extreme-Switches zur Umsetzung des Projekts
Nun sind wir beim Wesentlichen angekommen â dem Zeitpunkt der Auswahl der Switches fĂŒr die Umsetzung unseres Projekts. FĂŒr das entstandene Zielnetzwerk sind die folgenden Extreme-Switches geeignet:
Niveau
Modell
Ports
BeschreibungKern
x620-16x-Base *x670-G2-48x-4q-Base*
16 x 10GE SFP+
Â
Â
Â
48x10GE SFP+ und 4Ă40 GE QSFP+
FĂŒr die grundlegenden BedĂŒrfnisse des Kerns:- Hochgeschwindigkeitsverbindungen
- erweiterte Routing- und Sicherheitsfunktionen
- Redundanz der Stromversorgung mit zusÀtzlichen Netzteilen
- UnterstĂŒtzung fĂŒr Stapelung und Clusterbildung
Ein Switch der Serie x620 erfĂŒllt die minimalen Anforderungen.
Bei erweiterten Anforderungen an die Anzahl der Ports und ein breiteres Funktionsspektrum sollten Sie die Switches der Serie x670-G2 in Betracht ziehen.Rechenzentrum
x620-16x-Base*
x590-24x-1q-2c*
x670-G2-48x-4q-Base*
16 x 10GE SFP+
Â
Â
Â
24x10GE SFP, 1xQSFP+, 2xQSFP28
Â
Â
48x10GE SFP+ und 4Ă40 GE QSFP+FĂŒr grundlegende Anforderungen im Rechenzentrum:
- Hochgeschwindigkeitsverbindungen
- Redundanz der Stromversorgung mit zusÀtzlichen Netzteilen
- UnterstĂŒtzung fĂŒr Stapelung und Clusterbildung
Ein Switch der Serie x620 erfĂŒllt die minimalen Anforderungen.
Bei erweiterten Anforderungen an die Anzahl der Ports und ein breiteres Funktionsspektrum sollten Sie die Switches der Serien x670-G2 und x590-24x-1q-2c in Betracht ziehen.Verteilung
X460-G2-24x-10GE4-Base*
X460-G2-48x-10GE4-Base*
24x1GE SFP, 8Ă1000 RJ-45, 4x10GE SFP+
Â
Â
Â
48x1GE SFP, 4x10GE SFP+FĂŒr grundlegende Anforderungen an die Verteilung:
- Benötigte Anzahl an optischen Ports
- Redundanz der Stromversorgung mit zusÀtzlichen Netzteilen
- UnterstĂŒtzung fĂŒr Stapelung und Clusterbildung
- Benötigte L3-FunktionalitÀt
Die Switches der Serie x460-G2 eignen sich hervorragend. Vorhandene redundante Netzteile mit der Möglichkeit zur Erweiterung und HinzufĂŒgung von 10G-Ports, CX (zum Stapeln) und QSFP+ machen sie zu idealen Switches fĂŒr die Verteilungsebene mit Ports von bis zu 1 Gb.
ĐŽĐŸŃŃŃĐż
X440-G2-24p-10GE4*
X440-G2-24t-10GE4*
X440-G2-48t-10GE4*
X440-G2-48p-10GE4*
24x1000BASE-T (4 x SFP Combo), 4x10GE SFP+ (PoE Budget 380 W)
Â
24x1000BASE-T (4 x SFP Combo), 4x10GE SFP+
Â
Â
24x1000BASE-T (4 x SFP Combo), 4x10GE SFP+ Kombinationsports
Â
48x1000BASE-T (4 x SFP Combo), 4x10GE SFP+ Kombinationsports (PoE Budget 740 W)FĂŒr ZugangsbedĂŒrfnisse:
- Benötigte Anzahl an Zugangsports
- UnterstĂŒtzung fĂŒr PoE/PoE+
- FunktionalitÀt und Erweiterungsmöglichkeiten der Ports
- zusĂ€tzlicher Bonus in Form von 10Gb Ports âout of the boxâ UnterstĂŒtzung fĂŒr Stacking
Ich empfehle, auf diese Produktreihe zu achten, da sie hinsichtlich der Ports, Leistung und FunktionalitÀt sehr flexibel ist.
*Die Spezifikationen der gewĂ€hlten Switches können im ersten Artikel der Reihe eingesehen werden â
An dieser Stelle könnte ich den Artikel beenden, aber ich möchte zusÀtzlich zwei Aspekte beleuchten, mit denen jeder Ingenieur bei der Erweiterung oder Modernisierung seines Netzwerks konfrontiert wird:
- Arbeiten mit Kabeltrassen â Glasfaser- und Kupferleitungen
- IP-Adressierung
Arbeiten mit Glasfaser
Oben habe ich das Zielschema prĂ€sentiert, das erzielt werden muss. FĂŒr dessen Umsetzung sind folgende Verbindungen fĂŒr die GerĂ€te erforderlich:
Wie aus der Tabelle ersichtlich ist, betrĂ€gt die minimale Anzahl an Fasern, die fĂŒr die GewĂ€hrleistung der Ausfallsicherheit der Netzwerkebenen (Kernmodul, Rechenzentrum und Verteilung in zwei GebĂ€uden) erforderlich sind, â 10 StĂŒck.
In der Phase der Netzwerkcharakterisierung haben wir festgestellt, dass im Kabel zwischen den GebÀuden nur 8 Fasern vorhanden sind. Was kann man in einer solchen Situation tun?
Ich werde einige Lösungen vorschlagen:
- Der erste naheliegende Schritt besteht darin, die freien Fasern im Kabel zwischen GebĂ€ude 1 â Block 1 und Block 1 â GebĂ€ude 2 zu nutzen (wie aus der Tabelle ersichtlich, werden nur 2 von 8 Fasern in jedem Kabel verwendet). Dazu genĂŒgt es, optische Patchfelder zwischen den Verteilern in Block 1 zu installieren und gegebenenfalls SFP-Module mit einem entsprechenden optischen Budget zu verwenden.
- Der zweite Schritt ist die mögliche Anwendung der CWDM-Technologie â die Verdichtung von TrĂ€gerspektren innerhalb einer einzelnen Faser. Diese Technologie ist wesentlich gĂŒnstiger als DWMD und recht einfach umzusetzen. Dabei werden hauptsĂ€chlich Anforderungen an die QualitĂ€t der optischen Fasern und an SFP/SFP+ Transceiver mit spezifischer LĂ€nge und Budget gestellt. Wie ich bereits in einem vorherigen Artikel erwĂ€hnt habe, kann die FĂ€higkeit der Switches, Transceiver von Drittanbietern zu erkennen, unser Leben erheblich erleichtern und die Investitionskosten fĂŒr den Bau zusĂ€tzlicher optischer Kabel senken.
- Im dritten Schritt sollte man die Möglichkeit in Betracht ziehen, die Fasern durch die Verlegung zusÀtzlicher optischer Kabel zu erweitern.
Als NÀchstes betrachten wir die Anzahl der Fasern zwischen den GebÀuden mit installierten Verteilungsswitches und zusÀtzlichen GehÀusen 2-10. Auch hier ist die Situation nicht eindeutig:
- Erstens fehlen die Fasern, um unser Zielschema umzusetzen â fĂŒr jeden Switch sind 2 Fasern vorgesehen (wie wir uns erinnern, haben wir Kabel mit 4 Fasern fĂŒr jedes GehĂ€use).
- Zweitens, selbst wenn ausreichend Fasern zwischen den GebÀuden vorhanden sind, werden innerhalb der GehÀuse MMF-Fasern verwendet, die es uns nicht ermöglichen, einfach SMF- und MMF-Fasern zu verbinden (ich spreche von Entfernungen zwischen den GebÀuden von mehr als 300-400 Metern).
In solchen FÀllen können die folgenden Optionen in Betracht gezogen werden:
- Jeden Switch mit SMF-Fasern ausstatten:
- Wenn der Abstand es zulĂ€sst, können zusĂ€tzliche lange Patchkabel zwischen den Switches verlegt werden. FrĂŒher haben wir Patchkabel mit einer LĂ€nge von 30-50 m verwendet.
- Ein relativ gĂŒnstiges, niederkapazitives optisches SMF-Kabel zwischen den SchrĂ€nken verlegen.
- Im Ă€uĂersten Fall verschiedene SMF-MMF-Umsetzer verwenden.
- Um die verwendeten Fasern zwischen den GebÀuden zu minimieren, kann man:
- Nutzen Sie die FunktionalitĂ€t der Stacking von X440-G2 Access-Switches â dabei verwenden Sie jeweils 1 SMF-Faser zu jedem Switch auf der Etage, wodurch anstelle von 6 Fasern und Ports nur 3 Fasern und Ports auf jeder Seite benötigt werden.
- Verwenden Sie 2 Fasern, um den ersten Switch im Zweig und den letzten zu verbinden. Aggregieren Sie die Links an den Grenz-Access-Switches und nutzen Sie STP-Protokolle in dem entstandenen Ring.
IP-Adressierung
Hier werde ich eine Beispielrechnung fĂŒr die Adressierung in unserem Schema prĂ€sentieren.
Momentan haben wir mehrere B-Klassen-Netze â 172.16.0.0/16. Bei der Berechnung des IP-Adressraums werde ich mich an folgenden Ăberlegungen orientieren:
- 4 Bits des zweiten Oktetts werden die GebĂ€ude kennzeichnen â 172.16.0.0/12.
- Das 3. Oktett wird die Etagenzahl im GebÀude kennzeichnen.
- Das 3. Oktett = 255 wird fĂŒr point-to-point Verbindungen der GerĂ€te und das Management-Netzwerk reserviert.
- Ein Management-VLAN pro Etage zur Verwaltung der Switches.
- Ein Benutzer-VLAN pro Switch (im Durchschnitt 24 Ports).
- Ein Voice-VLAN pro Switch (im Durchschnitt 24 Ports).
- Ein VLAN fĂŒr das VideoĂŒberwachungssystem pro Etage.
- Ein VLAN fĂŒr Wi-Fi-GerĂ€te pro Etage.
Ich habe ungefÀhr solche Tabellen erstellt:
In der obigen Tabelle habe ich eine beispielhafte Zuordnung von Netzwerken zu GebÀuden und Etagen auf der einen Seite sowie zu Netzwerken (Benutzer-, Verwaltungs- und Dienstnetzen) auf der anderen Seite dargestellt.
TatsĂ€chlich ist die Wahl des privaten Netzes 172.16.0.0/12 nicht optimal, da sie die Anzahl der möglichen Netzwerke (von 16 auf 31) fĂŒr GebĂ€ude einschrĂ€nkt. AuĂerdem gibt es auch externe BĂŒros, die ebenfalls Netzwerkblöcke benötigen. Eine möglicherweise bessere Option könnte die Verwendung von 10.0.0.0/8-Netzen sein oder eine gemeinsame Nutzung von 172.16.0.0/12-Netzen (zum Beispiel fĂŒr interne Zwecke und Server) und 10.0.0.0/8 (fĂŒr Benutzer-Netzwerke).
Insgesamt ist der Ansatz zur Zuweisung von IP-Netzen ebenfalls modular und es ist wĂŒnschenswert, die Regeln zur Aggregation von Subnetzen in ein Summary-Netz auf den Verteilungsebenen sowie auf den Grenzroutern in den AuĂenstellen zu befolgen. Dies geschieht aus verschiedenen GrĂŒnden:
- zur Minimierung der Routing-Tabellen auf Routern
- zur Minimierung des Dienstverkehrs von Routing-Protokollen (in allen möglichen Update-Nachrichten, wenn untergeordnete Subnetze nicht verfĂŒgbar sind)
- zur Vereinfachung der Verwaltung und besseren Lesbarkeit von L3-Netzwerken
Es ist wichtig zu beachten, dass die Leistung moderner Router viel höher ist als vor 15 bis 20 Jahren. Sie können gröĂere Routing-Tabellen im Arbeitsspeicher halten, und das Preis-Leistungs-VerhĂ€ltnis der KommunikationskanĂ€le hat sich im Vergleich zur Zeit des hĂ€ufigen Einsatzes von E1/T1-Strömen (G.703) verbessert.
Fazit
Freunde, in diesem Artikel habe ich versucht, die grundlegenden Prinzipien des Designs von Campusnetzwerken so kurz wie möglich zu erlÀutern. Ja, der Inhalt ist ziemlich umfangreich, und das, obwohl ich Themen wie die folgenden nicht behandelt habe:
- die Organisation der Unternehmensgrenze (das ist eine eigene Geschichte mit eigenen Switches, Border-Routern, Firewalls, IPS/IDS-Systemen, DMZ, VPN und anderen Komponenten)
- die Organisation von Wi-Fi-Netzen
- die Organisation von VoIP-Netzen
- die Organisation von Rechenzentren
- Sicherheit (das ist ebenfalls ein eigenes Universum, das in Umfang und Anforderungen der Planung der reinen Netzwerk-Infrastruktur nicht nachsteht und manchmal sogar ĂŒbertrifft)
- Energieversorgung
- die Liste könnte noch weiter fortgesetzt werden
Die Planung und der Aufbau eines Unternehmensnetzwerks sind in der Tat eine komplexe Aufgabe, die viel Zeit und Ressourcen erfordert.
Ich hoffe jedoch, dass Ihnen mein Artikel hilft, die Grundlagen zu verstehen und diese Herausforderung anzugehen.
Dies ist bei weitem nicht der letzte Artikel ĂŒber , also bleiben Sie dran fĂŒr Updates (, , , )!
- Telekommunikation:
- Kabelsystem zwischen den GebÀuden:
- Ein dreistufiges Netzwerk setzt sich zusammen aus:
Quelle: habr.com







