Geschrieben von: Zhou Xiaoyan
Quelle: Tencent Technology
James Wardy, Chefingenieur im Ashburn-Rechenzentrum von Digital Realty. Von KI verarbeitete Bilder
James Waddy geht täglich 30.000 Schritte.
Sein Arbeitsplatz befindet sich in einem mehr als 90.000 Quadratmeter großen Rechenzentrum in Ashburn, Virginia. Jeden Tag überprüft er die Lüftungsgeräte, den Serverraum, die Kanäle, Kabel und Dachkondensatoren. Manchmal muss er nach Brandgerüchen riechen, nach Anomalien in den Kanälen tasten und nachsehen, ob Vögel an der Ausrüstung gepickt haben.
Das hört sich vielleicht nicht so an, als hätten sie viel mit KI zu tun, aber genau hier landet die Rechenleistung der KI.
Wenn man im vergangenen Jahr über KI-Infrastruktur sprach, konzentrierte man sich mehr auf GPUs, Kraftwerke, Transformatoren, Grundstücke, Finanzierung und Hunderte Milliarden Dollar an Investitionsausgaben. Aber wenn Sie tatsächlich das Rechenzentrum betreten, werden Sie feststellen, dass es sich nicht nur um eine Computerindustrie handelt, sondern auch um ein riesiges physisches System, das einen kontinuierlichen Betrieb rund um die Uhr erfordert.
Derzeit sind in den Vereinigten Staaten etwa 2.700 Rechenzentren in Betrieb. Da der Bedarf an Rechenleistung durch KI steigt, werden ständig neue Anlagen gebaut und die Anforderungen an Stromversorgung, Kühlung, Netzwerk und andere Systeme werden immer höher.
Hinter diesen Systemen ist eine Gruppe von Menschen erforderlich, die sie über einen langen Zeitraum bewachen. Sie sind möglicherweise keine Ingenieure, die KI-Modelle entwickeln, und sind auch nicht für das Training großer Modelle verantwortlich. Sie müssen jedoch sicherstellen, dass das Gebäude, in dem sich der Server befindet, nicht aufgrund von Überhitzung, Stromausfall, Geräteausfall oder einem Glasfaserproblem stillsteht.
In gewisser Weise ähneln sie eher „Kindermädchen“ im KI-Zeitalter.
Inspektion in 30.000 Schritten: Im Rechenzentrum gibt es keine „kleinen Probleme“.
Wardy ist der Chefingenieur im Ashburn-Rechenzentrum von Digital Realty, wo er drei Jahre lang gearbeitet hat.
Das Rechenzentrum von Digital Realty in Ashburn, West-Washington
Er hat einen Abschluss in Betriebswirtschaftslehre und arbeitete zuvor im Vertrieb eines HVAC-Unternehmens, wo er sich von der Nachtschicht bis zur Leitung von Dutzenden von Ingenieuren hocharbeitete und sich selbst als „General“ des Teams bezeichnete.
Seine Hauptaufgabe besteht darin, sicherzustellen, dass die kritische Infrastruktur des Rechenzentrums weiterhin funktioniert. Die täglichen Inspektionen beginnen im Klimaraum, wo riesige Klimaanlagen kontinuierlich kalte Luft an das Rechenzentrum liefern.
Auf der Rechenzentrumsmietausrüstung von Digital Realty Ashburn sind keine Kundenlogos oder -namen angebracht
Weiter oben sieht die Datenhalle ein wenig wie eine riesige Umkleidekabine aus, mit Reihen von Servern, die in Schränken oder Käfigen untergebracht sind und von verschiedenen Unternehmen gemietet werden. Das Logo des Kunden ist hier nicht zu sehen und man erkennt selten, wem der Server gehört. Die Ausrüstung von Wettbewerbern kann gleichzeitig in einer Reihe von Schränken laufen. Je näher man am Server ist, desto lauter ist der Lärm und die Arbeiter müssen Ohrstöpsel tragen.
Ausrüstung im Digital Realty Ashburn Data Center
Auf dem Weg zum Dach überprüft Wardy die Kondensatorreihen auf Fehlfunktionen und hält Ausschau nach Schäden durch Vögel. Als er auf dem Dach stand, konnte er in der Ferne die Kräne sehen, an denen das Rechenzentrum eines anderen Unternehmens gebaut wurde.
„Es ist schön hier oben“, sagte Wardy. „Solche Inspektionen gefallen mir.“
Das Rechenzentrum ist seit neun Jahren in Betrieb und seine Gänge sind so lang, dass einige Techniker mit Rollern unterwegs sind. Im Inneren befinden sich hoch aufragende Kabelkäfige sowie Feldbetten und Duschen für das Personal, das bei extremen Wetterbedingungen stationiert ist.
An manchen Tagen können bis zu 120 Personen vor Ort sein, davon etwa 50 reguläre Mitarbeiter und der Rest sind Vertragssicherheitspersonal und Kundenpersonal. Dennoch bleiben unter der Woche zahlreiche Zimmer in dem riesigen Gebäude leer.
Obwohl Wardys Position im Hinblick auf den spezifischen Arbeitsinhalt als „Ingenieur“ bezeichnet wird, ist sie nicht dasselbe wie die eines F&E- oder Designingenieurs im herkömmlichen Sinne.
Winston Smith, ein Analyst im Technologiebereich, wies darauf hin, dass diese Art von Position eher einem Critical Facility Technician (CFT) oder einem Rechenzentrums-Betriebs- und Wartungstechniker (DCO Technician) ähnelt. Die Kernaufgaben sind Vor-Ort-Inspektionen, Infrastrukturwartung und Notfallmaßnahmen.
Er glaubt, dass Wardy sich täglich auf sein Gehör, seinen Geruchssinn und seine Berührung verlässt, um Anomalien zu erkennen, und im Grunde genommen als „menschlicher Sensor“ für das Rechenzentrum fungiert: Er entdeckt mögliche Probleme mit mechanischen, elektrischen oder Kühlsystemen, bevor das Überwachungssystem einen Alarm ausgibt oder sogar bevor die Ausrüstung tatsächlich versagt.
Diese Art von Arbeit mag trivial erscheinen, aber es darf kein Detail übersehen werden, denn was Rechenzentren am meisten fürchten, sind Unfälle. Das unerwartete Eintreffen großer Geräte, ein geringfügiger Systemausfall oder sogar eine scheinbar unauffällige Anomalie können sich auf die Redundanz- und Wartungspläne einer Anlage auswirken.
Für Wardy sind die sogenannten „guten Tage“ daher nicht die Frage, wie viele große Probleme gelöst wurden, sondern dass keine Probleme aufgetreten sind.
Wardie ging über den erhöhten Boden, wo die Kammern darunter Luft zirkulierten ließen, um die Wärme von den Servern abzuleiten. Während er ging, überprüfte er die Ausrüstung. Keine ungewöhnlichen Geräusche, keine ungewöhnlichen Gerüche, alles ist normal.
Das wollen Rechenzentrumsbetreiber sehen.
Six Nines: Eine Glasfaser, die nur ein Zehntel der Dicke eines Haares hat, kann nicht schief gehen
Was das Rechenzentrum anstrebt, ist Stabilität bis zur Langeweile.
Digital Realty schätzt, dass die Betriebszeit seines Rechenzentrums 99,999 % erreicht hat, und hofft derzeit, diese noch weiter auf 99,9999 % zu steigern. Es sieht so aus, als gäbe es nur noch eine „9“, aber die entsprechende jährliche Ausfallzeit verkürzt sich von ca. 6 Minuten auf ca. 30 Sekunden.
Um diese zehn Sekunden zu gewinnen, muss jede Verbindung im Rechenzentrum zuverlässig genug sein.
Was Jeff Hansen, ein Rechenzentrumstechniker bei CC&N, jeden Tag sieht, ist das kleinste Glied: Glasfaser.
Der Kerndurchmesser einer Singlemode-Faser beträgt nur 8 bis 9 Mikrometer und ein menschliches Haar ist etwa 75 Mikrometer dick. Wenn zwei optische Fasern verbunden werden, muss das Fusionsspleißgerät den Faserkern mit 1000-facher Vergrößerung ausrichten und dann das Glas durch einen Lichtbogen miteinander verschmelzen. Hansen nennt es „Mikroschweißen“.
„Mit optischen Fasern zu arbeiten ist wie mit Lasern zu spielen“, sagte er. „Eine optische Faser ist ein mikroskopisch kleiner Glasstrang, der unglaublich viele Informationen trägt. Das fasziniert mich.“
Im Ashburn-Rechenzentrum von Digital Realty
In einem Raum eines Hyperscale-Rechenzentrums können Tausende solcher Verbindungen vorhanden sein. Während der Installation wird jede Faser einzeln verlegt, terminiert und getestet. Wenn ein Test fehlschlägt, kann es dafür Millionen von Gründen geben, und Techniker müssen sich auf Erfahrung und Prozesse verlassen, um Schritt für Schritt zu untersuchen.
Verkabelung von Rechenzentren
Daher ist „Winging“ im Rechenzentrum selten erlaubt. Bevor Hansens Team jedes Mal vor Ort ist, treffen sie sich, um die Arbeit, die Werkzeuge und den Umfang des Projekts zu bestätigen. Die verantwortliche Person muss ein Briefing vorbereiten, um im Voraus zu verstehen, wie sich der Veranstaltungsort seit dem letzten Besuch verändert hat.
Denn Rechenzentren verändern sich schnell. Ein Standort, der sich vor einem halben Jahr noch im Bau befand, ist möglicherweise bereits voll funktionsfähig. Zugriffsrechte, Betriebsprotokolle und Risikostufen können sich ändern.
„Man kann die Arbeit im Rechenzentrum nicht improvisieren“, sagte Hansen. „Es erfordert viel Planung, um alles richtig zu machen, und das beginnt, bevor wir überhaupt einen Fuß auf die Baustelle setzen.“
Das Gleiche gilt für die Zugangskontrolle. Der Zugang zu Hyperscale-Rechenzentren erfordert häufig Ausweiskontrollen, Identitätsüberprüfungen und sogar Iris-Scans. Pappe und Papier können aufgrund der Staubentwicklung verboten sein, ebenso können Speichergeräte wie USB-Sticks verboten sein.
Eine Aufgabe, die nur fünf Minuten zu dauern scheint, kann nicht erledigt werden, sobald Sie sie sagen. Der Austausch von Geräten, das Hinzufügen von Systemen, das Verlegen von Kabeln und die Durchführung von Wartungsarbeiten erfordern allesamt eine vorherige Anwendung, Risikobewertung, Terminplanung und Koordination mit anderen Teams.
Jede Ausnahme muss aufgezeichnet werden. Kleine Stromschwankungen, flackernde Lichter, ungewöhnliche Geräusche von Kühlgeräten oder sogar eine kleine Wasserpfütze auf dem Boden können zu meldepflichtigen Vorfällen werden.
Für Elektroinstallateure bedeutet „Sicherheit“ sogar drei Bedeutungen gleichzeitig: Sie können nicht verletzt werden, ihre Kollegen können nicht verletzt werden und die Ausrüstung kann nicht beschädigt werden. Denn in einem bereits in Betrieb befindlichen Rechenzentrum kann der Umzug einer funktionierenden Glasfaser direkte Folgen haben.
Was das Rechenzentrum wirklich braucht, sind keine Helden vor Ort, sondern eine Reihe von Prozessen, die möglichst nicht auf Helden angewiesen sind.
KI macht „Nanny“ zum beliebten Beruf: Hinter dem hohen Gehalt steckt der Talentmangel
In der Vergangenheit waren Rechenzentren eine relativ unsichtbare Branche. Jetzt hat die KI es ins Rampenlicht gerückt.
Dem Branchendatenanbieter Data Center Map zufolge gibt es in den Vereinigten Staaten derzeit etwa 2.700 in Betrieb befindliche Rechenzentren, fast 400 befinden sich im Bau und mindestens 1.500 befinden sich in der Planungsphase. Ashburn, wo Wardy ansässig ist, liegt in der „Data Center Alley“ (Data Center Alley), etwa eine Autostunde außerhalb von Washington, D.C.
Das Rechenzentrum selbst ist keine arbeitsintensive Branche. Für den langfristigen Betrieb einer Anlage sind in der Regel nur Dutzende bis Hunderte von Mitarbeitern erforderlich. Wenn jedoch Tausende von Anlagen gleichzeitig gebaut und betrieben werden, wächst der Bedarf an Ingenieuren, Technikern, Wartungspersonal und Projektmanagern schnell.
Auf der Rekrutierungswebsite Indeed haben in diesem Jahr mehr als 1 Million Arbeitssuchende nach Stellen im Bereich Rechenzentren gesucht, und das Suchvolumen hat sich im August im Vergleich zu Anfang 2022 verachtfacht.
Untersuchungen von Indeed zeigen außerdem, dass die Gehälter von Stundenlohnarbeitern in Rechenzentren, die Wartungs- und Installationsarbeiten durchführen, etwa 42 % höher sind als bei vergleichbaren Positionen in anderen Branchen. Das Jahresgehalt eines Rechenzentrums-Projektmanagers beträgt etwa 115.000 US-Dollar. Von Digital Realty bereitgestellte Informationen zeigen, dass das Jahresgehalt seiner Einstiegsingenieure etwa 66.000 US-Dollar beträgt und das Durchschnittsgehalt erfahrener Ingenieure 120.000 US-Dollar übersteigen kann.
Auch Technologiekommentator Evan Kirstel bemerkte diese Gehaltsänderung. Er sagte in den sozialen Medien, dass der Bau von Rechenzentren höhere Einkommen für Positionen wie Elektriker, Techniker, Heizungs-, Lüftungs- und Klimatechnik und Sicherheit mit sich bringe und dass Investitionen in die KI-Infrastruktur in bestimmte Beschäftigungsmöglichkeiten für Arbeiter umgewandelt würden.
Was aber wirklich knapp ist, sind Menschen, die mit der komplexen Infrastruktur umgehen können.
Brandi Galvin Morandi, Chief People Officer des digitalen Infrastrukturunternehmens Equinix, sagte, dass Fachkräfte in den Bereichen elektrische Systeme, Netzwerktechnik und Kühlsysteme sehr gefragt seien.
Im Rechenzentrum von Ashburn gibt es eine Mischung aus Angestellten- und Arbeiterjobs. Jemand ist für die Sicherheit verantwortlich, jemand ist für die Konfiguration der Kundenverkabelung verantwortlich, jemand kauft Materialien ein und es gibt Ingenieure, die die gesamte Anlage überwachen. Dieser Jobmix ist in anderen Rechenzentren in den Vereinigten Staaten ungefähr ähnlich.
Das Problem besteht darin, dass die Wachstumsrate der Talente nicht mit der Geschwindigkeit des Anlagenbaus mithalten kann. Cindy Fiedelman, Chief Human Resources Officer bei Digital Realty, sagte, dass diese Einrichtungen rund um die Uhr in Betrieb sein müssen, daher benötigen die Praktiker sowohl technische Ausbildung als auch Sicherheitsdisziplin und praktische Erfahrung, und der Nachschub an solchen Talenten sei langsamer als die Expansionsrate der Branche.
Infolgedessen begannen Community Colleges, Kurse zum Thema Rechenzentren anzubieten, und große Technologieunternehmen begannen, in Schulungsprogramme zu investieren. In Virginia hat das Northern Virginia Community College mit Unterstützung des privaten Sektors ein Stellenprogramm für Rechenzentren gestartet. Auch Technologieunternehmen, darunter Meta, sind an der Entwicklung qualifizierter Arbeitskräfte beteiligt.
Michael E. Webber, Autor der Website „Energy 101“ und Professor an der University of Texas, glaubt, dass KI-Rechenzentren Arbeitsplätze für Arbeiter schaffen und möglicherweise auch einige Arbeitsplätze für Angestellte verdrängen, Angestellte können jedoch relativ leichter in andere Berufe wechseln.
Digital Realty betreibt derzeit mehr als 300 Rechenzentren auf sechs Kontinenten. In Einrichtungen wie Ashburn vermietet das Unternehmen Flächen an große Technologieunternehmen, die Rechenleistung benötigen, darunter Oracle, Meta und IBM.
Die Server stammen möglicherweise von unterschiedlichen Firmen und die Ingenieure möglicherweise aus unterschiedlichen Teams, aber letztendlich stehen alle vor der gleichen Anforderung: Das System kann nicht gestoppt werden.
Es gibt immer mehr Rechenzentren und es wird immer schwieriger, eine „Nanny“ zu sein.
Der durch KI ausgelöste Bauboom hat Rechenzentren von einer Infrastruktur hinter den Kulissen zu einer Branche gemacht, die zunehmend für die Öffentlichkeit sichtbar ist.
Don Atkinson, 53, arbeitet seit etwa 14 Jahren bei Digital Realty und hat auch die Wartung von Notstromsystemen durchgeführt. Heute betreut er junge Ingenieure.
Don Atkinson, Ashburn Data Center Manager, Digital Realty
Was ihm Unbehagen bereitete, war die veränderte Haltung der Außenwelt. Er sagte auch, dass er KI nicht sehr oft einsetzt. „Es ist jetzt eine seltsame Zeit.“
Ein anderer Mitarbeiter, Malcolm Mosely, war direkter: „Ich bin nur hier, um meinen Job zu machen.“
Malcolm Moseley, Mitarbeiter des Rechenzentrums von Digital Realty Ashburn
Für die Branche war es jedoch schwierig, sich aus dem Getümmel herauszuhalten. In Atlanta beantragt Digital Realty eine Ausnahme von einem örtlichen Bauverbot. Das Verbot schränkt den Bau von Rechenzentren in der Nähe von Verkehrsknotenpunkten ein, wo das Unternehmen hofft, ein 500-Millionen-Dollar-Rechenzentrum zu bauen. Anwohner haben sich gegen das Projekt ausgesprochen, das derzeit auf Eis liegt.
Ähnliche Kontroversen entstehen beim Ausbau von Rechenzentren. Dem Geschehen in diesen Gebäuden wurde in der Vergangenheit kaum Beachtung geschenkt. Heutzutage stehen Energieverbrauch, Wasserverbrauch und Auswirkungen auf die Gemeinschaft im Mittelpunkt der öffentlichen Diskussion.
Die Branche wird neu definiert. Es ist nicht mehr nur das Backend des Internets, sondern auch die Infrastruktur des KI-Zeitalters. Hohe Gehälter, heiße Neueinstellungen, Kontroversen in der Gemeinde, Energiedruck – alles geschieht gleichzeitig. Doch hinter all dem Lärm verbirgt sich immer noch eine Gruppe stiller Ingenieure, die im Rhythmus von 30.000 Schritten pro Tag den Betrieb der gesamten digitalen Welt aufrechterhält.
Gutes Wetter oder Wetter, bei dem nichts passiert. Gute Tage und Tage, an denen nichts passiert. Das wird sich wahrscheinlich nie ändern.