Die offizielle Infrastruktur des Linux-Kernels gerät durch automatisierte Scraper und KI-Trainingsprogramme unter massiven technischen Druck. Konstantin Ryabitsev, langjähriger Systemadministrator für git.kernel.org, machte die drastischen Belastungen öffentlich, die automatisierte Crawler auf den Servern verursachen. Entwickler und Blogger Simon Willison griff diese Enthüllungen am 7. September 2026 unter dem Titel Creepy crawlies auf und trug die Problematik in eine breite Fachöffentlichkeit. Der Vorgang offenbart eine wachsende Asymmetrie zwischen frei zugänglichen Infrastrukturen der Open-Source-Gemeinschaft und dem unersättlichen Ressourcenhunger automatisierter Datenbeschaffer.
Die von Ryabitsev vorgelegten Messwerte belegen ein dramatisches Missverhältnis bei der Auslastung der Serverkapazitäten. Über fünf weltweit verteilte Rechenknoten hinweg müssen permanent 14 vollständige CPU-Kerne bereitgestellt werden, nur um die Anfragen der Bots zu bedienen. Diese gesamte Rechenleistung verpufft ausschließlich darin, Git-Commits und Quellcode-Änderungen als dynamische HTML-Seiten für automatisierte Scraper zu rendern. Die Bots beanspruchen damit inzwischen mehr Rechenleistung als sämtliche legitimen Zugriffe menschlicher Entwickler und gewöhnliche Git-Clone-Operationen rund um den Globus zusammen.
Die Ursache für diesen immensen Rechenaufwand liegt in der technischen Beschaffenheit webbasierter Versionskontrollsysteme. Während menschliche Entwickler ihren Code üblicherweise über das hochgradig optimierte Git-Protokoll abrufen, steuern KI-Scraper primär die Weboberflächen an. Die Bots durchforsten automatisiert und rekursiv jede einzelne Code-Änderung, jeden Commit-Verlauf und sämtliche Unterverzeichnisse über HTTP-Aufrufe. Bei jedem dieser Abrufe muss der Server die jeweiligen Dateiunterschiede in Echtzeit parsen und in lesbare Webseiten umwandeln, was die Prozessoren permanent an den Anschlag bringt.
Die Veröffentlichung durch Ryabitsev und Willison hat eine intensive Debatte über den Schutz gemeinschaftlich getragener Open-Source-Infrastrukturen entfacht. Zahlreiche Betreiber freier Plattformen schlagen Alarm, weil unbezahlte Server und freiwillig betriebene Dienste die Kosten für das massive KI-Scraping nicht länger abfedern können. Simon Willison betonte in seiner Analyse, wie stark diese automatisierten Zugriffe die eigentliche Entwicklungsarbeit verdrängen und legitime Zugriffe behindern. In der Community wächst der Unmut darüber, dass kommerzielle Modellbetreiber und Scraping-Dienste erhebliche Infrastrukturkosten auf gemeinnützige Projekte abwälzen.
Als direkte Konsequenz der Enthüllungen formiert sich in der Entwicklergemeinschaft eine Welle restriktiver Gegenmaßnahmen. Die Betreiber von git.kernel.org und anderen zentralen Software-Archiven diskutieren nun die Einführung von striktem Rate-Limiting und aggressiven Bot-Sperren. Bislang galt in der Open-Source-Welt das Grundprinzip, Quelltexte ohne Barrieren, ohne Registrierung und ohne technische Restriktionen bereitzustellen. Die rücksichtslose Arbeitsweise automatisierter Crawler zwingt Administratoren jedoch dazu, offene Repositorien mit Schutzwällen gegen automatisierte Zugriffe zu versehen.
Die Überlastung von git.kernel.org verdeutlicht, dass die Expansion von KI-Agenten und Web-Scrapern an harte infrastrukturelle Grenzen stößt. Wenn zentrale Plattformen für die globale Software-Entwicklung durch Bot-Traffic lahmgelegt werden, gerät das Fundament moderner Informationstechnik ins Wanken. Der Vorfall zwingt Entwickler und politische Entscheidungsträger gleichermaßen dazu, die Spielregeln für das automatisierte Abgreifen von Daten neu zu definieren. Für die Betreiber freier Softwareprojekte steht der Erhalt ihrer offenen Arbeitskultur auf dem Spiel, wenn sie gezwungen sind, sich dauerhaft gegen automatisierte Überlastung zu verteidigen.