Die Komplexität des Archivierens im Netz steigt: Wayback Machine und Wikimedia haben einen Mangel an HDD-Speicher.

Krisen bei der Datenspeicherung: Wie steigende Preise für Speicherlaufwerke die größten Archivprojekte bremsen

Speicherlaufwerke werden immer teurer und knapper, was die Arbeit von Organisationen erschwert, die täglich enorme Mengen an Informationen aus dem Internet sichern.

1. Warum steigen die Preise
* Festplatten (HDD) kosten jetzt dreimal so viel wie früher.
* Die steigende Nachfrage großer Unternehmen und Cloud-Anbieter hat die Hersteller gezwungen, die Lieferungen zu reduzieren, was zu einem Mangel geführt hat.

2. Wie es das Internet Archive betrifft
KennzahlWertSpeicherplatz~210 PB täglicher Datenstrom (Wayback Machine)~100 TB
* Künstliche Intelligenz erhöht die Belastung: Modelle werden mit riesigen Datensätzen trainiert, die oft aus Archiven stammen.
* Ideale Speicherlaufwerke – 28–30 TB HDD – sind kaum erhältlich oder kosten überhöhte Preise.
* Die Organisation muss Sponsoren suchen und erhält lediglich Ratschläge aus der Community.

3. Probleme bei Wikimedia
* Auf der Plattform gibt es mehr als 65 Millionen Artikel – das erfordert große Rechenressourcen und ein sorgfältig verteiltes Budget.
* Schwierigkeiten entstehen bei:
* dem Kauf von Speicher und Laufwerken;
* der Lieferung von Servern;
* der Planung zukünftiger Bestellungen.

4. Komplexität der Archivierung
* Große KI-Sprachmodelle nutzen enorme Datensätze, die manchmal illegal beschafft werden.
* Website-Betreiber blockieren den Zugang zu ihren Ressourcen, ohne zwischen „Böswilligen“ und „rechtmäßigen Diensten“, die Daten zum Bildungszweck sammeln, zu unterscheiden.
* Infolgedessen:
* Kleine Enthusiasten müssen ihre Arbeit reduzieren oder einstellen;
* Es wird auf eine Stabilisierung der Speicherpreise gewartet.

Ergebnis
Die steigenden Kosten und der Mangel an HDD schaffen erhebliche Hindernisse für gemeinnützige Archive. Ohne neue Finanzierungsquellen und kostengünstigere Technologien könnte die Bewahrung der Internetgeschichte praktisch unmöglich werden.