Der FiveThirtyEight Index nutzt einen Crawler in Python, um über die CDX-API der Wayback Machine 21.350 eindeutige URLs zutage zu fördern. Dabei umgeht er die Weiterleitung der gesamten Website, die ABC News Anfang 2025 eingerichtet hat (Quelle: GitHub, Editor & Publisher).
Das Versprechen
Ben Welsh, News Applications Editor bei Reuters, hat ein durchsuchbares Verzeichnis der 16-jährigen Geschichte von FiveThirtyEight gebaut, nachdem Disney das Erbe der Publikation praktisch ausgelöscht hatte. Es bietet eine aufgeräumte Oberfläche auf Basis von Svelte für Inhalte, die die Konzerneigentümer hinter einer Weiterleitung auf ABC News Politics zu begraben versuchten. Datenjournalisten und Backend-Ingenieure nutzen es derzeit, um historische Datensätze wiederherzustellen, die durch den „Link-Verfall“ von 2025 als verloren galten.
Unter der Haube
Die technische Architektur ist einfach: Ein Crawler in Python greift auf die CDX-API des Internet Archive zu, um die Geschichte der Publikation von 2008 bis 2024 abzubilden (Quelle: GitHub). Der Index dient als spezialisierter Verweis und ordnet 21.350 eindeutige Artikel ihren stabilsten archivierten Momentaufnahmen zu (Quelle: Reddit r/fivethirtyeight). Mit einem Svelte-Frontend umgeht Welsh den Ballast der normalen Oberfläche der Wayback Machine. So ist das Archiv erstmals seit dem Ende der ursprünglichen Website durchsuchbar.
Das Tool ist jedoch ein Portal, kein Spiegel. Komplexe, JavaScript-lastige interaktive Inhalte, etwa die berühmten Wahlmodelle von 2016 oder die interaktive Anwendung zu „P-Hacking“, funktionieren teilweise oder gar nicht (Quelle: HN). Diese alten Inhalte scheitern häufig, weil sie Backend-Skripte oder JSON-Daten aufrufen, die bei den ursprünglichen Crawls nicht erfasst wurden.
Die aktuelle Dokumentation weist erhebliche Lücken auf. Zudem ist der rechtliche Status dieser „Wiederbelebung von Inhalten“ ungeklärt. Es ist unklar, ob Disney aktualisierte robots.txt-Anweisungen erlassen oder das Internet Archive wegen dieser Inhalte rechtlich angegangen hat.
Das Überleben des Tools hängt vollständig von der Infrastruktur des Internet Archive ab. Gerät die Wayback Machine weiter unter rechtlichen Druck oder fällt sie technisch aus, wird der Index zu einem Verzeichnis toter Links. Er ist eine fragile Erschließungsschicht auf einem unbeständigen Speichermedium.
Unsere Einschätzung
Der FiveThirtyEight Index ist ein notwendiges Stück digitaler Archäologie, macht aber auch deutlich, wie prekär modernes Web-Engineering ist. Als Backend-Analyst finde ich die Abhängigkeit von der CDX-API der Wayback Machine zugleich elegant und gefährlich dünn. Nutzen Sie den Index, um textbasierte historische Daten abzurufen oder frühere Berichterstattung zu überprüfen. Erwarten Sie aber nicht, dass er eine verlässliche Umgebung für alte Datenvisualisierungen bietet. Er ist ein Bibliothekskatalog, nicht die Bibliothek selbst.