ENDE
AEVORIANA

Datenqualität: Warum Herkunft und Auswahl wichtiger sind als reine Menge

KI · Themenbeitrag

Mehr Trainingsdaten bedeuten nicht automatisch bessere KI. Entscheidend ist, welche Inhalte enthalten sind, welche fehlen und wie sie ausgewählt wurden. Datensatzdokumentation macht solche Entscheidungen sichtbar. Offene Korpora wie Dolma ermöglichen zusätzliche Untersuchung, ersetzen aber keine Prüfung auf Eignung, Rechte, sensible Informationen und Verzerrungen im späteren Einsatzgebiet.

Ein Datensatz ist bereits eine Auswahl

Trainingsdaten entstehen nicht neutral durch bloßes Sammeln. Schon die Wahl von Quellen, Sprachen und Zeiträumen legt fest, welche Perspektiven häufig vorkommen. Anschließend verändern Filter und Bereinigung die Zusammensetzung weiter. Die Arbeit Datasheets for Datasets schlägt deshalb systematische Dokumentation vor: Motivation, Herkunft, Zusammensetzung, Erhebungsprozess und empfohlene Nutzung sollen nachvollziehbar werden. Das Allen Institute for AI beschreibt beim Korpus Dolma ebenfalls Ziele, Quellenmischung und Aufbereitung. Solche Angaben helfen, die Verbindung zwischen Daten und Modellverhalten zu untersuchen. Sie garantieren jedoch nicht, dass ein Datensatz für jede Anwendung geeignet ist. Eine Sammlung kann für allgemeine Sprachforschung nützlich sein und zugleich wichtige Fachgebiete, regionale Varianten oder bestimmte Personengruppen unzureichend abbilden. Ohne Kenntnis dieser Auswahl bleibt die Bewertung eines Modells unnötig oberflächlich.

Bereinigung kann Probleme lösen und neue schaffen

Das Entfernen von Dubletten verhindert, dass häufig kopierte Inhalte übermäßig viel Gewicht erhalten. Filter können offensichtlichen Spam oder bestimmte sensible Daten reduzieren. Gleichzeitig enthalten solche Regeln Wertentscheidungen und technische Fehlerrisiken. Ein Filter für vermeintlich minderwertige Sprache könnte ungewöhnliche Schreibweisen oder bestimmte Dialekte benachteiligen. Auch eine klare Quellenbeschreibung sagt noch nicht, dass sämtliche Rechtefragen abschließend geklärt sind. Datenqualität umfasst deshalb mehrere Dimensionen: sachliche Brauchbarkeit, Repräsentation, Aktualität, rechtliche Nutzbarkeit und Schutz betroffener Personen. Diese Ziele können miteinander in Spannung stehen. Eine verantwortliche Dokumentation benennt nicht nur erfolgreiche Bereinigungsschritte, sondern auch bekannte Lücken und mögliche Nebenwirkungen. Gerade offene Datenbestände profitieren davon, wenn Dritte problematische Inhalte melden und Änderungen nachvollziehen können, statt eine einmalige Veröffentlichung als abgeschlossene Qualitätsprüfung zu betrachten.

Was Anwender vor einem Projekt fragen sollten

Für ein konkretes Vorhaben lohnt zunächst eine Bedarfsliste: Welche Sprache, Textsorte und Fachlichkeit muss das Modell beherrschen? Danach wird geprüft, ob die dokumentierten Daten diese Bereiche überhaupt plausibel abdecken. Stichproben sollten nicht nur typische, sondern auch seltene und schwierige Fälle enthalten. Bei eigenen Datensätzen gehören Herkunft, Einwilligungen oder andere Nutzungsgrundlagen sowie Lösch- und Aktualisierungsprozesse in die Dokumentation. Ebenso wichtig ist eine getrennte Testmenge, die nicht unbemerkt in die Entwicklung einfließt. Der Zweck solcher Arbeit ist nicht, perfekte Daten zu behaupten. Sie macht Grenzen früh erkennbar und ermöglicht gezielte Verbesserungen. Ein kleinerer, gut dokumentierter Bestand kann für eine eng umrissene Aufgabe hilfreicher sein als eine riesige Sammlung, deren Zusammensetzung niemand ausreichend erklären oder kontrollieren kann.

Quellen & weiterführende Informationen

Mit KI-Unterstützung aus den genannten Quellen in eigenen Worten erstellt. Forschungsergebnisse, technische Prototypen und gesicherte Erkenntnisse werden im Text unterschieden. Dieser Themenbeitrag ist keine tagesaktuelle Meldung.

Weiter entdecken

Alle Beiträge zu KI