Da KI das Erstellen von Abfragen, Bereinigen und Visualisieren übernimmt, verlagern sich die Best Practices für die Datenanalyse auf das Formulieren der richtigen Fragen und das Validieren der Antworten.
Fragen Sie einen KI-Assistenten, warum der Umsatz im letzten Quartal gesunken ist, und Sie erhalten innerhalb von Sekunden eine Antwort – eine Zahl, ein Diagramm und einen übersichtlichen Absatz, der erklärt, was passiert ist. Ob diese Antwort richtig ist, steht auf einem anderen Blatt. Es ist auch die Frage, die nun darüber entscheidet, ob die Analyse Ihres Teams eine Umsetzung wert ist.
KI hat die Mechanismen der Datenanalyse schnell und günstig gemacht. Das Schreiben von Abfragen, das Verknüpfen von Tabellen, das Bereinigen von Daten und das Erstellen von Diagrammen hat früher den größten Teil der Woche eines Analysten verschlungen. Jetzt dauert das nur noch Momente. Das hat viele Teams dazu verleitet, die Analyse als einen Schritt zu betrachten, den sie komplett aus der Hand geben können.
Aber die Beweise sprechen für Vorsicht. Als Forscher Spider 2.0 entwickelten, einen Benchmark aus echten Unternehmensdatenbanken, hat der beste von ihnen getestete KI-Agent 21,3 % seiner Aufgaben gelöst. Bei einem älteren akademischen Benchmark mit saubereren Daten löste derselben Ansatz 91.2 %.
Was sind also die Best Practices für die Datenanalyse im Zeitalter der KI? Sie konzentrieren sich auf die beiden Enden des Workflows, die die KI nicht übernehmen kann. Formulieren Sie die Frage präzise, bevor die KI die Daten berührt. Validieren Sie die Antwort, bevor jemand danach handelt. Alles dazwischen wird einfacher. Diese beiden Enden werden schwieriger und wertvoller.
Datenanalyse existiert, um die Unsicherheit bei einer Entscheidung zu verringern. Niemand analysiert Abwanderung um ihrer selbst willen. Ein Team analysiert die Abwanderung, weil es entscheiden muss, ob es die Preisgestaltung ändert, das Onboarding überarbeitet oder mehr Kundenerfolgsmitarbeiter einstellt.
Der Prozess umfasst fünf Schritte:
Die Schritte zwei und drei machen den Großteil der Mechanik aus. Jahrzehntelang nahm diese repetitive Arbeit die meiste Zeit in Anspruch, was es leicht machte zu vergessen, dass das Ergebnis in der Regel von den Schritten eins und vier abhing. Eine Abfrage kann fehlerfrei sein und trotzdem die falsche Frage beantworten. Ein Diagramm kann wunderschön sein und trotzdem in die Irre führen. KI hat das einfach viel schwieriger zu ignorieren gemacht.
Der Kern der KI-gestützten Analyse ist Text-to-SQL, wodurch eine einfache englische Frage in eine Datenbankabfrage umgewandelt wird. Fragen Sie, wie viel Umsatz im letzten Quartal von Unternehmenskunden stammte, und ein KI-Tool schreibt die Abfrage für Sie. Es addiert die Auftragsbeträge, verknüpft Aufträge mit Kunden, filtert nach dem Unternehmenssegment und beschränkt die Ergebnisse auf die richtigen Daten. Dann stellt es das Ergebnis grafisch dar, entwirft eine Zusammenfassung und schlägt vor, was als Nächstes gefragt werden sollte.
Das ist ein echter Fortschritt, und deshalb bezeichnen wir KI als einen Co-Analysten, der die menschliche Analyse ergänzt.
Aber sehen Sie sich an, was das Tool bei der Beantwortung dieser Umsatzfrage eigenständig entschieden hat. Vielleicht ging es davon aus, dass „Umsatz“ den Auftragsbetrag vor Rückerstattungen bedeutet. Oder es nahm an, dass „letztes Quartal“ Juli bis September bedeutet, selbst wenn das Unternehmen nach einem Fiskalkalender arbeitet. Es ging davon aus, dass Unternehmenskunden in den Daten als „Enterprise“ und nicht als „ENT“ gekennzeichnet sind. Und es ging davon aus, dass die erste gefundene Bestelltabelle die richtige war. Keine dieser Entscheidungen war korrekt, aber keine davon löste eine Warnung aus. Das Tool gab eine saubere Zahl zurück.
Wenn die Erstellung einer Antwort fast nichts kostet, produzieren Teams viel mehr davon. Eine falsche Antwort kommt genauso schnell und ausgefeilt an wie eine richtige, und sie reist genauso weit. Das Risiko hat sich von der Erstellung der Analyse auf das Vertrauen in sie verlagert. Nichts davon macht die Datenaufbereitung oder Methodenauswahl automatisch. Irgendjemand muss immer noch entscheiden, ob eine Quelle aktuell ist, ob ein Join Datensätze doppelt zählt und ob eine Messung zur Frage passt. KI übernimmt einen größeren Teil des Pfades. Das Urteilsvermögen in jedem Schritt liegt nach wie vor bei den Menschen.
Echte Unternehmensdaten verschlimmern das Problem. Akademische Testdatensätze verwenden saubere Datenbanken. Unternehmen haben Hunderte von Tabellen, kryptische Spaltennamen und drei Versionen desselben Messwerts. Diese Unordnung ist es, die Spider 2.0 eingefangen hat, und deshalb sind die Ergebnisse so drastisch gesunken. Der schwierige Teil der Unternehmensanalyse war nie SQL. Es ist der Kontext des Unternehmens.
Wenn Antworten günstig sind, trägt die Frage das Gewicht. Eine vage Frage, die an die KI übergeben wird, schlägt selten völlig fehl. Sie erhält eine zuversichtliche Antwort auf eine leicht andere Frage, und niemand bemerkt es.
Eine gut formulierte analytische Frage leistet fünf Dinge:
Vergleichen Sie „Warum ist der Umsatz rückläufig?“ mit „Warum hat sich der realisierte Umsatz bestehender nordamerikanischer Kunden in diesem Quartal im Vergleich zum selben Quartal des Vorjahres verändert, und welche Kundensegmente haben am meisten dazu beigetragen?“ Die zweite Version legt die Kennzahl, die Population, die Geographie, den Vergleich und die Aufschlüsselung fest, bevor Daten berührt werden. Sie lässt der KI viel weniger Lücken, die sie mit Vermutungen füllen muss.
Gute KI-Tools helfen hierbei. Wie wir bereits geschrieben haben, sollte die KI bei mehrdeutigen Fragen der Nutzer „lieber nachfragen, als Annahmen zu treffen“. Aber ein Tool kann nur nach der Unklarheit fragen, die es bemerkt. Es hat keine Möglichkeit zu wissen, welche Entscheidung Sie eigentlich treffen wollen. Schlimmer noch: Geläufigkeit kann eine unzureichend spezifizierte Antwort autoritärer wirken lassen, als sie ist.
Das stellt die Formulierung genau in die Jobbeschreibung des Analysten. Betrachten Sie den Prompt als analytische Spezifikation. Definieren Sie die Entscheidung, die Begriffe, den Umfang und die Erfolgskriterien, bevor Sie die KI bitten, die Mechanik zu übernehmen. Ein Teil der wertvollsten analytischen Arbeit findet jetzt vor dem Start der ersten Abfrage statt. Es sieht so aus, als würde man mit einem Stakeholder zusammensetzen, die Entscheidung festzurren und die Frage in Begriffen formulieren, die die Daten beantworten können.
Eine präzise Frage kann trotzdem die falsche Antwort erhalten, wenn sie auf die falsche Weise beantwortet wird. Analytische Fragen fallen in vier große Familien, die eng mit den vier Arten der Business Analytics übereinstimmen, und jede von ihnen erfordert eine andere Art von Methode.
| Die Frage | Zweckmäßige Methode | Die Abkürzung, auf die Sie achten sollten |
|---|---|---|
| Was ist passiert? | Deskriptive und Trendanalyse | Vergleich mit dem falschen Basiszeitraum |
| Warum ist es passiert? | Diagnostische Analyse und Segmentierung | Durchschnitte, die entgegengesetzte Trends in Untergruppen verbergen |
| Was wird passieren? | Prognose | Verlängerung einer kurzen Trendlinie ohne Bereich |
| Was passiert, wenn wir handeln? | Experimente und kausale Inferenz | Darstellung einer Korrelation als Ursache |
KI-Tools neigen dazu, nach dem zu greifen, was am einfachsten zu berechnen ist. Das bedeutet in der Regel eine Beschreibung oder eine Korrelation, und hier schleichen sich vier bekannte Fehler ein:
Korrelation, die als Ursache ausgegeben wird. Kunden, die ein bestimmtes Feature nutzen, wandern möglicherweise seltener ab, und eine KI-Zusammenfassung könnte zu dem Schluss kommen, dass das Feature die Abwanderung verringert. Vielleicht tut es das. Oder vielleicht nutzen Ihre engagiertesten Kunden mehr Features und wandern auch aus Gründen seltener ab, die mit dem Feature nichts zu tun haben. Nur ein Experiment, wie etwa das Ausrollen des Features für eine zufällige Gruppe und der Vergleich der Ergebnisse, kann den Unterschied aufzeigen. Es ist der kostspieligste Fehler in der Analyse, weil er Geld in Dinge lenkt, die nicht funktionieren.
Durchschnitte, die die wahre Geschichte verbergen. Stellen Sie sich zwei Onboarding-Abläufe vor. Ablauf A konvertiert bei kleinen Unternehmen besser (25 % vs. 20 %) und bei Unternehmenskunden besser (60 % vs. 50 %). Dennoch sieht Ablauf B insgesamt viel besser aus, 47 % zu 28 %, weil er zufällig hauptsächlich Unternehmenskunden anzog, die ohnehin höhere Konversionsraten aufweisen. Statistiker nennen dies das Simpsonsche Paradoxon. Ein KI-Tool, das nur den kombinierten Wert meldet, würde den schwächeren Ablauf empfehlen.
Die falsche Baseline. Die Einzelhandelsverkäufe springen jeden Dezember in die Höhe, daher sagt Ihnen ein Zuwachs von 40 % gegenüber November sehr wenig. Derselbe Monat des Vorjahres ist der Vergleich, auf den es ankommt, und ihn auszuwählen ist eine Entscheidung bezüglich der Formulierung.
Prognosen ohne Bereiche. Das Verlängern einer kurzen Trendlinie erzeugt eine Projektion, die präzise aussieht und es in der Regel nicht ist. Eine nützliche Prognose liefert einen Bereich und gibt die Annahmen dahinter an. Sie sollte auch anhand von zurückgehaltenen Zeiträumen getestet werden, die das Modell noch nie zuvor gesehen hat, bevor sich jemand darauf verlässt.
KI kann bei all dem ein nützlicher Partner sein. Sie kann Alternativen vorschlagen, Annahmen erklären und zusätzliche Prüfungen anregen. Aber „die KI hat es gewählt“ ist keine methodische Rechtfertigung. Die Wahl der richtigen Methode hängt nach wie vor von etwas Grundlegenderem ab: Eingaben, die das bedeuten, was jeder denkt, dass sie bedeuten.
Fragen Sie drei Teams nach dem Umsatz des letzten Quartals, und Sie erhalten möglicherweise drei verschiedene Zahlen. Die Finanzabteilung weist den Nettoumsatz nach Abzug von Rückerstattungen aus. Der Vertrieb zählt die Buchungen. Das Marketing definiert einen aktiven Kunden als jeden, der sich innerhalb von 30 Tagen angemeldet hat, während das Produktteam 90 Tage ansetzt. Jedes Dashboard ist in sich stimmig. Zusammen widersprechen sie sich jedoch, und das Meeting artet in einen Streit darüber aus, welche Zahl nun die richtige ist.
KI verschärft dieses Problem noch. Eine Spalte namens „revenue“ teilt einem Modell nicht mit, ob das Unternehmen damit gebuchte, fakturierte, bilanzierte oder Nettoumsätze meint. Um eine Frage zu beantworten, muss ein KI-Tool eine Auswahl treffen. Wenn Definitionen in einzelnen Dashboards und Berichten verstreut sind, rät das Tool entweder oder übernimmt den ersten besten Widerspruch, auf den es stößt. Praktisch wird es also gezwungen, einen organisatorischen Konflikt zu lösen, während es eine einfache Frage beantwortet. Verschiedene Benutzer erhalten dann Antworten, die zwar jeweils in sich schlüssig, aber auf unterschiedlichen Metriken aufgebaut sind.
Die Lösung hierfür ist eine semantische Ebene. Das ist ein zentraler Ort, an dem das Unternehmen festlegt, was seine Begriffe datentechnisch bedeuten, sodass jedes Dashboard und jedes KI-Tool dieselben Definitionen verwendet. Teams können nach wie vor ihre eigenen berechtigten Ansichten beibehalten, solange Bedeutung und Geltungsbereich jeder einzelnen Ansicht explizit sind. Gartner erwartet, dass dies von großer Bedeutung sein wird. Das Unternehmen prognostiziert, dass Organisationen, die Semantik in KI-bereiten Daten bis 2027 priorisieren, die Genauigkeit von agentischem KI-Verhalten um bis zu 80 % steigern und die Kosten um bis zu 60 % senken werden.
Sie können diesen Effekt bei einem einzigen Projekt beobachten. In einem Databricks Walkthrough richtete ein Team AI/BI Genie, unser Tool für konversationelle Analysen, für eine Reihe von Marketingdaten ein und testete es anhand von 13 Benchmark-Fragen. Mit den reinen Tabellen beantwortete Genie keine einzige davon korrekt. Das Hinzufügen von Tabellenbeschreibungen, Schlüsseln zur Verknüpfung von Tabellen und Listen der tatsächlichen Werte in Schlüsselspalten steigerte die Genauigkeit auf 54 %. Beispielabfragen für benutzerdefinierte Metriken brachten das System auf 77 %. Schriftliche Geschäftsregeln, wie etwa der Ausschluss von Testkampagnen und die Verwendung des Fiskalkalenders, führten schließlich zu 100 %. Das Modell war bei 0 % genau dasselbe wie bei 100 %. Jede Leistungssteigerung resultierte allein aus dem Kontext.
Aus diesem Grund integrieren wir Data Governance und geschäftliche Bedeutung direkt in die Datenplattform. Auf der Databricks Data + AI Platform übernimmt diese Aufgabe Unity Catalog Business Semantics. Es wurde entwickelt, um Metriken, Geschäftsregeln und Definitionen über Analyse- und KI-Anwendungen hinweg wiederverwendbar zu machen, anstatt sie in einem einzigen Dashboard einzusperren. Dieser gemeinsame Kontext kann AI/BI Dashboards, Genie, SQL, Notebooks und Agents unterstützen, während Governance-Steuerelemente festlegen, auf welche Daten und welchen Kontext die einzelnen Benutzer zugreifen dürfen. Diese Lücke ist wichtig, weil von KI generierte Fehler oft fehlerfrei aussehen. Ein aufpoliertes Diagramm kann einen fehlerhaften Nenner oder eine Definition verbergen, die sich von der der Finanzabteilung unterscheidet.
Governance zahlt sich auch beim Vertrauen aus. Das LeBow College of Business von der Drexel University und Precisely befragten 505 Führungskräfte im Datenbereich für einen Bericht aus dem Jahr 2026. Unter Organisationen mit Governance-Programmen gaben 71 % an, ein hohes Vertrauen in ihre Daten zu haben, verglichen mit 50 % bei Unternehmen ohne solche Programme.
Geregelte Definitionen machen eine Antwort überprüfbar. Jemand muss sie jedoch nach wie vor überprüfen, und viele Organisationen tun das nicht. In der State of AI-Umfrage von McKinsey aus dem März 2025 gaben 27 % der Befragten, deren Organisationen generative KI nutzen, an, dass Mitarbeiter das gesamte Ergebnis vor der Verwendung überprüfen. Ein ähnlicher Anteil gab an, dass 20 % oder weniger überprüft werden.
Die Validierung kann schnell gehen, sofern sie bewusst erfolgt. Diese sieben Prüfungen decken die meisten Probleme auf:
Passen Sie den Aufwand an die Bedeutung der Entscheidung an. Eine wöchentliche Verkehrsübersicht erfordert nur einen kurzen Blick auf die Logik. Eine Preisentscheidung erfordert hingegen die vollständige Liste. Und die KI zu fragen, ob sie sich sicher ist, zählt nicht als Validierung.
Die richtigen Tools machen diese Prüfungen zur Routine. Genie zeigt beispielsweise, wie es zu den jeweiligen Antworten gelangt ist, sodass die zugrundeliegende Logik jederzeit nachvollziehbar ist.
Ein einzelner sorgfältiger Analyst, der Prüfungen durchführt, ist nicht skalierbar. Für die Leiter von Analyseteams besteht die eigentliche Arbeit darin, Rahmenbedingungen und Validierung fest in die Arbeitsweise des gesamten Teams zu integrieren.
Das beginnt mit einem anderen Verständnis der Rolle von Analysten. Analysten verbringen weniger Zeit damit, Antworten zu generieren, und mehr Zeit damit, den Kontext zu pflegen, der es der KI ermöglicht, gute Ergebnisse zu liefern. In der Praxis bedeutet dies, Definitionen zu pflegen, Genie-Spaces einzurichten, Benchmark-Fragen zu verfassen und markierte Ergebnisse zu überprüfen. Die Rolle ähnelt zunehmend der eines Redakteurs statt der eines Autors des ersten Entwurfs. Die stärksten Analysten werden zu Übersetzern zwischen Geschäftsentscheidungen, Daten, Methoden und KI-Systemen.
Die erforderlichen Fähigkeiten ergeben sich aus diesem Wandel:
Viele Teams sind noch nicht so weit. In derselben Umfrage von Precisely und der Drexel LeBow School nannten 51 % der Führungskräfte im Datenbereich fehlende Qualifikationen als Hauptbedarf für die KI-Bereitschaft, während nur 38 % angaben, gut vorbereitet zu sein.
Worauf können Führungskräfte achten, um festzustellen, ob die Analyse ihres Teams Vertrauen verdient? Achten Sie auf diese fünf Signale:
Behalten Sie bei KI-gestützten Arbeiten eine Reihe repräsentativer Fragen mit bekannten, verlässlichen Antworten bei und bewerten Sie die Ergebnisse regelmäßig über verschiedene Benutzer und Geschäftsbereiche hinweg. Ein breiterer Zugriff erhöht die Anforderungen weiter. AI/BI ist ohne Lizenzgebühren pro Nutzer direkt in die Plattform integriert, sodass gesteuerte Analysen weit über das Datenteam hinausgehen können. Wenn Tausende von Personen Fragen stellen können, darf die Gründlichkeit nicht von einer Handvoll Analysten abhängen. Sie muss fest im System verankert sein.
Datenanalyse ist der Prozess, Daten zu nutzen, um die Unsicherheit bei einer Entscheidung zu verringern. Sie ist wichtig, weil die Qualität einer Entscheidung selten höher ist als die Qualität der Frage und der Belege, die ihr zugrunde liegen.
Es gibt fünf: die Formulierung der Frage, die Aufbereitung der Daten, die Anwendung einer Methode, die Validierung der Ergebnisse und die Vermittlung ihrer Bedeutung. KI beschleunigt inzwischen vor allem die mittleren Schritte.
Die meisten passieren vor dem finalen Diagramm: eine unklare Fragestellung, inkonsistente Definitionen, eine nicht representative Stichprobe, Korrelation als Kausalität dargestellt und Joins auf der falschen Granularitätsebene, die Datensätze doppelt zählen. KI kann diese Prozesse beschleunigen, aber ihre Fehler sehen oft täuschend echt aus.
Beginne damit, die Frage neu zu formulieren und die Definitionen zu bestätigen. Überprüfe dann die Quelle, lies die generierte Abfrage, gleiche wichtige Summen mit einer verlässlichen Referenz ab und teste, ob die Schlussfolgerung unter plausiblen Alternativen Bestand hat.
KI übernimmt einen großen Teil der mechanischen Arbeit bei der Analyse. Das Urteilsvermögen bleibt jedoch beim Menschen. Analysten, die Fragen formulieren, Methoden auswählen, Definitionen verwalten und Ergebnisse validieren, werden dadurch wertvoller.
KI hat Analyseteams die Stunden zurückgegeben, die sie früher für das Schreiben von Queries und das Bereinigen von Daten aufgewendet haben. Die Teams, die am meisten davon profitieren, verbringen diese Stunden an den beiden Enden des Workflows – schärfere Fragen auf der einen und gründlichere Prüfungen auf der anderen Seite. Sie bauen zudem auf Definitionen auf, die für alle gelten.
Genau das soll AI/BI unterstützen: konversationelle Antworten auf Basis Ihrer eigenen, abgesicherten Daten, die allen zur Verfügung stehen, die sie benötigen.
Eine bessere Analyse beginnt mit der richtigen Frage und endet mit einer Antwort, der Sie vertrauen können. Erfahren Sie, wie Databricks AI/BI Analysen in natürlicher Sprache auf den eigenen, geschützten Definitionen Ihres Unternehmens aufsetzt, sodass jedes Dashboard und jede Folgefrage mit denselben Metriken arbeitet. Wenn Sie einen umfassenderen Blick darauf werfen möchten, wie KI die Rolle von Analysten verändert, lesen Sie How AI Is Transforming Data Analytics für eine schrittweise Betrachtung des modernen Analyse-Workflows.
(Dieser Blogbeitrag wurde mit KI-gestützten Tools übersetzt.) Originalbeitrag
Abonnieren Sie unseren Blog und erhalten Sie die neuesten Beiträge direkt in Ihren Posteingang.