How Anthropic enables self-service data analytics with Claude
Fachbeitrag des Teams Data Science & Data Engineering von Anthropic (Chen Chang, Clement Peng, Justin Leder, Johanne Jiao, Josh Cherry), veröffentlicht am **3.
Von **Chen Chang// Quelle claude.com ↗/Lesezeit 2 min/.md// Automatisch geprüfte Übersetzung
Veröffentlicht am 3. Juni 2026 im Anthropic-Blog beschreibt dieser Fachbeitrag des Teams Data Science & Data Engineering (Chen Chang, Clement Peng, Justin Leder, Johanne Jiao, Josh Cherry), wie Anthropic seine Analytics mit Claude self-service gemacht hat: 95% der Business-Queries automatisiert, ~95% Genauigkeit im Aggregat (bis zu ~99% in bestimmten Domänen).
Ausgangspunkt ist, dass Analytics kein Code ist: "there's often only a single correct answer using a single correct source". Die Herausforderung liegt nicht in generativer Kreativität, sondern in der Fähigkeit, eine Frage auf präzise, aktuelle Entitäten im Datenmodell abzubilden. Drei Fehlermodi bedrohen dies: Ambiguität zwischen Konzept und Entität (was zählt als "active users"? werden Betrüger ausgeschlossen? welches Zeitfenster?), Veralterung von Assets und dem Wissen des Agenten, sowie Retrieval-Fehler — bei 80% der fehlgeschlagenen Queries war die Information trotzdem im Korpus vorhanden. Der schlimmste Fall ist das stille Versagen (silent failure): eine falsche, aber plausible Antwort, die ohne Widerspruch verwendet wird.
Die Antwort ist ein vierschichtiger"agentic analytics stack". (1) Data foundations: dimensionale Modellierung, kanonische Datensätze"single source-of-truth", Metadaten behandelt "as a first-class product", Integrität via CI/CD. (2) Sources of truth in absteigender Vertrauensreihenfolge: ein semantic layer, den der Agent "structurally required (by skill instruction) to leverage first" ist, dann Lineage, ein Query-Korpus, destilliert in Dokumente (nicht rohes Retrieval), und ein geschäftlicher Knowledge Graph (Roadmaps, Entscheidungsprotokolle, Organisation). (3) Skills — der entscheidende Hebel: "without skills … didn't exceed 21% … Adding skills gets these numbers consistently above 95%". Sie sind paarweise organisiert: ein Router-Knowledge skill (~30 Referenzdateien) und ein Unbook skill, der den Workflow des Senior-Analysten kodiert (klären, Quellen finden, ausführen, adversarial review). Die Wartung ist kolokiert: ein Review-Hook markiert jede Modelländerung ohne zugehörige Skill-Änderung — ~90% der Daten-PRs enthalten inzwischen einen Skill im selben Diff. (4) Validation: schwellenwertbasierte Offline-Evals (~90% zur Freigabe eines Agenten), Ablation-Testing und Online-Sicherungen (Adversarial Review +6% Genauigkeit, aber +32% Tokens und +72% Latenz; Provenance-Footer; Correction Harvesting durch geplante Agenten).
Zwei negative Ergebnisse prägen die Doktrin: rohen Grep-Zugriff auf tausende SQL-Dateien zu gewähren, bewegt die Genauigkeit "less than a point" (der Flaschenhals ist die Struktur, nicht der Zugriff), und dem LLM zu überlassen, Metriken zu definieren, war "net-negative" — daher die Regel: Dokumentation generiert, Definitionen im Besitz von Menschen. Für den Einstieg: eine Handvoll kanonischer Datensätze, einige Dutzend Evals, ein schlanker Knowledge Skill.
Kernpunkte
Datum / Quelle.3. Juni 2026, Anthropic-Blog (claude.com/blog, Enterprise AI). Autoren: das Team Data Science & Data Engineering von Anthropic (Chang, Peng, Leder, Jiao, Cherry).
Kernergebnis.95% der Business-Analytics-Queries automatisiert, ~95% Genauigkeit im Aggregat (bis zu ~99% in bestimmten Domänen).
These. Analytics ≠ Code — "only a single correct answer using a single correct source" → die Herausforderung ist, die Frage auf die richtigen, aktuellen Entitäten abzubilden, nicht sie zu generieren. ### 3 Fehlermodi 1. Ambiguität zwischen Konzept und Entität — hunderte Optionen; z. B. "active users" (welche Aktionen? Betrüger ausschließen? welches Lookback-Fenster?). 2. Veralterung (Staleness) — Assets und das Wissen des Agenten werden "subtly wrong" (Schemas/Definitionen ändern sich fortlaufend). 3. Retrieval-Fehler — bei 80% der fehlgeschlagenen Queries war die Information trotzdem im Korpus vorhanden.
Größte Gefahr = stilles Versagen (silent failure): "the answer is wrong, but looks plausible and is used without objection". ### 4-schichtiger agentic stack
L1 — Data foundations. dimensionale Modellierung, kanonische Datensätze (single source-of-truth, ownershipbasiert, konsumfertig), Metadaten als "first-class product", schichtübergreifende Integrität via CI/CD.
L2 — Sources of truth. (Vertrauen ↓): semantic layer (verbindlich zuerst) → Lineage-/Transformationsgraph → Query-Korpus (destilliert in Dokumente, nicht rohes Retrieval) → Geschäftskontext (Knowledge Graph: Roadmaps, Entscheidungsprotokolle, Organisation).
L4 — Validation. Offline-Evals (Schwellenwert ~90% zur Freigabe eines Agenten, Ziel ~100%, Ground Truth fixiert auf einem Snapshot, "store results like telemetry"), Ablation-Testing, Online (Adversarial Review, Provenance-Footer, Datenqualitätsprüfungen, Correction Harvesting durch geplante Agenten). ### Bemerkenswerte Ergebnisse (Zahlen & Ablationen)
Ohne Skills ≤ 21%. ; mit Skills > 95% (≈99% in bestimmten Domänen).
Adversarial Review.+6% Genauigkeit, aber +32% Tokens und +72% Latenz (ein hinzunehmender Trade-off).
Rohe-Grep-Ablation. (tausende zugängliche SQL-Dateien): Genauigkeit bewegt sich "less than a point" → der Flaschenhals ist die Struktur, nicht der Zugriff.
Vom LLM generierte Definitionen. = "net-negative" (sie kodieren genau die Ambiguitäten, die eigentlich beseitigt werden sollen) → Definitionen im Besitz von Menschen.
Unstrukturiertes Retrieval. über tausende Queries: Gewinn < 1 Punkt → der Korpus sollte destilliert, nicht roh durchsucht werden.
Wartung. Code-Review-Hook → ~90% der Daten-PRs berühren eine Skill-Datei im selben Diff. ### Zur Verwendung in Engagements / Präsentationen
Blueprint für einen Production-Analytics-Agenten. , der auch andernorts übertragbar ist: Data Governance + verbindlicher semantic layer + Skills + schwellenwertbasierte Evals.
Minimaler Startpunkt. (direkt wiederverwendbar): "a handful of canonical datasets, a few dozen offline evals, and a thin knowledge skill" erfassen "most of the upside".
Anti-naive-RAG-Argumente. Die beiden negativen Ergebnisse (rohes Grep, unstrukturiertes Retrieval) sind Munition gegen "just give the agent everything".
Lebendige Governance-Metrik."90% of PRs include a skill" = Beleg dafür, dass sich Dokumentation und Code gemeinsam weiterentwickeln (Anti-Staleness).
Verbindet sich mit: Skills (Shihipar/Anthropic), semantic layer/Ontologie (Talisman, Seale), Context Engineering (Debois/Tessl), systems around the model (Dropbox), Knowledge-Graph-Daten (Netflix UDA).
Kernzahlen
95% der Business-Analytics-Anfragen über Claude automatisiert