---
term: "Trace Analytics"
slug: "trace-analytics"
glossar_id: "G625"
variants: []
category: "betrieb-observability-und-produktbegriffe"
marker: ""
short: "Auswertung mehrerer vollständiger Ausführungsverläufe."
sources:
  - label: "OpenTelemetry: Traces"
    url: "https://opentelemetry.io/docs/concepts/signals/traces/"
  - label: "Zheng et al.: Judging LLM-as-a-Judge"
    url: "https://arxiv.org/abs/2306.05685"
status: "entwurf"
updated: "2026-09-21"
---

Trace Analytics ist die Auswertung vieler Verläufe statt eines einzelnen. Ein Trace beantwortet die Frage, was in diesem Fall passiert ist. Die Auswertung über tausende Verläufe beantwortet, wo das System systematisch schwächelt. [OpenTelemetry](https://opentelemetry.io/docs/concepts/signals/traces/)

## Die nützlichen Fragen sind Verteilungsfragen

Aufschlussreich sind Muster: Wie viele Runden braucht ein Agent im Schnitt, und wie sieht der lange Rand der Verteilung aus. Welche Werkzeuge werden aufgerufen und wie oft scheitern sie. Bei welchen Anfragetypen bricht ein Lauf ab. Wo entstehen die Kosten, meist bei wenigen Prozent der Läufe mit sehr vielen Runden.

Dazu kommen inhaltliche Auswertungen, bei denen ein Modell Stichproben nach festen Kriterien bewertet. [Zheng et al.](https://arxiv.org/abs/2306.05685) Damit lassen sich Qualitätsverläufe über Zeit verfolgen, statt sich auf einzelne Beschwerden zu verlassen.

## So kannst du dir das vorstellen

Ein Werkstattmeister, der nicht einzelne Reparaturberichte liest, sondern nach Häufungen sucht: dasselbe Bauteil, dieselbe Fehlerart, dieselbe Baureihe. Das Bild erklärt den Wechsel von Einzelfall zu Muster, es beschreibt kein konkretes Werkzeug.

## Was es in der Praxis konkret bedeutet

Drei Auswertungen lohnen von Anfang an: die Verteilung der Rundenzahl, die Fehlerquote je Werkzeug, und die Kosten je Vorgangstyp. Sie zeigen fast immer sofort, wo es klemmt. Achte darauf, Läufe nach Anfragetyp zu kennzeichnen, sonst mittelst du völlig verschiedene Fälle zusammen und siehst nichts.

## Wo es verwechselt wird

Auswertung von Verläufen ersetzt keine Prüfung gegen erwartete Ergebnisse. Sie zeigt, was passiert ist, nicht ob es richtig war. Und Durchschnittswerte verdecken bei Agenten das Wesentliche, weil die teuren und fehlerhaften Fälle am Rand der Verteilung liegen.

## Verwandte Begriffe

**Trace**, **LLM Observability**, **Online Evaluation**, **LLM-as-a-Judge**, **Inference Cost**, **Stall Detection**.