Platform
Dashboards
Eigene Dashboards kombinieren Metriken, Diagramme, Filter und Aktivitäten für Agent Runs, Zuverlässigkeit, Judge Scores, Token-Nutzung und Kosten im Zeitverlauf.
Zuletzt aktualisiert
Auf dieser Seite
Eigene Dashboards
Der Tab Observability im Projekt bietet anpassbare Dashboards für die Performance von Agenten im Zeitverlauf. Erstelle mehrere Dashboards und ordne ihre Widgets in einem Drag-and-Drop-Raster an, sodass jede Ansicht eine konkrete operative Frage beantwortet.
Widget-Typen
Stat Cards
Zeigen eine Metrik mit optionaler Aufschlüsselung: Runs insgesamt, Success Rate, Fehler, Tool Calls, Tokens oder Token-Kosten.
Area Charts
Stellen Runs von Agenten oder Verbindungen, Token-Nutzung, Token-Kosten oder KI-Modell-Nutzung als ein- und ausblendbare Zeitreihen dar.
Bar Charts
Zeigen Ranglisten: Agenten nach Runs, Tokens, Token-Kosten oder Judge Score; Kontext-Werte nach Runs, Tokens oder Kosten; KI-Modelle nach Tokens oder Kosten; Verbindungen nach Ausführungen und Judges nach Score.
Logs Lists
Ergänzen einen Feed mit aktuellen Runs von Agenten oder Verbindungen, optional nur mit Fehlern und mit Links zu den Run Details.
Input Widgets
Stellen Text- oder Auswahlfelder bereit, deren Werte sich in mehreren Widgets verwenden lassen. Auswahloptionen können statisch sein oder aus Collections der Projektdatenbank geladen werden.
Dashboard-Funktionen
- Mehrere Dashboards: getrennte Ansichten für Kostenkontrolle, Zuverlässigkeit und Debugging.
- Zeitraumauswahl: ändere das Zeitfenster aller Widgets über ein Preset oder einen eigenen Zeitraum.
- Auto-Refresh: aktualisiert Live-Zeiträume je nach Auswahl alle 10, 30 oder 60 Sekunden; feste Zeiträume in der Vergangenheit werden nicht aktualisiert.
- Filter pro Widget: beschränke ein Widget auf bestimmte Agenten oder Verbindungen.
- Gemeinsame Input-Variablen: definiere einen Input und verwende seinen Wert in Charts, Stats und Logs wieder.
- Drag-and-Drop Layout: ordne Widgets im Edit Mode an und ändere ihre Größe.
- Bearbeitung mit KI: füge Widgets über einen natürlich formulierten Dashboard Prompt hinzu oder passe sie an.
- Default Dashboard: nutze das vorkonfigurierte Dashboard, das jedes Projekt enthält.
Observability auf Agent-Ebene
Öffne einen Agenten im Tab Agenten, um Konfiguration und Ausführungen dieses Agenten zu untersuchen. Die Ansicht zeigt seine Konfiguration und die letzten Ausführungen. Ein eigenes Dashboard ist dafür nicht nötig.
- Statistiken: Runs insgesamt, Success Rate, gesamte Runtime, Token-Kosten und Tokens, jeweils mit Durchschnitt, p50 und p95 pro Run.
- Konfiguration: Agent Type, KI-Modell, Concurrency und verknüpfte Tools oder Agenten.
- Runs-Tabelle: eine auf den Agenten beschränkte Tabelle mit Filtern für Status, Context, Guardrail, Deployment und Datum.
- Manueller Trigger: sende direkt aus dem Dashboard einen Payload an den Agenten.
Dashboard-Metriken und Abrechnungsdetails
Unter Nutzung und Abrechnung stehen Token-Kategorien, Kostenberechnung, Limits des Abonnements und Abrechnungszeiträume.