AgentOps
#21 in Observability & EvalsAgentops · seit 2023 (gegründet laut infrabase.ai) · 2× · zuletzt 29. Juni 2026
AgentOps ist eine Observability- und Evaluations-Plattform speziell für KI-Agenten und LLM-Anwendungen, entwickelt vom gleichnamigen Startup AgentOps-AI (gegründet 2023, San Francisco/Delray Beach). Mit wenigen Zeilen Code (SDK für Python/TypeScript) werden Session-Traces, LLM-Aufrufe, Tool-Nutzung und Multi-Agenten-Interaktionen aufgezeichnet und in einem Dashboard visualisiert, inklusive Session-Replay, Kostenverfolgung und Guardrails. Die Plattform integriert sich nativ in über 400 LLMs und Agent-Frameworks wie CrewAI, AutoGen/AG2, OpenAI Agents SDK und LangChain. Das SDK/die App ist unter MIT-Lizenz quelloffen, während das gehostete Dashboard ein kommerzielles Produkt mit gestaffelten Preisplänen (kostenlos bis Enterprise) ist.
Features
| Deployment (Self-host/Cloud) | Primär Cloud-Dashboard; Self-Hosting von Dashboard+API-Backend möglich (App+Backend lokal ausführbar); Enterprise-Self-Hosting auf AWS/GCP/Azure |
| Lizenz | SDK/App Open Source unter MIT-Lizenz; gehostetes Dashboard ist kommerziell |
| Open-Source Option | Ja – die AgentOps-App (Dashboard + API-Backend) ist unter MIT-Lizenz open-source auf GitHub verfügbar (github.com/AgentOps-AI/agentops); Python SDK: MIT-Lizenz |
| Plattform | Web-Dashboard (app.agentops.ai) plus Python- und TypeScript/JavaScript-SDK |
| Preis | Kostenloser Basic-Tarif (bis 5.000 Events/Monat); Pro ab $40/Monat; Enterprise individuell (SOC-2, HIPAA, Self-Hosting, SSO) |
| Preismodell | Freemium: kostenloser Einstieg (Free Tier), kostenpflichtige Pläne ab ~$40/Monat nutzungsbasiert (Abrechnung nach Anzahl getrackter Events), Enterprise-Pläne auf Anfrage |
| Protokoll-Kompatibilität | Eigenes SDK-/Event-Modell, keine durchgängige OpenTelemetry/OpenInference-Konvention wie bei Konkurrenzprodukten |
| Release-Datum | Unternehmen gegründet 2023; offizieller X/Twitter-Account seit Oktober 2023 aktiv |
| Self-Hosting möglich | Ja – offiziell unterstützt; vollständige Plattform (Dashboard + API-Backend) kann per Docker/Docker-Compose auf eigener Infrastruktur betrieben werden; Setup-Anleitung in app/README.md dokumentiert |
| Unterstützte Modelle/Provider | 400+ LLMs und Frameworks, u.a. OpenAI, CrewAI, AutoGen/AG2, LangChain, LlamaIndex, CamelAI, SwarmZero, Llama Stack |