Die Werkzeugbeschreibungen sind auf Englisch.

LLM-Beobachtbarkeit

Monitoring, Traces, Bewertung und Qualität von LLM-Anwendungen.

123

Werkzeug-Rangliste

Gemischte Rangfolge: Gemessenes Wachstum hat Vorrang. Rohwerte behalten ihr eigenes Zeitfenster; eine Änderung erfordert mindestens zwei Messungen in 7 Tagen.

1
a2a-otel-kit
MCP
AktivLetzter Commit vor 21 Tagen · 2026-08-11
Vendor-neutral OpenTelemetry tracing for A2A agents and MCP services, with W3C context propagation and privacy-safe telemetry.
PythonLizenz: MIT
- a2a
- agent2agent
- agentic-ai
- ai-agents
- clean-architecture
githubvor 47 Tagen erstelltgemessenes WachstumQuelle öffnen ↗
1GitHub-Sternestabil
2
DriftSentinel
Agent
AktivLetzter Commit vor 2 Monaten · 2026-06-20
Agent 降智检测与自愈公评网络 — an immune system for the AI agent society
TypeScriptLizenz: MIT
- a2a
- agent
- agent-guard
- ai-sre
- drift-detection
githubvor 2 Monaten erstelltgemessenes WachstumQuelle öffnen ↗
1GitHub-Sternestabil
3
primal-core
Agent
RuhendLetzter Commit vor 3 Monaten · 2026-05-18
The reliability and interoperability layer for AI agents. A2A-native. MCP-bridged.
PythonLizenz: Apache-2.0
- a2a
- agent-framework
- agents
- ai
- ai-safety
githubvor 3 Monaten erstelltgemessenes WachstumQuelle öffnen ↗
1GitHub-Sternestabil
4
mcp-smb-products
MCP
AktivLetzter Commit vor 2 Monaten · 2026-07-03
8 MCP SMB products — standalone AI servers for SMBs: Guardrails, FinOps, Observability, Router, Trust Score, Memory, ThinkSecure, A2A Lite. 37 tools, TNC credits billing.
PythonLizenz: MIT
- a2a-protocol
- ai-governance
- finops
- guardrails
- mcp
githubvor 4 Monaten erstelltgemessenes WachstumQuelle öffnen ↗
1GitHub-Sternestabil
5
adherencia-reglas
Skill
AktivLetzter Commit vor 32 Tagen · 2026-07-31
Mide si tu agente de IA cumple las reglas que le escribiste. Lee el historial local de Claude Code y devuelve un porcentaje por regla. Sin instalar nada, sin red, biblioteca estándar.
PythonLizenz: MIT
- agent-evaluation
- ai-agents
- claude-code
- claude-code-skill
- claude-code-skills
githubvor 36 Tagen erstelltgemessenes WachstumQuelle öffnen ↗
Installieren git clone https://github.com/jleonceo/adherencia-reglas ~/.claude/skills/adherencia-reglas
1GitHub-Sternestabil
6
dsh-plugins
Agent
AktivLetzter Commit vor 3 Tagen · 2026-08-29
Generic DeepSeek Harness (dsh) plugins: A2A protocol server, session storage mirror, and Langfuse observability.
TypeScriptLizenz: MIT
- agent2agent
- ai-agents
- cordis
- deepseek-harness
- dsh
githubvor 13 Tagen erstelltneugemessenes WachstumQuelle öffnen ↗
1GitHub-Sternestabil
7
pyxen
Agent
AktivLetzter Commit vor 2 Monaten · 2026-06-28
A lightweight Python library that decouples agentic runtime from applications it builds
PythonLizenz: MIT
- a2a
- agent-runtime
- agents
- observability
- portability
githubvor 2 Monaten erstelltgemessenes WachstumQuelle öffnen ↗
1GitHub-Sternestabil
8
boundary-bench
Agent
AktivLetzter Commit vor 6 Tagen · 2026-08-26
Deterministic crash tests for agent control planes: paired worlds, hard stops, budgets, scopes, approvals, and hash-linked receipts.
TypeScriptLizenz: Apache-2.0
- a2a
- agent-evaluation
- ai-agents
- benchmark
- deterministic-replay
githubvor 41 Tagen erstelltgemessenes WachstumQuelle öffnen ↗
1GitHub-Sternestabil
9
multi-agent-system-architect-v2
Skill
AktivLetzter Commit vor 36 Tagen · 2026-07-27
Agent Skill that asks: should there be an agentic system at all? Then designs, builds, audits, verifies, and ports systems—from workflows to governed teams.
PythonLizenz: Apache-2.0
- agent-skills
- agentic-ai
- ai-agents
- anthropic-skills
- antigravity
githubvor 40 Tagen erstelltgemessenes WachstumQuelle öffnen ↗
Installieren git clone https://github.com/ingcontartese-netizen/multi-agent-system-architect-v2 ~/.claude/skills/multi-agent-system-architect-v2
1GitHub-Sternestabil
10
urusilla
Agent
AktivLetzter Commit vor 9 Tagen · 2026-08-23
Experimental no-install semantic language for AI agents: typed action/state, safe NL/JSON fallback, and falsifiable public evals. Try the one-file probe.
PythonLizenz: Apache-2.0
- a2a
- agent-communication
- agent-protocol
- agentic-ai
- ai-agents
githubvor 12 Tagen erstelltneugemessenes WachstumQuelle öffnen ↗
1GitHub-Sternestabil
11
AgentStack
Agent
AktivLetzter Commit vor 3 Tagen · 2026-08-29
Provide clear documentation for AgentStack’s MCP protocol, plugins, and ecosystem API with usage examples and tool references.
- a2a
- anthropic
- claude-code
- crewai
- deep-learning
githubvor 5 Monaten erstelltgemessenes WachstumQuelle öffnen ↗
0GitHub-Sternestabil
12
green-agent
Agent
AktivLetzter Commit vor 2 Monaten · 2026-07-01
A2A green-agent orchestrator for evaluating agents on the AppWorld benchmark, built on the AgentBeats SDK
Python
- a2a-protocol
- agentbeats
- appworld
- evaluation
- llm-agents
githubvor 11 Monaten erstelltgemessenes WachstumQuelle öffnen ↗
0GitHub-Sternestabil
13
otel-agent-provenance
Agent
RuhendLetzter Commit vor 5 Monaten · 2026-03-17
OpenTelemetry semantic conventions and instrumentation for agent provenance, derivation lineage, and acceptance criteria evaluation. Fills the Microsoft AI stack observability gap.
Python
- a2a-protocol
- agentic-ai
- ai-agents
- observability
- opentelemetry
githubvor 5 Monaten erstelltgemessenes WachstumQuelle öffnen ↗
0GitHub-Sternestabil
14
agentgateway
MCP
AktivLetzter Commit vor 2 Tagen · 2026-08-30
AgentGateway — independent third-party profile of a public API surface, by API Evangelist. AgentGateway is an open-source, AI-native proxy and gateway for routing, observing, and governing traffic to and from AI agents, LLM providers, and…
- agent-to-agent
- ai-gateway
- api-gateway
- apis-json
- cncf
githubvor 5 Monaten erstelltgemessenes WachstumQuelle öffnen ↗
0GitHub-Sternestabil
15
multi-agent-credit-desk
MCP
AktivLetzter Commit vor 23 Tagen · 2026-08-09
Architecture-first Python scaffold for an auditable multi-agent corporate credit desk using A2A, MCP, deterministic credit policies, model routing, and OpenTelemetry.
Python
- a2a-protocol
- agentic-ai
- auditability
- clean-architecture
- credit-risk
githubvor 48 Tagen erstelltgemessenes WachstumQuelle öffnen ↗
0GitHub-Sternestabil
16
AI Guardian
MCP
AktivLetzter Commit vor 6 Tagen · 2026-08-26
Governed local-LLM observability: model policy, prompt scanner, capture proxy, 21 tools.
PythonLizenz: MIT
mcpvor 51 Tagen erstelltgemessenes WachstumQuelle öffnen ↗
Installieren claude mcp add ai-guardian -- uvx ai-guardian-aiops
0GitHub-Sternestabil
17
evoagent-os
Agent
AktivLetzter Commit vor 22 Tagen · 2026-08-10
Local-first control plane for durable, governed agent teams: DAG orchestration, approvals, memory, signed skills, trace contracts, and realtime.
PythonLizenz: Apache-2.0
- a2a-protocol
- agentic-ai
- ai-agents
- fastapi
- llmops
githubvor 22 Tagen erstelltneugemessenes WachstumQuelle öffnen ↗
0GitHub-Sternestabil
18
agentanvil
Agent
RuhendLetzter Commit vor 4 Monaten · 2026-04-29
Contract-based testing for LLM agents: hybrid evaluation, multi-agent + A2A, deterministic replay.
PythonLizenz: MIT
- a2a
- agents
- contracts
- evaluation
- llm
githubvor 4 Monaten erstelltgemessenes WachstumQuelle öffnen ↗
0GitHub-Sternestabil
19
Multi_AI_Agent_Medical_Assistant
Agent
RuhendLetzter Commit vor 8 Monaten · 2025-12-08
An AI-powered multi-agent system that demonstrates clinical triage, OTC medication recommendations, and e-pharmacy integration for respiratory conditions. Built with modular agents that collaborate to provide safe, intelligent healthcare…
Python
- agent-to-agent
- agentic-ai
- aiagent
- antigravity-ide
- cursor-ai
githubvor 9 Monaten erstelltgemessenes WachstumQuelle öffnen ↗
0GitHub-Sternestabil
20
MLFlow-A2A-Session-Tracer
Agent
RuhendLetzter Commit vor 4 Monaten · 2026-04-15
A Python proof-of-concept for tracing multi-turn Agent-to-Agent (A2A) conversations as a single unified MLflow trace for LLM observability and evaluation.
Python
- a2a
- agent-to-agent
- ai-agents
- conversational-ai
- llm-evaluation
githubvor 7 Monaten erstelltgemessenes WachstumQuelle öffnen ↗
0GitHub-Sternestabil
21
rote
Sonstige
AktivLetzter Commit vor 58 Tagen · 2026-07-05
A cron that remembers what it did—a CLI job scheduler with run history, captured output, and a live terminal dashboard.
GoLizenz: MIT
- automation
- bubbletea
- cli
- command-line
- cron
githubvor 3 Monaten erstelltgeschätztes MomentumQuelle öffnen ↗
216GitHub-Sterne—
22
slo-impact
Sonstige
AktivLetzter Commit vor 2 Monaten · 2026-06-19
User-impact-weighted SLO dashboard — measure true 99.99% uptime by actual customer exposure, not raw availability
PythonLizenz: MIT
- devops
- observability
- prometheus
- reliability
- sli
githubvor 2 Monaten erstelltgeschätztes MomentumQuelle öffnen ↗
100GitHub-Sterne—

Lern- und Referenzressourcen

Nach gemessenem Wachstum und quellenübergreifend normalisiert sortiert. Diese Ressourcen bleiben getrennt zugänglich und fließen nicht in die Hauptwertung ein.

1
production-ai-engineering
Agent
AktivLetzter Commit vor 43 Tagen · 2026-07-20Quelle öffnen ↗
Handbook técnico aberto sobre engenharia de IA em produção: ML tradicional, LLMs, RAG, agentes, segurança, observabilidade, FinOps e deployment.
Markdown
- a2a-protocol
- agentic-ai
- ai
- ai-agents
- ai-engineering
githubvor 43 Tagen aktivvor 3 Monaten erstelltRessourcegemessenes Wachstum
1GitHub-Sternestabil

LLM-Beobachtbarkeit

Anwendungsfall

Aktivität

Sortieren nach

Werkzeug-Rangliste

a2a-otel-kit

DriftSentinel

primal-core

mcp-smb-products

adherencia-reglas

dsh-plugins

pyxen

boundary-bench

multi-agent-system-architect-v2

urusilla

AgentStack

green-agent

otel-agent-provenance

agentgateway

multi-agent-credit-desk

AI Guardian

evoagent-os

agentanvil

Multi_AI_Agent_Medical_Assistant

MLFlow-A2A-Session-Tracer

rote

slo-impact

Lern- und Referenzressourcen

production-ai-engineering