Die Werkzeugbeschreibungen sind auf Englisch.

LLM-Beobachtbarkeit

Monitoring, Traces, Bewertung und Qualität von LLM-Anwendungen.

122

Werkzeug-Rangliste

Ranked by creation date, newest first; undated entries come last. Rohwerte behalten ihr eigenes Zeitfenster; eine Änderung erfordert mindestens zwei Messungen in 7 Tagen.

1
DeepSeek-Infra
Sonstige
AktivLetzter Commit vor 5 Tagen · 2026-09-02
Local-first Agentic AI Infrastructure Platform with LLM Gateway, Agent DAG Runtime, MCP Tool Hub, A2A Agent Mesh, Local RAG, Tool Sandbox and Observability.
Python
- a2a
- agent-runtime
- ai-infra
- deepseek
- fastapi
githubvor 3 Monaten erstelltgemessenes WachstumQuelle öffnen ↗
1GitHub-Sternestabil
2
anchor
Skill
AktivLetzter Commit vor 18 Tagen · 2026-08-20
Anchor — the production-grade AGENTS.md template for AI coding agents. 51 sections of battle-tested rules. Keep your agents grounded.
Lizenz: MIT
- agent-instructions
- agents-md
- ai-agent-instructions
- ai-coding
- ai-coding-agent
githubvor 3 Monaten erstelltgemessenes WachstumQuelle öffnen ↗
Installieren git clone https://github.com/peva3/anchor ~/.claude/skills/anchor
8GitHub-Sternestabil
3
headsup
Skill
AktivLetzter Commit vor 19 Tagen · 2026-08-18
Glanceable Claude Code and Codex state in your terminal tabs: white=idle, blue=working, orange=waiting. Multi-terminal (iTerm2, WezTerm, AI Power Term), a live status bar with Anthropic usage limits, /sfl and /nil window save-and-restore,…
ShellLizenz: MIT
- ai-workflow-observability
- claude-code
- claude-code-hooks
- claude-code-skill
- claude-code-skills
githubvor 3 Monaten erstelltgemessenes WachstumQuelle öffnen ↗
Installieren git clone https://github.com/wasulajr/headsup ~/.claude/skills/headsup
1GitHub-Sternestabil
4
suede-creator-skills
MCP
AktivLetzter Commit vor 1 Tag · 2026-09-06
74 open-source Agent Skills for Claude Code and Codex: AI SEO, AEO and GEO, code review with an A-F ship grade, CI gates, AI evals, design systems, conversion copy, Instagram growth, iOS and Android app shipping, creator rights, and…
JavaScriptLizenz: MIT
- agent-orchestration
- agent-skill
- agent-skills
- ai-agents
- ai-coding
githubvor 3 Monaten erstelltgemessenes WachstumQuelle öffnen ↗
133GitHub-Sterne+4 (+3.1 %)
5
galdor
Sonstige
AktivLetzter Commit vor 1 Tag · 2026-09-05
A Go-native framework for LLM agents, with OpenTelemetry observability built in.
GoLizenz: Apache-2.0
- a2a
- agents
- ai
- anthropic
- bedrock
githubvor 3 Monaten erstelltgemessenes WachstumQuelle öffnen ↗
10GitHub-Sternestabil
6
primal-core
Agent
RuhendLetzter Commit vor 3 Monaten · 2026-05-18
The reliability and interoperability layer for AI agents. A2A-native. MCP-bridged.
PythonLizenz: Apache-2.0
- a2a
- agent-framework
- agents
- ai
- ai-safety
githubvor 3 Monaten erstelltgemessenes WachstumQuelle öffnen ↗
1GitHub-Sternestabil
7
sre-on-call
Agent
AktivLetzter Commit vor 2 Monaten · 2026-06-20
Multi-agent SRE on-call investigator that auto-triages Slack/Discord infrastructure alerts via AWS Bedrock AgentCore, fanning out to specialized agents (CloudWatch, EKS, Slack/Discord scanners) for parallel investigation.
Python
- a2a-protocol
- anthropic
- aws-bedrock
- aws-lambda
- bedrock-agentcore
githubvor 3 Monaten erstelltgemessenes WachstumQuelle öffnen ↗
3GitHub-Sternestabil
8
anti-lie
Skill
RuhendLetzter Commit vor 3 Monaten · 2026-05-10
Don't make LLMs honest. Make every factual claim auditable. — An LLM Claim Auditing Layer with T1-T7 truth gradients. 98.1% business effectiveness on LiarBench v0.2.
Python
- agent-skills
- ai-safety
- anti-lie
- audit
- factuality
githubvor 3 Monaten erstelltgemessenes WachstumQuelle öffnen ↗
Installieren git clone https://github.com/lc198707/anti-lie ~/.claude/skills/anti-lie
89GitHub-Sternestabil
9
parallel-adversarial-review
Skill
RuhendLetzter Commit vor 3 Monaten · 2026-06-06
Two Claude Code skills for adversarial code review (single-model PAR and multi-model MMAR with cross-critique to catch hallucinations), plus a fixture-based eval suite.
Python
- ai-agents
- claude-code-plugin
- code-review
- evals
- python
githubvor 4 Monaten erstelltgemessenes WachstumQuelle öffnen ↗
Installieren /plugin marketplace add prime-radiant-inc/parallel-adversarial-review
17GitHub-Sternestabil
10
agent-skills-eval
Skill
AktivLetzter Commit vor 32 Tagen · 2026-08-05
A test runner for agentskills.io-style AI agent skills
TypeScriptLizenz: MIT
- agent-evals
- agent-skills
- agentskills
- ai-agents
- cli
githubvor 4 Monaten erstelltgemessenes WachstumQuelle öffnen ↗
Installieren git clone https://github.com/darkrishabh/agent-skills-eval ~/.claude/skills/agent-skills-eval
724GitHub-Sterne+5 (+0.70 %)
11
mcp-smb-products
MCP
AktivLetzter Commit vor 2 Monaten · 2026-07-03
8 MCP SMB products — standalone AI servers for SMBs: Guardrails, FinOps, Observability, Router, Trust Score, Memory, ThinkSecure, A2A Lite. 37 tools, TNC credits billing.
PythonLizenz: MIT
- a2a-protocol
- ai-governance
- finops
- guardrails
- mcp
githubvor 4 Monaten erstelltgemessenes WachstumQuelle öffnen ↗
1GitHub-Sternestabil
12
skill-graveyard
Skill
AktivLetzter Commit vor 58 Tagen · 2026-07-10
Audit which Claude Code skills you actually use — surface dead installs and hallucinated invocations from your session logs.
TypeScriptLizenz: MIT
- anthropic
- audit
- claude
- claude-code
- claude-code-plugin
githubvor 4 Monaten erstelltgemessenes WachstumQuelle öffnen ↗
Installieren /plugin marketplace add sfrangulov/skill-graveyard
10GitHub-Sternestabil
13
claudestat
Skill
AktivLetzter Commit vor 4 Tagen · 2026-09-02
Real-time execution trace and cost intelligence for Claude Code
TypeScriptLizenz: MIT
- agentic-workflow
- ai-productivity
- anthropic
- anthropic-claude
- claude
githubvor 4 Monaten erstelltgemessenes WachstumQuelle öffnen ↗
Installieren /plugin marketplace add DeibyGS/claudestat
34GitHub-Sternestabil
14
eval-layer
Sonstige
RuhendLetzter Commit vor 4 Monaten · 2026-04-29
A Claude Code skill that adds a rubric-based eval layer to any agent project. Framework-agnostic — generates rubric, test cases, judge prompt, and harness. Returns a weighted score plus a judge-leniency signal.
HTML
- agent-evaluation
- anthropic
- claude-code
- claude-code-skill
- evals
githubvor 4 Monaten erstelltgemessenes WachstumQuelle öffnen ↗
13GitHub-Sternestabil
15
io.github.spanlens/mcp-server
MCP
AktivLetzter Commit vor 7 Tagen · 2026-08-31
Query Spanlens LLM observability from Cursor, Claude Desktop, or Continue via MCP.
↓ 32 Downloads/WocheTypeScriptLizenz: MIT
mcpvor 4 Monaten erstelltgemessenes WachstumQuelle öffnen ↗
Installieren claude mcp add mcp-server -- npx @spanlens/mcp-server
13GitHub-Sterne+1 (+8.3 %)
16
agentanvil
Agent
RuhendLetzter Commit vor 4 Monaten · 2026-04-29
Contract-based testing for LLM agents: hybrid evaluation, multi-agent + A2A, deterministic replay.
PythonLizenz: MIT
- a2a
- agents
- contracts
- evaluation
- llm
githubvor 4 Monaten erstelltgemessenes WachstumQuelle öffnen ↗
0GitHub-Sternestabil
17
sentry-instrumentation
Skill
AktivLetzter Commit vor 2 Monaten · 2026-06-19
Sentry instrumentation skill for system-behavior tracking
ShellLizenz: MIT
- agent-skills
- claude-skills
- codex-skill
- instrumentation
- monitoring
githubvor 4 Monaten erstelltgemessenes WachstumQuelle öffnen ↗
Installieren git clone https://github.com/tortastudios/sentry-instrumentation ~/.claude/skills/sentry-instrumentation
24GitHub-Sternestabil
18
memroos
Agent
AktivLetzter Commit vor 3 Tagen · 2026-09-04
MemroOS / memroos: memory OS and governance layer for AI agents, agent workflows, dispatch, proof, and context continuity.
TypeScript
- a2a
- agent-governance
- agent-memory
- agent-orchestration
- agent-workflows
githubvor 5 Monaten erstelltgemessenes WachstumQuelle öffnen ↗
7GitHub-Sternestabil
19
agenttap
Agent
RuhendLetzter Commit vor 5 Monaten · 2026-04-05
Real-time debugging proxy for Agent2Agent (A2A) multi-agent systems
Lizenz: MIT
- a2a
- agent2agent
- debugging
- debugging-tool
- developer-tools
githubvor 5 Monaten erstelltgemessenes WachstumQuelle öffnen ↗
3GitHub-Sternestabil
20
yao-meta-skill
Skill
AktivLetzter Commit vor 20 Tagen · 2026-08-17
YAO = Yielding AI Outcomes. A rigorous engineering, evaluation, governance, and portability system for reusable agent skills.
PythonLizenz: MIT
- agent-skills
- ai-agents
- evaluation
- governance
- meta-skill
githubvor 5 Monaten erstelltgemessenes WachstumQuelle öffnen ↗
Installieren git clone https://github.com/yaojingang/yao-meta-skill ~/.claude/skills/yao-meta-skill
2 599GitHub-Sterne+22 (+0.85 %)
21
dynatrace-for-ai
Skill
AktivLetzter Commit vor 7 Tagen · 2026-08-31
Skills, prompts, and instructions for building AI agents on top of Dynatrace production context
JavaScriptLizenz: Apache-2.0
- agent-skills
- ai-agents
- claude-code
- devops
- dql
githubvor 5 Monaten erstelltgemessenes WachstumQuelle öffnen ↗
Installieren git clone https://github.com/Dynatrace/dynatrace-for-ai ~/.claude/skills/dynatrace-for-ai
135GitHub-Sterne+3 (+2.3 %)
22
agentgateway
MCP
AktivLetzter Commit vor 2 Tagen · 2026-09-04
AgentGateway — independent third-party profile of a public API surface, by API Evangelist. AgentGateway is an open-source, AI-native proxy and gateway for routing, observing, and governing traffic to and from AI agents, LLM providers, and…
- agent-to-agent
- ai-gateway
- api-gateway
- apis-json
- cncf
githubvor 5 Monaten erstelltgemessenes WachstumQuelle öffnen ↗
0GitHub-Sternestabil
23
agent-mmm
Skill
AktivLetzter Commit vor 3 Tagen · 2026-09-03
Marketing Mix Model expert agent plugin for Claude Code - pymc-marketing v0.18.2+
Python
- claude-code-agent
- claude-code-plugin
- claude-code-skill
- data-analysis
- data-analytics
githubvor 5 Monaten erstelltgemessenes WachstumQuelle öffnen ↗
Installieren /plugin marketplace add Yakoub-ai/agent-mmm
4GitHub-Sternestabil
24
AgentStack
Agent
AktivLetzter Commit vor 3 Tagen · 2026-09-04
Provide clear documentation for AgentStack’s MCP protocol, plugins, and ecosystem API with usage examples and tool references.
- a2a
- anthropic
- claude-code
- crewai
- deep-learning
githubvor 5 Monaten erstelltgemessenes WachstumQuelle öffnen ↗
0GitHub-Sternestabil

Lern- und Referenzressourcen

Ranked by creation date, newest first; undated entries come last. Diese Ressourcen bleiben getrennt zugänglich und fließen nicht in die Hauptwertung ein.

1
production-ai-engineering
Agent
AktivLetzter Commit vor 48 Tagen · 2026-07-20Quelle öffnen ↗
Handbook técnico aberto sobre engenharia de IA em produção: ML tradicional, LLMs, RAG, agentes, segurança, observabilidade, FinOps e deployment.
Markdown
- a2a-protocol
- agentic-ai
- ai
- ai-agents
- ai-engineering
githubvor 48 Tagen aktivvor 3 Monaten erstelltRessourcegemessenes Wachstum
1GitHub-Sternestabil

LLM-Beobachtbarkeit

Anwendungsfall

Aktivität

Sortieren nach

Werkzeug-Rangliste

DeepSeek-Infra

anchor

headsup

suede-creator-skills

galdor

primal-core

sre-on-call

anti-lie

parallel-adversarial-review

agent-skills-eval

mcp-smb-products

skill-graveyard

claudestat

eval-layer

io.github.spanlens/mcp-server

agentanvil

sentry-instrumentation

memroos

agenttap

yao-meta-skill

dynatrace-for-ai

agentgateway

agent-mmm

AgentStack

Lern- und Referenzressourcen

production-ai-engineering