LLM-Beobachtbarkeit

Werkzeug-Rangliste

Nach gemessenem Wachstum und quellenübergreifend normalisiert sortiert. Rohwerte behalten ihr eigenes Zeitfenster; eine Änderung erfordert mindestens zwei Messungen in 7 Tagen.

1. 1

   SkillCorpus

   Skill

   AktivLetzter Commit vor 1 Tag · 2026-09-01

   Open-source infrastructure that turns scattered SKILL.md files into curated, retrieval-ready agent-skill corpora—with retrieval and evaluation tooling included.

   PythonLizenz: Apache-2.0

   • agent-memory
   • agent-skills
   • ai-agents
   • benchmark
   • dataset

   githubvor 22 Tagen erstelltneugemessenes WachstumQuelle öffnen ↗

   Installieren git clone https://github.com/EverMind-AI/SkillCorpus ~/.claude/skills/SkillCorpus

   424GitHub-Sterne+204 (+92.7 %)
2. 2

   deslop-GPT

   Skill

   AktivLetzter Commit vor 6 Tagen · 2026-08-27

   Deletion-first Agent Skill for removing test bloat, verification theater, and speculative fallbacks while preserving behavior.

   PythonLizenz: MIT

   • agent-skills
   • claude
   • claude-ai
   • claude-code
   • claude-skills

   githubvor 9 Tagen erstelltneugemessenes WachstumQuelle öffnen ↗

   Installieren git clone https://github.com/MrZoyo/deslop-GPT ~/.claude/skills/deslop-GPT

   55GitHub-Sterne+27 (+96.4 %)
3. 3

   SkillEvaluator

   Skill

   AktivLetzter Commit vor 1 Tag · 2026-09-01

   Multi-tier framework for evaluating AI agent skills with quality gates, semantic overlap detection, synthetic evaluation dataset generation, and live agent evaluation that measures how skills affect agent behavior.

   PythonLizenz: Apache-2.0

   • agent-evaluation
   • agent-security
   • agent-skills
   • agentic-ai
   • benchmark

   githubvor 2 Monaten erstelltgemessenes WachstumQuelle öffnen ↗

   Installieren git clone https://github.com/NVIDIA/SkillEvaluator ~/.claude/skills/SkillEvaluator

   389GitHub-Sterne+63 (+19.3 %)
4. 4

   craft-skills

   Skill

   AktivLetzter Commit vor 11 Tagen · 2026-08-22

   Research-backed, eval-driven skills for AI agents

   PythonLizenz: Apache-2.0

   • agent-skills
   • ai-agents
   • codex
   • design
   • evals

   githubvor 30 Tagen erstelltgemessenes WachstumQuelle öffnen ↗

   Installieren git clone https://github.com/ZSeven-W/craft-skills ~/.claude/skills/craft-skills

   142GitHub-Sterne+21 (+17.4 %)
5. 5

   agent-kernel

   Agent

   AktivLetzter Commit vor 1 Tag · 2026-09-01

   The Operating System for Scalable Enterprise AI Agents - Run, orchestrate, and deploy Compliant Enterprise AI Agents at scale across frameworks, without lock-in, rewrites or fragile glue code. Native support for MCP, A2A. Interface with all…

   PythonLizenz: Apache-2.0

   • a2a
   • adk
   • ai-agents
   • aws
   • azure

   githubvor 13 Monaten erstelltgemessenes WachstumQuelle öffnen ↗

   156GitHub-Sterne+22 (+16.4 %)
6. 6

   promptfoo

   Sonstige

   AktivLetzter Commit heute · 2026-09-02

   Test your prompts, agents, and RAGs. Red teaming/pentesting/vulnerability scanning for AI. Compare performance of GPT, Claude, Gemini, DeepSeek, and more. Simple declarative configs with command line and CI/CD integration. Used by OpenAI…

   TypeScriptLizenz: MIT

   • ci
   • ci-cd
   • cicd
   • evaluation
   • evaluation-framework

   githubvor 3 Jahren erstelltgemessenes WachstumQuelle öffnen ↗

   24 738GitHub-Sterne+131 (+0.53 %)
7. 7

   openobserve

   Sonstige

   AktivLetzter Commit heute · 2026-09-02

   Open source observability platform for logs, metrics, traces, frontend monitoring, pipelines and LLM observability. A sophisticated, simple and highly performant alternative to Datadog, Splunk, and Elasticsearch with 140x lower storage…

   TypeScriptLizenz: AGPL-3.0

   • analytics
   • apm
   • datadog
   • elasticsearch
   • grafana

   githubvor 3 Jahren erstelltgemessenes WachstumQuelle öffnen ↗

   21 608GitHub-Sterne+115 (+0.54 %)
8. 8

   mastra

   Sonstige

   AktivLetzter Commit heute · 2026-09-02

   Mastra is the modern TypeScript framework for AI-powered applications and agents.

   TypeScript

   • agents
   • ai
   • chatbots
   • evals
   • javascript

   githubvor 2 Jahren erstelltgemessenes WachstumQuelle öffnen ↗

   27 624GitHub-Sterne+121 (+0.44 %)
9. 9

   yao-meta-skill

   Skill

   AktivLetzter Commit vor 16 Tagen · 2026-08-17

   YAO = Yielding AI Outcomes. A rigorous engineering, evaluation, governance, and portability system for reusable agent skills.

   PythonLizenz: MIT

   • agent-skills
   • ai-agents
   • evaluation
   • governance
   • meta-skill

   githubvor 5 Monaten erstelltgemessenes WachstumQuelle öffnen ↗

   Installieren git clone https://github.com/yaojingang/yao-meta-skill ~/.claude/skills/yao-meta-skill

   2 577GitHub-Sterne+54 (+2.1 %)
10. 10

    agent-stack

    Skill

    AktivLetzter Commit vor 1 Tag · 2026-09-01

    Production patterns for agent orchestrators, harnesses, evals, MCP/A2A interoperability, memory, provider routing, and LLM usage metering.

    PythonLizenz: MIT

    • a2a
    • agent-orchestration
    • agent-skills
    • ai-agents
    • developer-tools

    githubvor 27 Tagen erstelltneugemessenes WachstumQuelle öffnen ↗

    Installieren git clone https://github.com/ssheleg/agent-stack ~/.claude/skills/agent-stack

    2GitHub-Sterne+1 (+100.0 %)
11. 11

    databuff

    Agent

    AktivLetzter Commit vor 1 Tag · 2026-09-01

    DataBuff is an AI-native APM built on Opentelemetry，with multi-agent troubleshooting out of the box.

    JavaLizenz: AGPL-3.0

    • aiops
    • apm
    • application-monitoring
    • devops
    • distributed-tracing

    githubvor 2 Monaten erstelltgemessenes WachstumQuelle öffnen ↗

    634GitHub-Sterne+26 (+4.3 %)
12. 12

    mlflow

    Agent

    AktivLetzter Commit heute · 2026-09-02

    The open source AI engineering platform for agents, LLMs, and ML models. MLflow enables teams of all sizes to debug, evaluate, monitor, and optimize production-quality AI applications while controlling costs and managing access to models…

    PythonLizenz: Apache-2.0

    • agentops
    • agents
    • ai
    • ai-governance
    • apache-spark

    githubvor 8 Jahren erstelltgemessenes WachstumQuelle öffnen ↗

    27 768GitHub-Sterne+80 (+0.29 %)
13. 13

    netdata

    Sonstige

    AktivLetzter Commit vor 1 Tag · 2026-09-02

    The fastest path to AI-powered full stack observability, even for lean teams.

    GoLizenz: GPL-3.0

    • ai
    • alerting
    • cncf
    • data-visualization
    • database

    githubvor 13 Jahren erstelltgemessenes WachstumQuelle öffnen ↗

    80 402GitHub-Sterne+91 (+0.11 %)
14. 14

    prefect

    Bibliothek

    AktivLetzter Commit heute · 2026-09-02

    Prefect is a workflow orchestration framework for building resilient data pipelines in Python.

    PythonLizenz: Apache-2.0

    • automation
    • data
    • data-engineering
    • data-ops
    • data-science

    githubvor 8 Jahren erstelltgemessenes WachstumQuelle öffnen ↗

    23 759GitHub-Sterne+66 (+0.28 %)
15. 15

    signoz

    Sonstige

    AktivLetzter Commit heute · 2026-09-02

    SigNoz is an open-source, OpenTelemetry-native observability platform for your team and their AI agents. Get logs, metrics, and traces in one tool with features like APM, distributed tracing, log management, infra monitoring, etc. Combined…

    TypeScript

    • apm
    • application-monitoring
    • distributed-tracing
    • go
    • good-first-issue

    githubvor 5 Jahren erstelltgemessenes WachstumQuelle öffnen ↗

    31 992GitHub-Sterne+62 (+0.19 %)
16. 16

    agent-skill-creator

    Skill

    AktivLetzter Commit vor 1 Tag · 2026-09-01

    Build tested agent skills and govern their lifecycle through a user-defined marketplace: evidence, discovery, updates, rollback, quarantine, and 17-platform distribution.

    PythonLizenz: MIT

    • agent-skills
    • ai-agents
    • claude-code
    • codex
    • cursor

    githubvor 10 Monaten erstelltgemessenes WachstumQuelle öffnen ↗

    Installieren git clone https://github.com/FrancyJGLisboa/agent-skill-creator ~/.claude/skills/agent-skill-creator

    2 367GitHub-Sterne+30 (+1.3 %)
17. 17

    garak

    Sonstige

    AktivLetzter Commit vor 8 Tagen · 2026-08-25

    the LLM vulnerability scanner

    PythonLizenz: Apache-2.0

    • ai
    • llm-evaluation
    • llm-security
    • security-scanners
    • vulnerability-assessment

    githubvor 3 Jahren erstelltgemessenes WachstumQuelle öffnen ↗

    9 079GitHub-Sterne+43 (+0.48 %)
18. 18

    trpc-agent-go

    MCP

    AktivLetzter Commit vor 1 Tag · 2026-09-01

    A Go framework for building production agent systems with graph workflows, tools, memory, A2A, AG-UI, MCP, evaluation, and observability.

    GoLizenz: Apache-2.0

    • a2a
    • a2a-protocol
    • ag-ui
    • agent
    • agent-framework

    githubvor 15 Monaten erstelltgemessenes WachstumQuelle öffnen ↗

    1 759GitHub-Sterne+24 (+1.4 %)
19. 19

    vector

    Sonstige

    AktivLetzter Commit vor 1 Tag · 2026-09-01

    A high-performance observability data pipeline.

    RustLizenz: MPL-2.0

    • agent
    • cloud-native
    • data-transformation
    • datadog
    • etl

    githubvor 8 Jahren erstelltgemessenes WachstumQuelle öffnen ↗

    22 507GitHub-Sterne+45 (+0.20 %)
20. 20

    agent-skills-eval

    Skill

    AktivLetzter Commit vor 28 Tagen · 2026-08-05

    A test runner for agentskills.io-style AI agent skills

    TypeScriptLizenz: MIT

    • agent-evals
    • agent-skills
    • agentskills
    • ai-agents
    • cli

    githubvor 3 Monaten erstelltgemessenes WachstumQuelle öffnen ↗

    Installieren git clone https://github.com/darkrishabh/agent-skills-eval ~/.claude/skills/agent-skills-eval

    719GitHub-Sterne+15 (+2.1 %)
21. 21

    sample-agentcore-enterprise-platform

    Agent

    AktivLetzter Commit vor 1 Tag · 2026-09-01

    Amazon Bedrock AgentCore enterprise platform accelerator with AWS CDK, Terraform organization guardrails, MCP/A2A agents, security, memory, and observability.

    PythonLizenz: Apache-2.0

    • a2a-protocol
    • agentcore
    • agentcore-agent
    • agentcore-gateway
    • agentcore-identity

    githubvor 22 Tagen erstelltneugemessenes WachstumQuelle öffnen ↗

    5GitHub-Sterne+1 (+25.0 %)
22. 22

    openstatus

    MCP

    AktivLetzter Commit vor 1 Tag · 2026-09-01

    🫖 Status page with uptime monitoring & API monitoring as code 🫖

    TypeScriptLizenz: AGPL-3.0

    • alerting
    • incident-management
    • mcp
    • mcp-server
    • monitoring

    githubvor 3 Jahren erstelltgemessenes WachstumQuelle öffnen ↗

    9 052GitHub-Sterne+28 (+0.31 %)
23. 23

    dynatrace-for-ai

    Skill

    AktivLetzter Commit vor 2 Tagen · 2026-08-31

    Skills, prompts, and instructions for building AI agents on top of Dynatrace production context

    JavaScriptLizenz: Apache-2.0

    • agent-skills
    • ai-agents
    • claude-code
    • devops
    • dql

    githubvor 5 Monaten erstelltgemessenes WachstumQuelle öffnen ↗

    Installieren git clone https://github.com/Dynatrace/dynatrace-for-ai ~/.claude/skills/dynatrace-for-ai

    132GitHub-Sterne+6 (+4.8 %)
24. 24

    cilium

    Sonstige

    AktivLetzter Commit heute · 2026-09-02

    eBPF-based Networking, Security, and Observability

    GoLizenz: Apache-2.0

    • bpf
    • cncf
    • cni
    • containers
    • ebpf

    githubvor 10 Jahren erstelltgemessenes WachstumQuelle öffnen ↗

    25 041GitHub-Sterne+27 (+0.11 %)
25. 25

    skill-eval-harness

    Skill

    AktivLetzter Commit vor 3 Tagen · 2026-08-31

    Agent Skill evaluation harness for paired variants, trace artifacts, and runner adapters

    PythonLizenz: MIT

    • agent-skills
    • evals
    • python
    • skills

    githubvor 2 Monaten erstelltgemessenes WachstumQuelle öffnen ↗

    Installieren git clone https://github.com/adewale/skill-eval-harness ~/.claude/skills/skill-eval-harness

    73GitHub-Sterne+4 (+5.8 %)