ツールの説明は英語です。

LLM可観測性

LLMアプリの監視、トレース、評価、品質管理。

用途

アクティビティ

並び順

122

ツールランキング

Ranked by known GitHub stars, highest first; archived repositories come after maintained repositories. 各値は情報源固有の期間を使用し、変化の算出には7日間で2回以上の測定が必要です。

  1. 1

    MCP
    活動中

    Optimize any AI agent’s skills, tools/MCP, and prompts against your own evals.

    Pythonライセンス: Apache-2.0
    • agent-optimization
    • agent-skills
    • agentic-ai
    • ai-agents
    • claude

    github推定モメンタム情報源を開く ↗

    47GitHubスター—
  2. 2

    スキル
    活動中

    Mini Program Engineering Skill Suite is an Agent Skill suite for evidence‑first mini‑program development. It helps agents bring WeChat or other mini‑program projects from vague intent to reliable engineering work: project intake, product…

    Pythonライセンス: MIT
    • agent-skills
    • ai-agents
    • alipay
    • ci-cd
    • claude-code

    github測定済み成長情報源を開く ↗

    インストール git clone https://github.com/NocodeMrLi/mini-program-engineering-skill-suite ~/.claude/skills/mini-program-engineering-skill-suite

    43GitHubスター+4 (+10.3 %)
  3. 3

    スキル
    活動中

    Real-time execution trace and cost intelligence for Claude Code

    TypeScriptライセンス: MIT
    • agentic-workflow
    • ai-productivity
    • anthropic
    • anthropic-claude
    • claude

    github測定済み成長情報源を開く ↗

    インストール /plugin marketplace add DeibyGS/claudestat

    34GitHubスター安定
  4. 4

    スキル
    活動中

    Make Claude Opus 4.8 behave like Claude Fable 5 — doctrine output style, drift-catching hooks, and an eval loop against golden Fable transcripts. Claude Code plugin.

    Shellライセンス: MIT
    • anthropic
    • claude
    • claude-code
    • claude-code-plugin
    • evals

    github測定済み成長情報源を開く ↗

    インストール /plugin marketplace add rennf93/opus-fable-playbook

    34GitHubスター+1 (+3.0 %)
  5. 5

    スキル
    休止中

    🔍 AI observability skill for Claude Code. Debug LangChain/LangGraph agents by fetching execution traces from LangSmith Studio directly in your terminal.

    ライセンス: MIT
    • agent-debugging
    • ai-agents
    • claude-skills
    • claude-skills-creator
    • claude-skills-hub

    github測定済み成長情報源を開く ↗

    インストール git clone https://github.com/OthmanAdi/langsmith-fetch-skill ~/.claude/skills/langsmith-fetch-skill

    27GitHubスター安定
  6. 6

    エージェント
    休止中

    Policy-enforced observability and fail-closed guardrails for MCP/A2A multi-agent systems.

    Rust
    • a2a
    • ai-agents
    • llm-security
    • mcp
    • multi-agent

    github測定済み成長情報源を開く ↗

    26GitHubスター安定
  7. 7

    スキル
    活動中

    Sentry instrumentation skill for system-behavior tracking

    Shellライセンス: MIT
    • agent-skills
    • claude-skills
    • codex-skill
    • instrumentation
    • monitoring

    github測定済み成長情報源を開く ↗

    インストール git clone https://github.com/tortastudios/sentry-instrumentation ~/.claude/skills/sentry-instrumentation

    24GitHubスター安定
  8. 8

    MCP
    活動中

    Deterministic, local-only audit reports for Claude Code AI agent sessions. Rust + SQLite. Zero network calls. MCP server for agents.

    HTMLライセンス: MIT
    • agent-monitoring
    • agentic-ai
    • ai-agents
    • ai-engineering
    • audit

    github測定済み成長情報源を開く ↗

    22GitHubスター+2 (+10.0 %)
  9. 9

    MCP
    活動中

    Log Claude Code sessions to Opik, the open-source LLM observability and evaluation platform, built by Comet. Tracing, evaluation, and skills for observable AI applications.

    Goライセンス: Apache-2.0
    • ai-agent
    • claude-ai
    • claude-code-plugin
    • llm-observation
    • mcp-server

    github測定済み成長情報源を開く ↗

    22GitHubスター+1 (+4.8 %)
  10. 10

    スキル
    活動中

    Measure prompt and skill improvements with blind A/B comparison.

    Pythonライセンス: MIT
    • agent-skills
    • ai-tools
    • claude-code
    • claude-code-plugin
    • claude-code-skill

    github測定済み成長情報源を開く ↗

    インストール /plugin marketplace add shinpr/rashomon

    18GitHubスター安定
  11. 11

    その他
    活動中

    AI-detector auditing toolkit: measures how often a detector flags genuine human writing, how stable its verdict is across seeds, and whether that verdict survives meaning-preserving edits. Detector-in-the-loop measurement harness. Claude…

    Pythonライセンス: MIT
    • ai-detection
    • ai-detector
    • benchmark
    • claude-code
    • claude-code-skill

    github測定済み成長情報源を開く ↗

    18GitHubスター安定
  12. 12

    MCP
    休止中

    MCP as a Judge: a behavioral MCP that strengthens AI coding assistants via explicit LLM evaluations

    Pythonライセンス: MIT

      mcp測定済み成長情報源を開く ↗

      インストール claude mcp add mcp-as-a-judge -- uvx mcp-as-a-judge

      17GitHubスター安定
    • 13

      スキル
      活動中

      Two Claude Code skills for adversarial code review (single-model PAR and multi-model MMAR with cross-critique to catch hallucinations), plus a fixture-based eval suite.

      Python
      • ai-agents
      • claude-code-plugin
      • code-review
      • evals
      • python

      github測定済み成長情報源を開く ↗

      インストール /plugin marketplace add prime-radiant-inc/parallel-adversarial-review

      17GitHubスター安定
    • 14

      スキル
      活動中

      Make Claude write clearly, for everyone.

      Pythonライセンス: 0BSD
      • claude-code
      • claude-code-plugin
      • controlled-language
      • llm-evaluation
      • output-style

      github測定済み成長情報源を開く ↗

      インストール /plugin marketplace add stefanobaghino/simple-output-styles

      16GitHubスター安定
    • 15

      その他
      活動中

      A command-line tool to scaffold and manage enterprise-ready AI Agents powered by the A2A (Agent-to-Agent) protocol

      Goライセンス: Apache-2.0
      • a2a
      • agents
      • ai
      • containerized
      • docker

      github測定済み成長情報源を開く ↗

      14GitHubスター+1 (+7.7 %)
    • 16

      スキル
      活動中

      Claude Code plugin marketplace — agentic-engineering (spec-driven shape→decide→execute→measure→eval with adversarial review) + github-keeper (audit/elevate READMEs and make a repo open-source-ready).

      Pythonライセンス: MIT
      • adr
      • agentic-engineering
      • ai-agents
      • anthropic
      • claude-code

      github測定済み成長情報源を開く ↗

      インストール /plugin marketplace add GiustoPiedimonte/agentic-engineering-marketplace

      13GitHubスター安定
    • 17

      その他
      休止中

      A Claude Code skill that adds a rubric-based eval layer to any agent project. Framework-agnostic — generates rubric, test cases, judge prompt, and harness. Returns a weighted score plus a judge-leniency signal.

      HTML
      • agent-evaluation
      • anthropic
      • claude-code
      • claude-code-skill
      • evals

      github測定済み成長情報源を開く ↗

      13GitHubスター安定
    • 18

      MCP
      活動中

      Query Spanlens LLM observability from Cursor, Claude Desktop, or Continue via MCP.

      ↓ 32 DL/週TypeScriptライセンス: MIT

        mcp測定済み成長情報源を開く ↗

        インストール claude mcp add mcp-server -- npx @spanlens/mcp-server

        12GitHubスター安定
      • 19

        スキル
        活動中

        Audit which Claude Code skills you actually use — surface dead installs and hallucinated invocations from your session logs.

        TypeScriptライセンス: MIT
        • anthropic
        • audit
        • claude
        • claude-code
        • claude-code-plugin

        github測定済み成長情報源を開く ↗

        インストール /plugin marketplace add sfrangulov/skill-graveyard

        10GitHubスター+1 (+11.1 %)
      • 20

        スキル
        活動中

        Turn one decision into a judged tournament of solutions, then pick the best — a Claude Code skill that generates candidates, auto-derives the rubric, judges independently, and returns a defensible winner.

        JavaScriptライセンス: MIT
        • ai-agents
        • anthropic
        • claude-code
        • claude-code-plugin
        • claude-skill

        github測定済み成長情報源を開く ↗

        インストール /plugin marketplace add CoriChui/bakeoff

        10GitHubスター安定
      • 21

        その他
        活動中

        A Go-native framework for LLM agents, with OpenTelemetry observability built in.

        Goライセンス: Apache-2.0
        • a2a
        • agents
        • ai
        • anthropic
        • bedrock

        github測定済み成長情報源を開く ↗

        10GitHubスター安定
      • 22

        スキル
        活動中

        Production-grade AI coding rules for Cursor and Claude Code. 15 rules + 9 doc templates + skills + agents + MCP setup. Drop into any project.

        Pythonライセンス: MIT
        • ai-agents
        • ai-coding
        • ai-development
        • ai-engineer
        • automation

        github測定済み成長情報源を開く ↗

        インストール git clone https://github.com/aiagentwithdhruv/ai-dev-stack ~/.claude/skills/ai-dev-stack

        10GitHubスター+1 (+11.1 %)

      学習・参考リソース

      Ranked by known GitHub stars, highest first; archived repositories come after maintained repositories. これらは個別に参照でき、主要ランキングには含まれません。

      1. 1

        awesome-llm-observability

        スキル
        活動中情報源を開く ↗

        50+ curated LLM observability tools PLUS 26 Agent Skills (several with runnable, unit-tested scripts) to build, evaluate, debug, secure & monitor reliable LLM apps. Tracing, evals, guardrails, LLMOps.

        Python
        • ai-agents
        • ai-engineering
        • ai-observability
        • awesome
        • awesome-list
        github

        インストール git clone https://github.com/ContextJet-ai/awesome-llm-observability ~/.claude/skills/awesome-llm-observability

        リソース測定済み成長
        33GitHubスター+3 (+10.0 %)
      2. 2

        Agentic_AI_Engineer

        エージェント
        活動中情報源を開く ↗

        My complete journey to becoming an Agentic AI Engineer through structured learning, projects, experiments, and production-ready implementations of modern AI systems.

        Jupyter Notebookライセンス: MIT
        • a2a-protocol
        • agent-orchestration
        • ai-guardrails
        • fastapi
        • kubernetes
        githubリソース測定済み成長
        18GitHubスター安定
      3. 3

        trigger_tree

        スキル
        活動中情報源を開く ↗

        Documentation-discovery telemetry for Claude Code — heat/cold maps, health grade, evidence-backed router fixes. 100% local, zero tokens. /tt

        Pythonライセンス: MIT
        • ai-agents
        • claude-code
        • claude-code-plugin
        • docs-as-code
        • documentation
        github

        インストール /plugin marketplace add Hedde/trigger_tree

        リソース測定済み成長
        14GitHubスター+1 (+7.7 %)