ツールの説明は英語です。

LLM可観測性

LLMアプリの監視、トレース、評価、品質管理。

用途

アクティビティ

並び順

121

ツールランキング

Ranked by normalized popularity across sources. 各値は情報源固有の期間を使用し、変化の算出には7日間で2回以上の測定が必要です。

  1. 1

    スキル
    活動中

    Make Claude Opus 4.8 behave like Claude Fable 5 — doctrine output style, drift-catching hooks, and an eval loop against golden Fable transcripts. Claude Code plugin.

    Shellライセンス: MIT
    • anthropic
    • claude
    • claude-code
    • claude-code-plugin
    • evals

    github測定済み成長情報源を開く ↗

    インストール /plugin marketplace add rennf93/opus-fable-playbook

    34GitHubスター+1 (+3.0 %)
  2. 2

    スキル
    休止中

    🔍 AI observability skill for Claude Code. Debug LangChain/LangGraph agents by fetching execution traces from LangSmith Studio directly in your terminal.

    ライセンス: MIT
    • agent-debugging
    • ai-agents
    • claude-skills
    • claude-skills-creator
    • claude-skills-hub

    github測定済み成長情報源を開く ↗

    インストール git clone https://github.com/OthmanAdi/langsmith-fetch-skill ~/.claude/skills/langsmith-fetch-skill

    27GitHubスター安定
  3. 3

    エージェント
    休止中

    Policy-enforced observability and fail-closed guardrails for MCP/A2A multi-agent systems.

    Rust
    • a2a
    • ai-agents
    • llm-security
    • mcp
    • multi-agent

    github測定済み成長情報源を開く ↗

    26GitHubスター安定
  4. 4

    スキル
    活動中

    Sentry instrumentation skill for system-behavior tracking

    Shellライセンス: MIT
    • agent-skills
    • claude-skills
    • codex-skill
    • instrumentation
    • monitoring

    github測定済み成長情報源を開く ↗

    インストール git clone https://github.com/tortastudios/sentry-instrumentation ~/.claude/skills/sentry-instrumentation

    24GitHubスター安定
  5. 5

    MCP
    活動中

    Log Claude Code sessions to Opik, the open-source LLM observability and evaluation platform, built by Comet. Tracing, evaluation, and skills for observable AI applications.

    Goライセンス: Apache-2.0
    • ai-agent
    • claude-ai
    • claude-code-plugin
    • llm-observation
    • mcp-server

    github測定済み成長情報源を開く ↗

    22GitHubスター+1 (+4.8 %)
  6. 6

    MCP
    活動中

    Deterministic, local-only audit reports for Claude Code AI agent sessions. Rust + SQLite. Zero network calls. MCP server for agents.

    HTMLライセンス: MIT
    • agent-monitoring
    • agentic-ai
    • ai-agents
    • ai-engineering
    • audit

    github測定済み成長情報源を開く ↗

    22GitHubスター安定
  7. 7

    その他
    活動中

    AI-detector auditing toolkit: measures how often a detector flags genuine human writing, how stable its verdict is across seeds, and whether that verdict survives meaning-preserving edits. Detector-in-the-loop measurement harness. Claude…

    Pythonライセンス: MIT
    • ai-detection
    • ai-detector
    • benchmark
    • claude-code
    • claude-code-skill

    github測定済み成長情報源を開く ↗

    18GitHubスター-1 (-5.3 %)
  8. 8

    スキル
    活動中

    Measure prompt and skill improvements with blind A/B comparison.

    Pythonライセンス: MIT
    • agent-skills
    • ai-tools
    • claude-code
    • claude-code-plugin
    • claude-code-skill

    github測定済み成長情報源を開く ↗

    インストール /plugin marketplace add shinpr/rashomon

    18GitHubスター安定
  9. 9

    MCP
    休止中

    MCP as a Judge: a behavioral MCP that strengthens AI coding assistants via explicit LLM evaluations

    Pythonライセンス: MIT

      mcp測定済み成長情報源を開く ↗

      インストール claude mcp add mcp-as-a-judge -- uvx mcp-as-a-judge

      17GitHubスター安定
    • 10

      スキル
      休止中

      Two Claude Code skills for adversarial code review (single-model PAR and multi-model MMAR with cross-critique to catch hallucinations), plus a fixture-based eval suite.

      Python
      • ai-agents
      • claude-code-plugin
      • code-review
      • evals
      • python

      github測定済み成長情報源を開く ↗

      インストール /plugin marketplace add prime-radiant-inc/parallel-adversarial-review

      17GitHubスター安定
    • 11

      スキル
      活動中

      Make Claude write clearly, for everyone.

      Pythonライセンス: 0BSD
      • claude-code
      • claude-code-plugin
      • controlled-language
      • llm-evaluation
      • output-style

      github測定済み成長情報源を開く ↗

      インストール /plugin marketplace add stefanobaghino/simple-output-styles

      16GitHubスター安定
    • 12

      その他
      活動中

      A command-line tool to scaffold and manage enterprise-ready AI Agents powered by the A2A (Agent-to-Agent) protocol

      Goライセンス: Apache-2.0
      • a2a
      • agents
      • ai
      • containerized
      • docker

      github測定済み成長情報源を開く ↗

      14GitHubスター+1 (+7.7 %)
    • 13

      その他
      休止中

      A Claude Code skill that adds a rubric-based eval layer to any agent project. Framework-agnostic — generates rubric, test cases, judge prompt, and harness. Returns a weighted score plus a judge-leniency signal.

      HTML
      • agent-evaluation
      • anthropic
      • claude-code
      • claude-code-skill
      • evals

      github測定済み成長情報源を開く ↗

      13GitHubスター安定
    • 14

      スキル
      活動中

      Claude Code plugin marketplace — agentic-engineering (spec-driven shape→decide→execute→measure→eval with adversarial review) + github-keeper (audit/elevate READMEs and make a repo open-source-ready).

      Pythonライセンス: MIT
      • adr
      • agentic-engineering
      • ai-agents
      • anthropic
      • claude-code

      github測定済み成長情報源を開く ↗

      インストール /plugin marketplace add GiustoPiedimonte/agentic-engineering-marketplace

      13GitHubスター安定
    • 15

      MCP
      活動中

      Query Spanlens LLM observability from Cursor, Claude Desktop, or Continue via MCP.

      ↓ 32 DL/週TypeScriptライセンス: MIT

        mcp測定済み成長情報源を開く ↗

        インストール claude mcp add mcp-server -- npx @spanlens/mcp-server

        13GitHubスター+1 (+8.3 %)
      • 16

        スキル
        活動中

        Audit which Claude Code skills you actually use — surface dead installs and hallucinated invocations from your session logs.

        TypeScriptライセンス: MIT
        • anthropic
        • audit
        • claude
        • claude-code
        • claude-code-plugin

        github測定済み成長情報源を開く ↗

        インストール /plugin marketplace add sfrangulov/skill-graveyard

        10GitHubスター安定
      • 17

        スキル
        活動中

        Production-grade AI coding rules for Cursor and Claude Code. 15 rules + 9 doc templates + skills + agents + MCP setup. Drop into any project.

        Pythonライセンス: MIT
        • ai-agents
        • ai-coding
        • ai-development
        • ai-engineer
        • automation

        github測定済み成長情報源を開く ↗

        インストール git clone https://github.com/aiagentwithdhruv/ai-dev-stack ~/.claude/skills/ai-dev-stack

        10GitHubスター安定
      • 18

        その他
        活動中

        A Go-native framework for LLM agents, with OpenTelemetry observability built in.

        Goライセンス: Apache-2.0
        • a2a
        • agents
        • ai
        • anthropic
        • bedrock

        github測定済み成長情報源を開く ↗

        10GitHubスター安定
      • 19

        スキル
        活動中

        Turn one decision into a judged tournament of solutions, then pick the best — a Claude Code skill that generates candidates, auto-derives the rubric, judges independently, and returns a defensible winner.

        JavaScriptライセンス: MIT
        • ai-agents
        • anthropic
        • claude-code
        • claude-code-plugin
        • claude-skill

        github測定済み成長情報源を開く ↗

        インストール /plugin marketplace add CoriChui/bakeoff

        10GitHubスター安定
      • 20

        スキル
        休止中

        Local open-source dev tool to debug, secure, and evaluate LLM agents. Provides static analysis, dynamic security checks, and runtime monitoring - integrates with Cursor and Claude Code.

        Python
        • agent-debugging
        • agent-security
        • agent-trace
        • ai-security-tool
        • behavior-analysis

        github測定済み成長情報源を開く ↗

        インストール /plugin marketplace add cylestio/agent-inspector

        9GitHubスター安定
      • 21

        スキル
        活動中

        Anchor — the production-grade AGENTS.md template for AI coding agents. 51 sections of battle-tested rules. Keep your agents grounded.

        ライセンス: MIT
        • agent-instructions
        • agents-md
        • ai-agent-instructions
        • ai-coding
        • ai-coding-agent

        github測定済み成長情報源を開く ↗

        インストール git clone https://github.com/peva3/anchor ~/.claude/skills/anchor

        8GitHubスター安定
      • 22

        スキル
        休止中

        A self-improving harness router for Claude Code.

        Pythonライセンス: MIT
        • a-b-testing
        • ai-agent
        • ai-orchestration
        • ai-routing
        • ai-workflow

        github測定済み成長情報源を開く ↗

        インストール /plugin marketplace add SeongwoongCho/adaptive-harness

        8GitHubスター安定

      学習・参考リソース

      Ranked by normalized popularity across sources. これらは個別に参照でき、主要ランキングには含まれません。

      1. 1

        awesome-llm-observability

        スキル
        活動中情報源を開く ↗

        50+ curated LLM observability tools PLUS 26 Agent Skills (several with runnable, unit-tested scripts) to build, evaluate, debug, secure & monitor reliable LLM apps. Tracing, evals, guardrails, LLMOps.

        Python
        • ai-agents
        • ai-engineering
        • ai-observability
        • awesome
        • awesome-list
        github

        インストール git clone https://github.com/ContextJet-ai/awesome-llm-observability ~/.claude/skills/awesome-llm-observability

        リソース測定済み成長
        33GitHubスター+2 (+6.5 %)
      2. 2

        Agentic_AI_Engineer

        エージェント
        活動中情報源を開く ↗

        My complete journey to becoming an Agentic AI Engineer through structured learning, projects, experiments, and production-ready implementations of modern AI systems.

        Jupyter Notebookライセンス: MIT
        • a2a-protocol
        • agent-orchestration
        • ai-guardrails
        • fastapi
        • kubernetes
        githubリソース測定済み成長
        18GitHubスター安定
      3. 3

        trigger_tree

        スキル
        活動中情報源を開く ↗

        Documentation-discovery telemetry for Claude Code — heat/cold maps, health grade, evidence-backed router fixes. 100% local, zero tokens. /tt

        Pythonライセンス: MIT
        • ai-agents
        • claude-code
        • claude-code-plugin
        • docs-as-code
        • documentation
        github

        インストール /plugin marketplace add Hedde/trigger_tree

        リソース測定済み成長
        14GitHubスター安定