ツールの説明は英語です。

LLM可観測性

LLMアプリの監視、トレース、評価、品質管理。

用途

アクティビティ

並び順

122

ツールランキング

情報源間で正規化した測定済み成長順です。 各値は情報源固有の期間を使用し、変化の算出には7日間で2回以上の測定が必要です。

  1. 1

    MCP
    活動中

    MCP server for Langfuse LLM observability — trace and observation analysis.

    TypeScriptライセンス: MIT

      mcp測定済み成長情報源を開く ↗

      インストール claude mcp add langfuse -- npx langfuse-observability-mcp-server

      78GitHubスター安定
    • 2

      その他
      活動中

      🔑 HomeStream · 家园·流 — 零成本自托管多Agent协作框架，通往AI世界的那把钥匙 | Zero-cost self-hosted multi-agent framework — The key to AI world

      Pythonライセンス: MIT
      • a2a-protocol
      • agent-framework
      • ai
      • causal-memory
      • event-stream

      github測定済み成長情報源を開く ↗

      0GitHubスター安定
    • 3

      その他
      活動中

      AgentX python SDK. Build multi-agent AI workforce. Run evaluation. Trace your agent. Full Observability.

      Pythonライセンス: Apache-2.0
      • a2a
      • agent
      • agent-monitoring
      • evaluation
      • mcp

      github測定済み成長情報源を開く ↗

      68GitHubスター安定
    • 4

      エージェント
      休止中

      A Python proof-of-concept for tracing multi-turn Agent-to-Agent (A2A) conversations as a single unified MLflow trace for LLM observability and evaluation.

      Python
      • a2a
      • agent-to-agent
      • ai-agents
      • conversational-ai
      • llm-evaluation

      github測定済み成長情報源を開く ↗

      0GitHubスター安定
    • 5

      スキル
      活動中

      Make Claude Opus 4.8 behave like Claude Fable 5 — doctrine output style, drift-catching hooks, and an eval loop against golden Fable transcripts. Claude Code plugin.

      Shellライセンス: MIT
      • anthropic
      • claude
      • claude-code
      • claude-code-plugin
      • evals

      github測定済み成長情報源を開く ↗

      インストール /plugin marketplace add rennf93/opus-fable-playbook

      33GitHubスター安定
    • 6

      MCP
      活動中

      AgentGateway — independent third-party profile of a public API surface, by API Evangelist. AgentGateway is an open-source, AI-native proxy and gateway for routing, observing, and governing traffic to and from AI agents, LLM providers, and…

      • agent-to-agent
      • ai-gateway
      • api-gateway
      • apis-json
      • cncf

      github測定済み成長情報源を開く ↗

      0GitHubスター安定
    • 7

      スキル
      休止中

      🔍 AI observability skill for Claude Code. Debug LangChain/LangGraph agents by fetching execution traces from LangSmith Studio directly in your terminal.

      ライセンス: MIT
      • agent-debugging
      • ai-agents
      • claude-skills
      • claude-skills-creator
      • claude-skills-hub

      github測定済み成長情報源を開く ↗

      インストール git clone https://github.com/OthmanAdi/langsmith-fetch-skill ~/.claude/skills/langsmith-fetch-skill

      27GitHubスター安定
    • 8

      エージェント
      休止中

      Policy-enforced observability and fail-closed guardrails for MCP/A2A multi-agent systems.

      Rust
      • a2a
      • ai-agents
      • llm-security
      • mcp
      • multi-agent

      github測定済み成長情報源を開く ↗

      26GitHubスター安定
    • 9

      エージェント
      休止中

      OpenTelemetry semantic conventions and instrumentation for agent provenance, derivation lineage, and acceptance criteria evaluation. Fills the Microsoft AI stack observability gap.

      Python
      • a2a-protocol
      • agentic-ai
      • ai-agents
      • observability
      • opentelemetry

      github測定済み成長情報源を開く ↗

      0GitHubスター安定
    • 10

      スキル
      活動中

      Sentry instrumentation skill for system-behavior tracking

      Shellライセンス: MIT
      • agent-skills
      • claude-skills
      • codex-skill
      • instrumentation
      • monitoring

      github測定済み成長情報源を開く ↗

      インストール git clone https://github.com/tortastudios/sentry-instrumentation ~/.claude/skills/sentry-instrumentation

      24GitHubスター安定
    • 11

      MCP
      活動中

      Governed local-LLM observability: model policy, prompt scanner, capture proxy, 21 tools.

      Pythonライセンス: MIT

        mcp測定済み成長情報源を開く ↗

        インストール claude mcp add ai-guardian -- uvx ai-guardian-aiops

        0GitHubスター安定
      • 12

        その他
        活動中

        AI-detector auditing toolkit: measures how often a detector flags genuine human writing, how stable its verdict is across seeds, and whether that verdict survives meaning-preserving edits. Detector-in-the-loop measurement harness. Claude…

        Pythonライセンス: MIT
        • ai-detection
        • ai-detector
        • benchmark
        • claude-code
        • claude-code-skill

        github測定済み成長情報源を開く ↗

        18GitHubスター安定
      • 13

        スキル
        活動中

        Measure prompt and skill improvements with blind A/B comparison.

        Pythonライセンス: MIT
        • agent-skills
        • ai-tools
        • claude-code
        • claude-code-plugin
        • claude-code-skill

        github測定済み成長情報源を開く ↗

        インストール /plugin marketplace add shinpr/rashomon

        18GitHubスター安定
      • 14

        エージェント
        休止中

        An AI-powered multi-agent system that demonstrates clinical triage, OTC medication recommendations, and e-pharmacy integration for respiratory conditions. Built with modular agents that collaborate to provide safe, intelligent healthcare…

        Python
        • agent-to-agent
        • agentic-ai
        • aiagent
        • antigravity-ide
        • cursor-ai

        github測定済み成長情報源を開く ↗

        0GitHubスター安定
      • 15

        スキル
        活動中

        Two Claude Code skills for adversarial code review (single-model PAR and multi-model MMAR with cross-critique to catch hallucinations), plus a fixture-based eval suite.

        Python
        • ai-agents
        • claude-code-plugin
        • code-review
        • evals
        • python

        github測定済み成長情報源を開く ↗

        インストール /plugin marketplace add prime-radiant-inc/parallel-adversarial-review

        17GitHubスター安定
      • 16

        MCP
        休止中

        MCP as a Judge: a behavioral MCP that strengthens AI coding assistants via explicit LLM evaluations

        Pythonライセンス: MIT

          mcp測定済み成長情報源を開く ↗

          インストール claude mcp add mcp-as-a-judge -- uvx mcp-as-a-judge

          17GitHubスター安定
        • 17

          スキル
          活動中

          Make Claude write clearly, for everyone.

          Pythonライセンス: 0BSD
          • claude-code
          • claude-code-plugin
          • controlled-language
          • llm-evaluation
          • output-style

          github測定済み成長情報源を開く ↗

          インストール /plugin marketplace add stefanobaghino/simple-output-styles

          16GitHubスター安定
        • 18

          エージェント
          休止中

          AgentOps: Multi-agent infrastructure remediation platform. A2A protocol, agent coordination, HITL approval, auto-rollback.

          Pythonライセンス: MIT
          • a2a-protocol
          • ai
          • automation
          • infrastructure
          • llm

          github測定済み成長情報源を開く ↗

          0GitHubスター安定
        • 19

          スキル
          活動中

          Claude Code plugin marketplace — agentic-engineering (spec-driven shape→decide→execute→measure→eval with adversarial review) + github-keeper (audit/elevate READMEs and make a repo open-source-ready).

          Pythonライセンス: MIT
          • adr
          • agentic-engineering
          • ai-agents
          • anthropic
          • claude-code

          github測定済み成長情報源を開く ↗

          インストール /plugin marketplace add GiustoPiedimonte/agentic-engineering-marketplace

          13GitHubスター安定
        • 20

          スキル
          活動中

          Glanceable Claude Code and Codex state in your terminal tabs: white=idle, blue=working, orange=waiting. Multi-terminal (iTerm2, WezTerm, AI Power Term), a live status bar with Anthropic usage limits, /sfl and /nil window save-and-restore,…

          Shellライセンス: MIT
          • ai-workflow-observability
          • claude-code
          • claude-code-hooks
          • claude-code-skill
          • claude-code-skills

          github測定済み成長情報源を開く ↗

          インストール git clone https://github.com/wasulajr/headsup ~/.claude/skills/headsup

          1GitHubスター安定
        • 21

          その他
          休止中

          A Claude Code skill that adds a rubric-based eval layer to any agent project. Framework-agnostic — generates rubric, test cases, judge prompt, and harness. Returns a weighted score plus a judge-leniency signal.

          HTML
          • agent-evaluation
          • anthropic
          • claude-code
          • claude-code-skill
          • evals

          github測定済み成長情報源を開く ↗

          13GitHubスター安定
        • 22

          MCP
          活動中

          Query Spanlens LLM observability from Cursor, Claude Desktop, or Continue via MCP.

          ↓ 32 DL/週TypeScriptライセンス: MIT

            mcp測定済み成長情報源を開く ↗

            インストール claude mcp add mcp-server -- npx @spanlens/mcp-server

            12GitHubスター安定
          • 23

            エージェント
            活動中

            Provide clear documentation for AgentStack’s MCP protocol, plugins, and ecosystem API with usage examples and tool references.

            • a2a
            • anthropic
            • claude-code
            • crewai
            • deep-learning

            github測定済み成長情報源を開く ↗

            0GitHubスター安定
          • 24

            その他
            活動中

            Terminal-first validation harness for reviewing PRDs, RFCs, strategy docs, and experiment plans.

            TypeScript
            • ai-agents
            • claude-code
            • claude-code-skills
            • cli
            • evals

            github測定済み成長情報源を開く ↗

            1GitHubスター安定
          • 25

            スキル
            活動中

            Turn one decision into a judged tournament of solutions, then pick the best — a Claude Code skill that generates candidates, auto-derives the rubric, judges independently, and returns a defensible winner.

            JavaScriptライセンス: MIT
            • ai-agents
            • anthropic
            • claude-code
            • claude-code-plugin
            • claude-skill

            github測定済み成長情報源を開く ↗

            インストール /plugin marketplace add CoriChui/bakeoff

            10GitHubスター安定