ツールの説明は英語です。

LLM可観測性

LLMアプリの監視、トレース、評価、品質管理。

用途

アクティビティ

並び順

122

ツールランキング

情報源間で正規化した測定済み成長順です。 各値は情報源固有の期間を使用し、変化の算出には7日間で2回以上の測定が必要です。

  1. 1

    その他
    休止中

    Official Python SDK for GT8004 — AI agent observability with MCP, A2A, x402 payment tracking. FastAPI, Flask, FastMCP middleware included.

    github測定済み成長情報源を開く ↗

    1GitHubスター安定
  2. 2

    エージェント
    休止中

    Policy-enforced observability and fail-closed guardrails for MCP/A2A multi-agent systems.

    github測定済み成長情報源を開く ↗

    26GitHubスター安定
  3. 3

    スキル
    活動中

    Claude Code skills where every entry ships receipts — accuracy-gated benchmarks against baseline and placebo, rejects published

    github測定済み成長情報源を開く ↗

    インストール git clone https://github.com/sjh9714/skill-receipts ~/.claude/skills/skill-receipts

    2GitHubスター安定
  4. 4
    活動中

    Sentry instrumentation skill for system-behavior tracking

    github測定済み成長情報源を開く ↗

    インストール git clone https://github.com/tortastudios/sentry-instrumentation ~/.claude/skills/sentry-instrumentation

    24GitHubスター安定
  5. 5

    その他
    休止中

    Multi-agent customer support system with Google ADK & Gemini 2.5 Flash Lite. Kaggle capstone demonstrating 11+ concepts. Automates 80%+ queries, <10s response time.

    github測定済み成長情報源を開く ↗

    2GitHubスター安定
  6. 6

    MCP
    活動中

    A typed, replayable, budget-aware programming language for LLM agents. Compiles to Python & TypeScript.

    github測定済み成長情報源を開く ↗

    2GitHubスター安定
  7. 7

    その他
    活動中

    AI-detector auditing toolkit: measures how often a detector flags genuine human writing, how stable its verdict is across seeds, and whether that verdict survives meaning-preserving edits. Detector-in-the-loop measurement harness. Claude…

    github測定済み成長情報源を開く ↗

    18GitHubスター安定
  8. 8

    エージェント
    休止中

    OpenTelemetry semantic conventions and instrumentation for agent provenance, derivation lineage, and acceptance criteria evaluation. Fills the Microsoft AI stack observability gap.

    github測定済み成長情報源を開く ↗

    0GitHubスター安定
  9. 9

    エージェント
    休止中

    A Multi-Agent System (MAS) evaluation framework using PydanticAI that generates and evaluates scientific paper reviews through a three-tiered assessment approach: traditional metrics, LLM-as-a-Judge, and graph-based complexity analysis.

    github測定済み成長情報源を開く ↗

    2GitHubスター安定
  10. 10
    活動中

    Multi-agent quality gate skill for Claude Code that researches, reviews, tests and challenges AI-generated work before the final answer.

    github測定済み成長情報源を開く ↗

    インストール git clone https://github.com/ma-nucho-pro/supervisor-skill-claude ~/.claude/skills/supervisor-skill-claude

    2GitHubスター安定
  11. 11

    スキル
    活動中

    Measure prompt and skill improvements with blind A/B comparison.

    github測定済み成長情報源を開く ↗

    インストール /plugin marketplace add shinpr/rashomon

    18GitHubスター安定
  12. 12
    休止中

    MCP as a Judge: a behavioral MCP that strengthens AI coding assistants via explicit LLM evaluations

    mcp測定済み成長情報源を開く ↗

    インストール claude mcp add mcp-as-a-judge -- uvx mcp-as-a-judge

    17GitHubスター安定
  13. 13

    エージェント
    活動中

    Multi-agent SRE on-call investigator that auto-triages Slack/Discord infrastructure alerts via AWS Bedrock AgentCore, fanning out to specialized agents (CloudWatch, EKS, Slack/Discord scanners) for parallel investigation.

    github測定済み成長情報源を開く ↗

    3GitHubスター安定
  14. 14

    スキル
    活動中

    Agent skills for Arize — datasets, experiments, and traces via the ax CLI

    github測定済み成長情報源を開く ↗

    インストール git clone https://github.com/Arize-ai/arize-skills ~/.claude/skills/arize-skills

    47GitHubスター安定
  15. 15

    スキル
    活動中

    A skill creator that proves its skills work. Evidence-driven skill creation for Claude Code and Codex: baseline-tested generation, per-skill regression evals, ecosystem doctor, cross-runtime compile, and an opt-in proactive advisor.

    github測定済み成長情報源を開く ↗

    インストール git clone https://github.com/tripleyak/SkillForge ~/.claude/skills/SkillForge

    884GitHubスター-1 (-0.11 %)
  16. 16

    その他
    活動中

    Self-hosted AI SRE for Kubernetes — zero-instrumentation eBPF observability plus a copilot that fixes issues through guardrailed, self-verifying actions. BYO-LLM, air-gapped capable.

    github測定済み成長情報源を開く ↗

    131GitHubスター-4 (-3.0 %)
  17. 17
    活動中

    74 open-source Agent Skills for Claude Code and Codex: AI SEO, AEO and GEO, code review with an A-F ship grade, CI gates, AI evals, design systems, conversion copy, Instagram growth, iOS and Android app shipping, creator rights, and…

    github測定済み成長情報源を開く ↗

    129GitHubスター-4 (-3.0 %)
  18. 18

    スキル
    活動中

    Open benchmark for Claude Code SEO skills — real headless execution against fixture sites with planted-defect answer keys. Deterministic scoring, pre-registered rubric.

    github測定済み成長情報源を開く ↗

    インストール git clone https://github.com/aleclindz/seo-skill-bench ~/.claude/skills/seo-skill-bench

    51GitHubスター-5 (-8.9 %)

学習・参考リソース

情報源間で正規化した測定済み成長順です。 これらは個別に参照でき、主要ランキングには含まれません。

  1. 1
    活動中情報源を開く ↗

    Curated + scored map of official MCP servers and agents for DevOps, Cloud, SRE, and Platform Engineering — every entry rated on production access, approval gates, and audit evidence.

    githubリソース測定済み成長
    77GitHubスター安定
  2. 2

    production-ai-engineering

    エージェント
    活動中情報源を開く ↗

    Handbook técnico aberto sobre engenharia de IA em produção: ML tradicional, LLMs, RAG, agentes, segurança, observabilidade, FinOps e deployment.

    githubリソース測定済み成長
    1GitHubスター安定
  3. 3

    Agentic_AI_Engineer

    エージェント
    活動中情報源を開く ↗

    My complete journey to becoming an Agentic AI Engineer through structured learning, projects, experiments, and production-ready implementations of modern AI systems.

    githubリソース測定済み成長
    18GitHubスター安定
  4. 4

    tunelab

    スキル
    活動中情報源を開く ↗

    Claude Code plugin for LLM fine-tuning, distillation, and evaluation — decide whether you need fine-tuning at all, distill your LLM logs into small local models (MLX/LoRA), evaluate with held-out discipline, and learn the why at every step.

    github

    インストール /plugin marketplace add rchaz/tunelab

    リソース測定済み成長
    6GitHubスター安定