ツールの説明は英語です。

LLM可観測性

LLMアプリの監視、トレース、評価、品質管理。

用途

アクティビティ

並び順

75

ツールランキング

情報源間で正規化した測定済み成長順です。 各値は情報源固有の期間を使用し、変化の算出には7日間で2回以上の測定が必要です。

  1. 1

    MCP
    活動中

    Query Spanlens LLM observability from Cursor, Claude Desktop, or Continue via MCP.

    ↓ 32 DL/週TypeScriptライセンス: MIT

      mcp測定済み成長情報源を開く ↗

      インストール claude mcp add mcp-server -- npx @spanlens/mcp-server

      12GitHubスター安定
    • 2

      その他
      活動中

      Test your prompts, agents, and RAGs. Red teaming/pentesting/vulnerability scanning for AI. Compare performance of GPT, Claude, Gemini, DeepSeek, and more. Simple declarative configs with command line and CI/CD integration. Used by OpenAI…

      TypeScriptライセンス: MIT
      • ci
      • ci-cd
      • cicd
      • evaluation
      • evaluation-framework

      github測定済み成長情報源を開く ↗

      24 768GitHubスター+142 (+0.58 %)
    • 3

      その他
      活動中

      AI SRE AgenticOps for Kubernetes and cloud infrastructure.

      Python
      • agenticops
      • ai
      • aiops
      • aisre
      • cloud

      github測定済み成長情報源を開く ↗

      782GitHubスター+1 (+0.13 %)
    • 4

      エージェント
      活動中

      The open source AI engineering platform for agents, LLMs, and ML models. MLflow enables teams of all sizes to debug, evaluate, monitor, and optimize production-quality AI applications while controlling costs and managing access to models…

      Pythonライセンス: Apache-2.0
      • agentops
      • agents
      • ai
      • ai-governance
      • apache-spark

      github測定済み成長情報源を開く ↗

      27 783GitHubスター+82 (+0.30 %)
    • 5

      ライブラリ
      活動中

      Prefect is a workflow orchestration framework for building resilient data pipelines in Python.

      Pythonライセンス: Apache-2.0
      • automation
      • data
      • data-engineering
      • data-ops
      • data-science

      github測定済み成長情報源を開く ↗

      23 766GitHubスター+66 (+0.28 %)
    • 6

      その他
      活動中

      A high-performance observability data pipeline.

      Rustライセンス: MPL-2.0
      • agent
      • cloud-native
      • data-transformation
      • datadog
      • etl

      github測定済み成長情報源を開く ↗

      22 509GitHubスター+40 (+0.18 %)
    • 7

      その他
      活動中

      Open source observability platform for logs, metrics, traces, frontend monitoring, pipelines and LLM observability. A sophisticated, simple and highly performant alternative to Datadog, Splunk, and Elasticsearch with 140x lower storage…

      TypeScriptライセンス: AGPL-3.0
      • analytics
      • apm
      • datadog
      • elasticsearch
      • grafana

      github測定済み成長情報源を開く ↗

      21 615GitHubスター+96 (+0.45 %)
    • 8

      その他
      活動中

      SigNoz is an open-source, OpenTelemetry-native observability platform for your team and their AI agents. Get logs, metrics, and traces in one tool with features like APM, distributed tracing, log management, infra monitoring, etc. Combined…

      TypeScript
      • apm
      • application-monitoring
      • distributed-tracing
      • go
      • good-first-issue

      github測定済み成長情報源を開く ↗

      32 003GitHubスター+50 (+0.16 %)
    • 9

      その他
      活動中

      Mastra is the modern TypeScript framework for AI-powered applications and agents.

      TypeScript
      • agents
      • ai
      • chatbots
      • evals
      • javascript

      github測定済み成長情報源を開く ↗

      27 658GitHubスター+128 (+0.46 %)
    • 10

      その他
      活動中

      The fastest path to AI-powered full stack observability, even for lean teams.

      Goライセンス: GPL-3.0
      • ai
      • alerting
      • cncf
      • data-visualization
      • database

      github測定済み成長情報源を開く ↗

      80 412GitHubスター+85 (+0.11 %)
    • 11

      MCP
      活動中

      🫖 Status page with uptime monitoring & API monitoring as code 🫖

      TypeScriptライセンス: AGPL-3.0
      • alerting
      • incident-management
      • mcp
      • mcp-server
      • monitoring

      github測定済み成長情報源を開く ↗

      9 056GitHubスター+31 (+0.34 %)
    • 12

      その他
      活動中

      eBPF-based Networking, Security, and Observability

      Goライセンス: Apache-2.0
      • bpf
      • cncf
      • cni
      • containers
      • ebpf

      github測定済み成長情報源を開く ↗

      25 047GitHubスター+29 (+0.12 %)
    • 13

      エージェント
      活動中

      eBPF-powered network observability for Kubernetes. Indexes L4/L7 traffic with full K8s context, decrypts TLS without keys. Queryable by AI agents via MCP and humans via dashboard.

      Goライセンス: Apache-2.0
      • cloud-native
      • devops
      • docker
      • ebpf
      • golang

      github測定済み成長情報源を開く ↗

      12 068GitHubスター+8 (+0.07 %)
    • 14

      エージェント
      活動中

      DataBuff is an AI-native APM built on Opentelemetry，with multi-agent troubleshooting out of the box.

      Javaライセンス: AGPL-3.0
      • aiops
      • apm
      • application-monitoring
      • devops
      • distributed-tracing

      github測定済み成長情報源を開く ↗

      642GitHubスター+32 (+5.2 %)
    • 15

      その他
      活動中

      Evidence-first infrastructure for reproducible, isolated executable evaluation and online rewards.

      Pythonライセンス: Apache-2.0
      • benchmark
      • kubernetes
      • llm-evaluation
      • llm-infrastructure
      • ray

      github測定済み成長情報源を開く ↗

      140GitHubスター+24 (+20.7 %)
    • 16

      エージェント
      活動中

      The Operating System for Scalable Enterprise AI Agents - Run, orchestrate, and deploy Compliant Enterprise AI Agents at scale across frameworks, without lock-in, rewrites or fragile glue code. Native support for MCP, A2A. Interface with all…

      Pythonライセンス: Apache-2.0
      • a2a
      • adk
      • ai-agents
      • aws
      • azure

      github測定済み成長情報源を開く ↗

      156GitHubスター+19 (+13.9 %)
    • 17

      MCP
      活動中

      Production reliability, benchmarking, and evaluation layer for MCP agent runtimes — protocol negotiation, A2A interop, circuit breakers, connection pooling, adaptive streaming, and autoscaling, with measured throughput/latency and a…

      Pythonライセンス: Apache-2.0
      • a2a-protocol
      • agent-to-agent
      • ai-agents
      • async-python
      • autoscaling

      github測定済み成長情報源を開く ↗

      3GitHubスター安定
    • 18

      MCP
      活動中

      Architecture-first Python scaffold for an auditable multi-agent corporate credit desk using A2A, MCP, deterministic credit policies, model routing, and OpenTelemetry.

      Python
      • a2a-protocol
      • agentic-ai
      • auditability
      • clean-architecture
      • credit-risk

      github測定済み成長情報源を開く ↗

      0GitHubスター安定
    • 19

      MCP
      活動中

      AURA is a production-tested SRE agent platform you can deploy in minutes. AURA handles the guardrails, APIs, state management, streaming, and failure handling required to put AI to work safely on production infrastructure.

      Rustライセンス: Apache-2.0
      • a2a
      • ai-agent-framework
      • ai-agents
      • ai-sre
      • aiops

      github測定済み成長情報源を開く ↗

      254GitHubスター-3 (-1.2 %)
    • 20

      エージェント
      活動中

      Generic DeepSeek Harness (dsh) plugins: A2A protocol server, session storage mirror, and Langfuse observability.

      TypeScriptライセンス: MIT
      • agent2agent
      • ai-agents
      • cordis
      • deepseek-harness
      • dsh

      github測定済み成長情報源を開く ↗

      1GitHubスター安定
    • 21

      MCP
      活動中

      A typed, replayable, budget-aware programming language for LLM agents. Compiles to Python & TypeScript.

      Shell
      • a2a
      • agent-framework
      • agentic-ai
      • ai
      • ai-agents

      github測定済み成長情報源を開く ↗

      2GitHubスター安定
    • 22

      スキル
      活動中

      Production patterns for agent orchestrators, harnesses, evals, MCP/A2A interoperability, memory, provider routing, and LLM usage metering.

      Pythonライセンス: MIT
      • a2a
      • agent-orchestration
      • agent-skills
      • ai-agents
      • developer-tools

      github測定済み成長情報源を開く ↗

      インストール git clone https://github.com/ssheleg/agent-stack ~/.claude/skills/agent-stack

      2GitHubスター+1 (+100.0 %)
    • 23

      スキル
      活動中

      Multi-agent quality gate skill for Claude Code that researches, reviews, tests and challenges AI-generated work before the final answer.

      • agentic-coding
      • agentic-workflow
      • ai-agent-skills
      • ai-code-review
      • ai-workflows

      github測定済み成長情報源を開く ↗

      インストール git clone https://github.com/ma-nucho-pro/supervisor-skill-claude ~/.claude/skills/supervisor-skill-claude

      2GitHubスター安定
    • 24

      スキル
      活動中

      🪢 Langfuse documentation -- Langfuse is the open source LLM Engineering Platform. Observability, evals, prompt management, playground and metrics to debug and improve LLM apps

      MDXライセンス: MIT
      • agent-skills
      • agents
      • genai
      • hacktoberfest
      • langfuse

      github測定済み成長情報源を開く ↗

      インストール git clone https://github.com/langfuse/langfuse-docs ~/.claude/skills/langfuse-docs

      239GitHubスター+3 (+1.3 %)
    • 25

      エージェント
      活動中

      Deterministic crash tests for agent control planes: paired worlds, hard stops, budgets, scopes, approvals, and hash-linked receipts.

      TypeScriptライセンス: Apache-2.0
      • a2a
      • agent-evaluation
      • ai-agents
      • benchmark
      • deterministic-replay

      github測定済み成長情報源を開く ↗

      1GitHubスター安定