ツールの説明は英語です。

LLM可観測性

LLMアプリの監視、トレース、評価、品質管理。

ツールランキング

Ranked by normalized popularity across sources. 各値は情報源固有の期間を使用し、変化の算出には7日間で2回以上の測定が必要です。

1
promptfoo
その他
活動中最終コミット：今日 · 2026-09-03
Test your prompts, agents, and RAGs. Red teaming/pentesting/vulnerability scanning for AI. Compare performance of GPT, Claude, Gemini, DeepSeek, and more. Simple declarative configs with command line and CI/CD integration. Used by OpenAI…
TypeScriptライセンス: MIT
- ci
- ci-cd
- cicd
- evaluation
- evaluation-framework
github3年前に作成測定済み成長情報源を開く ↗
24 768GitHubスター+142 (+0.58 %)
2
mlflow
エージェント
活動中最終コミット：今日 · 2026-09-02
The open source AI engineering platform for agents, LLMs, and ML models. MLflow enables teams of all sizes to debug, evaluate, monitor, and optimize production-quality AI applications while controlling costs and managing access to models…
Pythonライセンス: Apache-2.0
- agentops
- agents
- ai
- ai-governance
- apache-spark
github8年前に作成測定済み成長情報源を開く ↗
27 783GitHubスター+82 (+0.30 %)
3
prefect
ライブラリ
活動中最終コミット：今日 · 2026-09-03
Prefect is a workflow orchestration framework for building resilient data pipelines in Python.
Pythonライセンス: Apache-2.0
- automation
- data
- data-engineering
- data-ops
- data-science
github8年前に作成測定済み成長情報源を開く ↗
23 766GitHubスター+66 (+0.28 %)
4
vector
その他
活動中最終コミット：今日 · 2026-09-03
A high-performance observability data pipeline.
Rustライセンス: MPL-2.0
- agent
- cloud-native
- data-transformation
- datadog
- etl
github8年前に作成測定済み成長情報源を開く ↗
22 509GitHubスター+40 (+0.18 %)
5
openobserve
その他
活動中最終コミット：今日 · 2026-09-03
Open source observability platform for logs, metrics, traces, frontend monitoring, pipelines and LLM observability. A sophisticated, simple and highly performant alternative to Datadog, Splunk, and Elasticsearch with 140x lower storage…
TypeScriptライセンス: AGPL-3.0
- analytics
- apm
- datadog
- elasticsearch
- grafana
github3年前に作成測定済み成長情報源を開く ↗
21 615GitHubスター+96 (+0.45 %)
6
signoz
その他
活動中最終コミット：今日 · 2026-09-03
SigNoz is an open-source, OpenTelemetry-native observability platform for your team and their AI agents. Get logs, metrics, and traces in one tool with features like APM, distributed tracing, log management, infra monitoring, etc. Combined…
TypeScript
- apm
- application-monitoring
- distributed-tracing
- go
- good-first-issue
github5年前に作成測定済み成長情報源を開く ↗
32 003GitHubスター+50 (+0.16 %)
7
mastra
その他
活動中最終コミット：今日 · 2026-09-03
Mastra is the modern TypeScript framework for AI-powered applications and agents.
TypeScript
- agents
- ai
- chatbots
- evals
- javascript
github2年前に作成測定済み成長情報源を開く ↗
27 658GitHubスター+128 (+0.46 %)
8
netdata
その他
活動中最終コミット：今日 · 2026-09-03
The fastest path to AI-powered full stack observability, even for lean teams.
Goライセンス: GPL-3.0
- ai
- alerting
- cncf
- data-visualization
- database
github13年前に作成測定済み成長情報源を開く ↗
80 412GitHubスター+85 (+0.11 %)
9
cilium
その他
活動中最終コミット：今日 · 2026-09-03
eBPF-based Networking, Security, and Observability
Goライセンス: Apache-2.0
- bpf
- cncf
- cni
- containers
- ebpf
github10年前に作成測定済み成長情報源を開く ↗
25 047GitHubスター+29 (+0.12 %)
10
kubeshark
エージェント
活動中最終コミット：2日前 · 2026-09-01
eBPF-powered network observability for Kubernetes. Indexes L4/L7 traffic with full K8s context, decrypts TLS without keys. Queryable by AI agents via MCP and humans via dashboard.
Goライセンス: Apache-2.0
- cloud-native
- devops
- docker
- ebpf
- golang
github5年前に作成測定済み成長情報源を開く ↗
12 068GitHubスター+8 (+0.07 %)
11
garak
その他
活動中最終コミット：8日前 · 2026-08-25
the LLM vulnerability scanner
Pythonライセンス: Apache-2.0
- ai
- llm-evaluation
- llm-security
- security-scanners
- vulnerability-assessment
github3年前に作成測定済み成長情報源を開く ↗
9 079GitHubスター+31 (+0.34 %)
12
openstatus
MCP
活動中最終コミット：今日 · 2026-09-02
🫖 Status page with uptime monitoring & API monitoring as code 🫖
TypeScriptライセンス: AGPL-3.0
- alerting
- incident-management
- mcp
- mcp-server
- monitoring
github3年前に作成測定済み成長情報源を開く ↗
9 056GitHubスター+31 (+0.34 %)
13
yao-meta-skill
スキル
活動中最終コミット：17日前 · 2026-08-17
YAO = Yielding AI Outcomes. A rigorous engineering, evaluation, governance, and portability system for reusable agent skills.
Pythonライセンス: MIT
- agent-skills
- ai-agents
- evaluation
- governance
- meta-skill
github5か月前に作成測定済み成長情報源を開く ↗
インストール git clone https://github.com/yaojingang/yao-meta-skill ~/.claude/skills/yao-meta-skill
2 577GitHubスター+35 (+1.4 %)
14
agent-skill-creator
スキル
活動中最終コミット：2日前 · 2026-09-01
Build tested agent skills and govern their lifecycle through a user-defined marketplace: evidence, discovery, updates, rollback, quarantine, and 17-platform distribution.
Pythonライセンス: MIT
- agent-skills
- ai-agents
- claude-code
- codex
- cursor
github10か月前に作成測定済み成長情報源を開く ↗
インストール git clone https://github.com/FrancyJGLisboa/agent-skill-creator ~/.claude/skills/agent-skill-creator
2 367GitHubスター+28 (+1.2 %)
15
trpc-agent-go
MCP
活動中最終コミット：1日前 · 2026-09-01
A Go framework for building production agent systems with graph workflows, tools, memory, A2A, AG-UI, MCP, evaluation, and observability.
Goライセンス: Apache-2.0
- a2a
- a2a-protocol
- ag-ui
- agent
- agent-framework
github15か月前に作成測定済み成長情報源を開く ↗
1 759GitHubスター+18 (+1.0 %)
16
superlog
その他
活動中最終コミット：4日前 · 2026-08-30
Open-source observability tool that uses AI agents to self-heal your software
TypeScriptライセンス: Apache-2.0
- ai
- llm
- memory
- observability
- opentelemetry
github3か月前に作成測定済み成長情報源を開く ↗
1 404GitHubスター+2 (+0.14 %)
17
Flawless
その他
活動中最終コミット：20日前 · 2026-08-14
AI SRE AgenticOps for Kubernetes and cloud infrastructure.
Python
- agenticops
- ai
- aiops
- aisre
- cloud
github55日前に作成測定済み成長情報源を開く ↗
782GitHubスター+1 (+0.13 %)
18
agent-skills-eval
スキル
活動中最終コミット：28日前 · 2026-08-05
A test runner for agentskills.io-style AI agent skills
TypeScriptライセンス: MIT
- agent-evals
- agent-skills
- agentskills
- ai-agents
- cli
github4か月前に作成測定済み成長情報源を開く ↗
インストール git clone https://github.com/darkrishabh/agent-skills-eval ~/.claude/skills/agent-skills-eval
719GitHubスター+13 (+1.8 %)
19
databuff
エージェント
活動中最終コミット：1日前 · 2026-09-02
DataBuff is an AI-native APM built on Opentelemetry，with multi-agent troubleshooting out of the box.
Javaライセンス: AGPL-3.0
- aiops
- apm
- application-monitoring
- devops
- distributed-tracing
github2か月前に作成測定済み成長情報源を開く ↗
642GitHubスター+32 (+5.2 %)
20
SkillCorpus
スキル
活動中最終コミット：2日前 · 2026-09-01
Open-source infrastructure that turns scattered SKILL.md files into curated, retrieval-ready agent-skill corpora—with retrieval and evaluation tooling included.
Pythonライセンス: Apache-2.0
- agent-memory
- agent-skills
- ai-agents
- benchmark
- dataset
github23日前に作成新着測定済み成長情報源を開く ↗
インストール git clone https://github.com/EverMind-AI/SkillCorpus ~/.claude/skills/SkillCorpus
424GitHubスター+170 (+66.9 %)
21
SkillEvaluator
スキル
活動中最終コミット：1日前 · 2026-09-01
Multi-tier framework for evaluating AI agent skills with quality gates, semantic overlap detection, synthetic evaluation dataset generation, and live agent evaluation that measures how skills affect agent behavior.
Pythonライセンス: Apache-2.0
- agent-evaluation
- agent-security
- agent-skills
- agentic-ai
- benchmark
github2か月前に作成測定済み成長情報源を開く ↗
インストール git clone https://github.com/NVIDIA/SkillEvaluator ~/.claude/skills/SkillEvaluator
389GitHubスター+57 (+17.2 %)
22
claude-code-karma
スキル
活動中最終コミット：4日前 · 2026-08-30
Dashboard for monitoring claude code sessions.
Pythonライセンス: Apache-2.0
- agents
- agentskills
- claude-code
- claude-code-plugin
- claude-code-skills
github8か月前に作成測定済み成長情報源を開く ↗
インストール /plugin marketplace add JayantDevkar/claude-code-karma
323GitHubスター+2 (+0.62 %)
23
aura
MCP
活動中最終コミット：1日前 · 2026-09-02
AURA is a production-tested SRE agent platform you can deploy in minutes. AURA handles the guardrails, APIs, state management, streaming, and failure handling required to put AI to work safely on production infrastructure.
Rustライセンス: Apache-2.0
- a2a
- ai-agent-framework
- ai-agents
- ai-sre
- aiops
github6か月前に作成測定済み成長情報源を開く ↗
254GitHubスター-3 (-1.2 %)
24
langfuse-docs
スキル
活動中最終コミット：1日前 · 2026-09-02
🪢 Langfuse documentation -- Langfuse is the open source LLM Engineering Platform. Observability, evals, prompt management, playground and metrics to debug and improve LLM apps
MDXライセンス: MIT
- agent-skills
- agents
- genai
- hacktoberfest
- langfuse
github3年前に作成測定済み成長情報源を開く ↗
インストール git clone https://github.com/langfuse/langfuse-docs ~/.claude/skills/langfuse-docs
239GitHubスター+3 (+1.3 %)
25
idun-agent-platform
スキル
活動中最終コミット：27日前 · 2026-08-06
🟪 Open-source runtime that ships any LangGraph or Google ADK agent as a production-ready FastAPI service. Bundled , AG-UI copilotkit API, chat UI, 15+ guardrails, MCP, OpenTelemetry, OIDC. One pip install. Self-hosted, no vendor lock-in.
Pythonライセンス: GPL-3.0
- a2a-protocol
- ag-ui-protocol
- agent-platform
- agentic-ai
- agents
github15か月前に作成測定済み成長情報源を開く ↗
インストール git clone https://github.com/Idun-Group/idun-agent-platform ~/.claude/skills/idun-agent-platform
198GitHubスター-1 (-0.50 %)

LLM可観測性

用途

アクティビティ

並び順

ツールランキング

promptfoo

mlflow

prefect

vector

openobserve

signoz

mastra

netdata

cilium

kubeshark

garak

openstatus

yao-meta-skill

agent-skill-creator

trpc-agent-go

superlog

Flawless

agent-skills-eval

databuff

SkillCorpus

SkillEvaluator

claude-code-karma

aura

langfuse-docs

idun-agent-platform