Observabilité LLM : outils pour développeurs

Supervision, traces, évaluation et suivi de la qualité des applications LLM. Une entrée peut apparaître dans plusieurs usages lorsque ses topics ou sa description fournissent plusieurs signaux explicites.

Usage

Activité

Trier par

123 entrées dans cette vue.

Classement des outils

Classement par date de création, des plus récentes aux plus anciennes ; les entrées sans date viennent en dernier. Les valeurs brutes gardent leur fenêtre propre, indiquée sous chaque outil ; une variation exige au moins deux relevés sur les 7 derniers jours.

  1. 1

    Skill
    Actif
    PythonLicence: MIT
    • agent-skills
    • ai-agents
    • claude-code
    • codex
    • cursor

    githubprogression mesuréeVoir la source ↗

    Installer git clone https://github.com/FrancyJGLisboa/agent-skill-creator ~/.claude/skills/agent-skill-creator

    2 367étoiles GitHub+15 (+0.64 %)
  2. 2

    Agent
    Actif

    Orchestrateur d'agents A2A pour évaluer des agents sur le benchmark AppWorld, construit sur le SDK AgentBeats.

    Reformulée en français
    Python
    • a2a-protocol
    • agentbeats
    • appworld
    • evaluation
    • llm-agents

    githubprogression mesuréeVoir la source ↗

    0étoiles GitHubstable
  3. 3

    MCP
    Dormant

    Serveur MCP comportemental servant de juge pour renforcer les assistants IA de codage par évaluations LLM explicites.

    Reformulée en français
    PythonLicence: MIT

      mcpprogression mesuréeVoir la source ↗

      Installer claude mcp add mcp-as-a-judge -- uvx mcp-as-a-judge

      17étoiles GitHubstable
    • 4

      Autre
      Actif

      Outil en ligne de commande pour créer et gérer des agents IA prêts pour l'entreprise utilisant le protocole A2A.

      Reformulée en français
      GoLicence: Apache-2.0
      • a2a
      • agents
      • ai
      • containerized
      • docker

      githubprogression mesuréeVoir la source ↗

      14étoiles GitHub+1 (+7.7 %)
    • 5

      Agent
      Actif

      Un système d'exploitation pour orchestrer et déployer des agents IA d'entreprise à l'échelle, sans dépendance à un framework, avec support natif de MCP et A2A.

      Reformulée en français
      PythonLicence: Apache-2.0
      • a2a
      • adk
      • ai-agents
      • aws
      • azure

      githubprogression mesuréeVoir la source ↗

      166étoiles GitHub+25 (+17.7 %)
    • 6

      Skill
      Actif

      Framework d'évaluation unifié pour les agents IA et les modèles de récompense.

      Reformulée en français
      PythonLicence: Apache-2.0
      • agent
      • agent-skills
      • ai-agent
      • alignment
      • evaluation

      githubprogression mesuréeVoir la source ↗

      Installer git clone https://github.com/agentscope-ai/OpenJudge ~/.claude/skills/OpenJudge

      816étoiles GitHub+11 (+1.4 %)
    • 7

      Skill
      Actif

      Un runtime open-source qui déploie les agents LangGraph ou Google ADK en service FastAPI prêt pour la production, avec interface utilisateur, guardrails, MCP et observabilité.

      Reformulée en français
      PythonLicence: GPL-3.0
      • a2a-protocol
      • ag-ui-protocol
      • agent-platform
      • agentic-ai
      • agents

      githubprogression mesuréeVoir la source ↗

      Installer git clone https://github.com/Idun-Group/idun-agent-platform ~/.claude/skills/idun-agent-platform

      199étoiles GitHubstable
    • 8

      MCP
      Actif

      Framework Go pour construire des systèmes d'agents de production avec workflows graphiques, outils, mémoire, A2A, MCP et observabilité.

      Reformulée en français
      GoLicence: Apache-2.0
      • a2a
      • a2a-protocol
      • ag-ui
      • agent
      • agent-framework

      githubprogression mesuréeVoir la source ↗

      1 763étoiles GitHub+15 (+0.86 %)
    • 9

      MCP
      Actif

      Serveur MCP pour l'observabilité LLM Langfuse, analysant traces et observations.

      Reformulée en français
      TypeScriptLicence: MIT

        mcpprogression mesuréeVoir la source ↗

        Installer claude mcp add langfuse -- npx langfuse-observability-mcp-server

        80étoiles GitHub+2 (+2.6 %)
      • 10

        MCP
        Actif

        Serveur Model Context Protocol pour agents IA permettant d'interroger les données de traçage Langfuse.

        Reformulée en français
        PythonLicence: MIT
        • agent-skills
        • ai-agents
        • claude-code
        • codex
        • developer-tools

        githubprogression mesuréeVoir la source ↗

        105étoiles GitHubstable
      • 11

        Agent
        Dormant

        Framework d'évaluation de systèmes multi-agents utilisant PydanticAI pour générer et évaluer des critiques d'articles scientifiques.

        Reformulée en français
        PythonLicence: Apache-2.0
        • a2a-protocol
        • agent-evaluation
        • agentbeats
        • ai-agents
        • benchmarks

        githubprogression mesuréeVoir la source ↗

        2étoiles GitHubstable
      • 12

        Autre
        Actif

        Mastra est un framework TypeScript moderne pour créer des applications et des agents alimentés par l'IA.

        Reformulée en français
        TypeScript
        • agents
        • ai
        • chatbots
        • evals
        • javascript

        githubprogression mesuréeVoir la source ↗

        27 712étoiles GitHub+149 (+0.54 %)
      • 13

        MCP
        Actif

        Page de statut avec surveillance de la disponibilité et monitoring API déclaratif.

        Reformulée en français
        TypeScriptLicence: AGPL-3.0
        • alerting
        • incident-management
        • mcp
        • mcp-server
        • monitoring

        githubprogression mesuréeVoir la source ↗

        9 060étoiles GitHub+31 (+0.34 %)
      • 14

        Autre
        Actif

        Scanner de vulnérabilités spécialisé dans l'évaluation de la sécurité des modèles de langage.

        Reformulée en français
        PythonLicence: Apache-2.0
        • ai
        • llm-evaluation
        • llm-security
        • security-scanners
        • vulnerability-assessment

        githubprogression mesuréeVoir la source ↗

        9 110étoiles GitHub+37 (+0.41 %)
      • 15

        Autre
        Actif

        Outil de test de prompts, d'agents et de RAG permettant d'évaluer les vulnérabilités et les performances de différents modèles de langage via des configurations déclaratives.

        Reformulée en français
        TypeScriptLicence: MIT
        • ci
        • ci-cd
        • cicd
        • evaluation
        • evaluation-framework

        githubprogression mesuréeVoir la source ↗

        24 825étoiles GitHub+159 (+0.64 %)
      • 16

        Autre
        Actif

        Plateforme open-source d'observabilité pour les logs, métriques, traces et monitoring LLM avec une alternative économe en stockage à Datadog et Splunk.

        Reformulée en français
        TypeScriptLicence: AGPL-3.0
        • analytics
        • apm
        • datadog
        • elasticsearch
        • grafana

        githubprogression mesuréeVoir la source ↗

        21 643étoiles GitHub+87 (+0.40 %)
      • 17

        Agent
        Actif

        Outil d'observabilité réseau basé sur eBPF pour Kubernetes qui indexe le trafic L4/L7 avec déchiffrage TLS.

        Reformulée en français
        GoLicence: Apache-2.0
        • cloud-native
        • devops
        • docker
        • ebpf
        • golang

        githubprogression mesuréeVoir la source ↗

        12 068étoiles GitHub+7 (+0.06 %)
      • 18

        Autre
        Actif

        Plateforme open-source d'observabilité native OpenTelemetry fournissant logs, métriques et traces avec APM et monitoring distribuée.

        Reformulée en français
        TypeScript
        • apm
        • application-monitoring
        • distributed-tracing
        • go
        • good-first-issue

        githubprogression mesuréeVoir la source ↗

        32 012étoiles GitHub+42 (+0.13 %)
      • 19

        Autre
        Actif

        Pipeline de données d'observabilité haute performance pour le traitement des logs, métriques et traces.

        Reformulée en français
        RustLicence: MPL-2.0
        • agent
        • cloud-native
        • data-transformation
        • datadog
        • etl

        githubprogression mesuréeVoir la source ↗

        22 511étoiles GitHub+24 (+0.11 %)
      • 20

        Bibliothèque
        Actif

        Framework Python pour construire des pipelines de données résilients par orchestration de workflows.

        Reformulée en français
        PythonLicence: Apache-2.0
        • automation
        • data
        • data-engineering
        • data-ops
        • data-science

        githubprogression mesuréeVoir la source ↗

        23 783étoiles GitHub+67 (+0.28 %)
      • 21

        Agent
        Actif

        Plateforme open source pour déboguer, évaluer, surveiller et optimiser des applications IA en production incluant des agents et des modèles de langage.

        Reformulée en français
        PythonLicence: Apache-2.0
        • agentops
        • agents
        • ai
        • ai-governance
        • apache-spark

        githubprogression mesuréeVoir la source ↗

        27 817étoiles GitHub+86 (+0.31 %)
      • 22

        Autre
        Actif

        Plateforme de mise en réseau, sécurité et observabilité basée sur eBPF pour les conteneurs et Kubernetes.

        Reformulée en français
        GoLicence: Apache-2.0
        • bpf
        • cncf
        • cni
        • containers
        • ebpf

        githubprogression mesuréeVoir la source ↗

        25 070étoiles GitHub+42 (+0.17 %)
      • 23

        Autre
        Actif

        Observabilité full stack assistée par IA pour équipes.

        Reformulée en français
        GoLicence: GPL-3.0
        • ai
        • alerting
        • cncf
        • data-visualization
        • database

        githubprogression mesuréeVoir la source ↗

        80 432étoiles GitHub+78 (+0.10 %)