Capacité SI principale
Qualité, sécurité et supervisionSystème open source
Promptfoo
Outil de test, d’évaluation, de red teaming et de comparaison pour prompts, agents et systèmes RAG.
Partage repo
Partager cette fiche système
Pratique pour envoyer rapidement un repère open source exploitable, pas seulement un lien brut vers le repo.
Ressources essentielles
Rôle dans le SI
Cycle de vie principal
Superviser
Position architecturale
Outillage de gouvernance
Effet organisationnel
Fiabilisation
Catégorie / sous-catégorie
LLMOps / Évaluation de prompts et agentsPublic cible
Renforcer fiabilisation dans un contexte équipes ia, qa ia, red team, r&d.
Quand le choisir
- Positionnement clair: Évaluation de prompts et agents.
- Interopérabilités naturelles: LLM, RAG, agents.
- Niveau de maturité élevée pour des usages équipes ia, qa ia, red team, r&d.
Quand ne pas le choisir
- Complexité intermédiaire: cadrer la mise en œuvre pour éviter la dette d’exploitation.
- Nécessite une gouvernance explicite du périmètre qualité, sécurité et supervision.
Interopérabilités naturelles
LLMRAGagentsCIbenchmarksred teaming
Cas d’usage types
- Concevoir une trajectoire qualité, sécurité et supervision sur outillage de gouvernance.
- Accélérer le cycle superviser sans rompre la gouvernance d'ensemble.
- Renforcer fiabilisation dans un contexte équipes ia, qa ia, red team, r&d.
Maturité, complexité et exploitation
Maturité
élevée
Complexité
intermédiaire
Licence
MIT
Stars / activité
18.4k
activité récente sur main, date exacte non remontée proprement dans ce lot
Topologies où ce système a du sens
Décisions d’architecture associées
Systèmes proches ou complémentaires
Partage repo
Partager cette fiche système
Vous devez arbitrer au-delà de cette fiche ?
Une fiche système aide à comparer. La décision utile consiste ensuite à replacer ce choix dans votre architecture, vos contraintes d'exploitation et vos marges de réversibilité.