Promptfoo

Promptfoo is a CLI and library for evaluating prompts, models, agents and retrieval applications

Originaltext der Quelle · EN
PRODUKTÜBERBLICK

Beschreibung aus der Quelle

Promptfoo is a CLI and library for evaluating prompts, models, agents and retrieval applications. It organizes test cases and checks; meaningful results depend on the chosen datasets, assertions and providers. Evaluations using external APIs can send data to those providers.

Originaltext der Quelle · EN

Zusammenfassung auf Basis der Quelle; Produktangaben wurden nicht unabhängig getestet.

IN DER QUELLE GENANNTE FUNKTIONEN

Was Promptfoo bietet

  1. 01Compare prompts and model outputs
  2. 02Define repeatable evaluation cases
  3. 03Run red-team checks and CI workflows
Originaltext der Quelle · EN
Was es unterscheidet

Was es unterscheidet

It organizes test cases and checks; meaningful results depend on the chosen datasets, assertions and providers. Evaluations using external APIs can send data to those providers.

Originaltext der Quelle · EN
Für wen es geeignet ist

Für wen es geeignet ist

  • Developers evaluating AI applications
  • Teams maintaining repeatable model checks
Originaltext der Quelle · EN
VOR DER AUSWAHL

Was zu prüfen ist

  • Eine echte Aufgabe testen und das Ergebnis mit den Anforderungen vergleichen.
  • Prüfen, welche Daten gespeichert, weitergegeben oder zum Training genutzt werden.
  • Aktuelle Preise, Nutzungslimits und Kündigungsbedingungen auf der offiziellen Website prüfen.
ANWENDUNGEN

Verwandte Aufgaben

Zuletzt geprüft

Offizieller Link am 21. Okt. 2026 geprüft. Funktionsangaben wurden nicht unabhängig getestet.

Grund für die Auswahl

Verwandte Aufgaben

ProduktePreisPlattformenANWENDUNGEN
PromptfooNicht verifiziertNicht angegebenProduktionsreifen Code erzeugen · Arbeitsabläufe automatisieren
AgentyNicht verifiziertAPIProduktionsreifen Code erzeugen · Arbeitsabläufe automatisieren
AI Trip PlannerNicht verifiziertNicht angegebenProduktionsreifen Code erzeugen · Arbeitsabläufe automatisieren
AI2sqlGratis- und BezahlpläneWindows, macOS, Linux, APIProduktionsreifen Code erzeugen · Arbeitsabläufe automatisieren
AiderNicht verifiziertAPIProduktionsreifen Code erzeugen · Arbeitsabläufe automatisieren