KI-Tools für Ihren Beruf
Begrenzte BetaBeginnen Sie bei der Auswahl eines KI-Tools mit der gewünschten Aufgabe. usedby verbindet Berufsfelder und Aufgaben mit Tool-Kategorien und öffentlichen Beispielen zur Prüfung.
Ihr Beruf fehlt? Beschreiben Sie die gewünschte Aufgabe.
Modelle trainieren und bewerten
Diese Ergebnisse zeigen öffentliche Nutzung in dieser Kategorie. Sie belegen weder die Nutzung in Ihrem Beruf noch die Eignung für diese genaue Aufgabe. Ihre Anforderungen wurden nicht geprüft.
Kategorie, Branche und Unternehmensgröße
Die Größe beschreibt den Arbeitgeber. Sie belegt keinen Zugang für Selbstständige.
LLM-Observability & Evals
158 Unternehmen, 6 Tools
Zu diesen Zahlen
Die Zahlen betreffen auf usedby erfasste Unternehmen, keine Marktanteile. Alle vier Nachweisstufen zählen. Unbekannte Größen fehlen nur in größenbezogenen Ansichten. Ihre Anforderungen wurden nicht geprüft.
Unternehmen mit bekannter Größe: 60 %. In dieser Kategorie ausgeschlossene Anbieter: 0.
LangSmith
46 Unternehmen
1 bestätigt43 beobachtet2 Signale
Harvey führt Offline-Evaluierungen seines agentischen Suchsystems in LangSmith durch und nutzt dafür OpenTelemetry-Traces aus dem OpenAI Agent SDK. Die Evaluierungen erfassen Metriken wie Halluzinationen, Tool-Recall, Retrieval-Recall, Formatierung und Antwortqualität.
Originaltext
Centralized evaluation infrastructure that we built using the OpenAI Agent SDK's OpenTelemetry traces enables us to run offline evaluations in LangSmith. We track metrics like hallucination, tool recall, retrieval recall, formatting, and answer quality.
Harvey · Quelle lesen 
Braintrust
42 Unternehmen
13 bestätigt28 beobachtet1 Signal
Die Product Manager von Box nutzen Braintrust als führendes System für die Datasets, Experimente und Metriken hinter den Evals des Box Agent.
Originaltext
Box's path to launch was determined by datasets. Before opening the agent to internal dogfooding, the team built a set of roughly eighty questions covering core functionality and decided there would be no internal release until the agent scored above 80%.
Box · Quelle lesen 
Arize AI
32 Unternehmen
9 bestätigt23 beobachtet
Booking.com nutzt Arize, um seine GenAI-Agenten und klassischen ML-Modelle (etwa für Ranking und Betrugserkennung) in der Produktion und während der Entwicklung nachzuverfolgen, zu überwachen und zu bewerten.
Originaltext
In one case, an Arize monitor fired when latency for a specific agent suddenly spiked several standard deviations above its baseline.
Booking.com · Quelle lesen 
Comet Opik
17 Unternehmen
10 bestätigt7 beobachtet
Zencoder nutzt Opik, um die Ausgaben seiner LLM-basierten Coding-Agenten nachzuverfolgen und zu bewerten, unerwartetes Modellverhalten zu debuggen und Prompts und Modelle über Experimente hinweg zu vergleichen.
Originaltext
Opik was built to scale and supports the team's high volume of experimentation, as they are currently running thousands of experiments daily.
Zencoder · Quelle lesen 
Fiddler AI
14 Unternehmen
3 bestätigt11 beobachtet
