Quel outil IA pour votre métier ?
Bêta limitéePour choisir un outil IA, partez de la tâche à accomplir. usedby relie les domaines professionnels et les tâches aux catégories d’outils, avec des exemples publics à examiner.
Votre métier n’est pas dans la liste ? Décrivez la tâche à réaliser.
Entraîner et évaluer des modèles
Ces résultats montrent les usages publics dans cette catégorie. Ils ne prouvent pas l’usage par votre métier ni l’adéquation à cette tâche précise. Vos exigences n’ont pas été évaluées.
Catégorie, secteur et taille d’entreprise
La taille décrit l’employeur. Elle ne prouve pas l’accès à l’outil pour un indépendant.
Observabilité et évaluation des LLM
158 entreprises, 6 outils
À propos de ces chiffres
Les comptes portent sur les entreprises recensées par usedby. Ce ne sont pas des parts de marché. Les quatre niveaux de preuve comptent. Une taille inconnue est exclue uniquement des vues par taille. Vos exigences n’ont pas été évaluées.
Entreprises de taille connue : 60 %. Entreprises éditrices exclues de cette catégorie : 0.
LangSmith
46 entreprises
1 confirmé43 observés2 signaux
Harvey exécute dans LangSmith des évaluations hors ligne de son système de recherche agentique, à partir de traces OpenTelemetry issues de l'OpenAI Agent SDK. Les évaluations suivent des indicateurs tels que les hallucinations, le rappel des outils, le rappel de la recherche, la mise en forme et la qualité des réponses.
Extrait original
Centralized evaluation infrastructure that we built using the OpenAI Agent SDK's OpenTelemetry traces enables us to run offline evaluations in LangSmith. We track metrics like hallucination, tool recall, retrieval recall, formatting, and answer quality.
Harvey · Lire la source 
Braintrust
42 entreprises
13 confirmés28 observés1 signal
Les chefs de produit de Box utilisent Braintrust comme système de référence pour les jeux de données, les expériences et les métriques qui sous-tendent les évaluations de Box Agent.
Extrait original
Box's path to launch was determined by datasets. Before opening the agent to internal dogfooding, the team built a set of roughly eighty questions covering core functionality and decided there would be no internal release until the agent scored above 80%.
Box · Lire la source 
Arize AI
32 entreprises
9 confirmés23 observés
Booking.com utilise Arize pour tracer, surveiller et évaluer ses agents d'IA générative et ses modèles de ML traditionnels (comme le classement et la détection de fraude), en production et pendant le développement.
Extrait original
In one case, an Arize monitor fired when latency for a specific agent suddenly spiked several standard deviations above its baseline.
Booking.com · Lire la source 
Comet Opik
17 entreprises
10 confirmés7 observés
Zencoder utilise Opik pour tracer et évaluer les sorties de ses agents de code basés sur des LLM, déboguer les comportements inattendus des modèles, et comparer des prompts et des modèles d'une expérience à l'autre.
Extrait original
Opik was built to scale and supports the team's high volume of experimentation, as they are currently running thousands of experiments daily.
Zencoder · Lire la source
