Em dados, análise e aprendizado de máquina, quero
treinar e avaliar modelos
A resposta · Empresas de todo o mercado
Seus pares usam primeiro SigNoz, depois LangSmith.
52 de 224 empresas desta amostra usam SigNoz. Cada linha leva a uma fonte pública.
- 01
5223% - 02
4721% - 03
41 - 04
32 - 05
17
Quais ferramentas de IA as empresas usam para Observabilidade e avaliação de LLMs? Beta limitada
Sua profissão não está na lista? Descreva a tarefa que deseja realizar.
Treinar e avaliar modelos
Estes resultados mostram usos públicos nesta categoria. Não comprovam o uso pela sua profissão nem a adequação a esta tarefa exata. Seus requisitos não foram avaliados.
Categoria, setor e porte da empresa
O porte descreve o empregador. Não comprova o acesso para um profissional autônomo.
Observabilidade e avaliação de LLMs
224 empresas, 9 ferramentas
Sobre estes números
As contagens abrangem empresas registradas no usedby, não participação de mercado. Os quatro níveis de comprovação contam. Portes desconhecidos são excluídos apenas das visões por porte. Seus requisitos não foram avaliados.
Empresas com porte conhecido: 70%. Fornecedores excluídos desta categoria: 0.

SigNoz
52 empresas
10 confirmados42 observados
A Mailmodo usa o SigNoz como plataforma centralizada de gerenciamento de logs em seus microsserviços, dando à equipe de suporte técnico acesso controlado para pesquisar logs e usando dashboards parametrizados e alertas para monitorar ambientes e serviços.
Texto original
By providing controlled access to SigNoz dashboards, Mailmodo enabled their technical support team to handle customer queries independently.
Mailmodo · Ler a fonte 
LangSmith
47 empresas
1 confirmado1 declarado43 observados2 sinais
A Harvey executa avaliações offline do seu sistema de busca agêntica no LangSmith, usando traces OpenTelemetry do OpenAI Agent SDK. As avaliações acompanham métricas como alucinação, recall de ferramentas, recall de recuperação, formatação e qualidade da resposta.
Texto original
Centralized evaluation infrastructure that we built using the OpenAI Agent SDK's OpenTelemetry traces enables us to run offline evaluations in LangSmith. We track metrics like hallucination, tool recall, retrieval recall, formatting, and answer quality.
Harvey · Ler a fonte 
Braintrust
41 empresas
16 confirmados24 observados1 sinal
Coursera uses Braintrust to evaluate its AI features, the Coursera Coach chatbot and automated grading, through curated datasets, heuristic and LLM-as-a-judge scorers, online monitoring of production traffic, offline regression testing, and playground prototyping.
Texto original
Learners now receive grades within 1 minute of submission and benefit from approximately 45× more feedback, driving a 16.7% increase in course completions within a day of peer review2.
Coursera · Ler a fonte 
Arize AI
32 empresas
9 confirmados23 observados






















