Automated Evaluations

O conteúdo de toda a Central de Ajuda é traduzido automaticamente de inglês pelo Phrase Language AI.

Avaliações automatizadas são fornecidas para cada modelo de tradução automática. Clique em um nome do modelo ou no de elipsis na coluna Mais para vê-los.

O Phrase Custom AI oferece dados ricos e suporte visual avançado projetado para fornecer um conhecimento mais profundo sobre a qualidade do modelo NextMT personalizado:

A aba de visualização fornece um resumo dos resultados da avaliação, com visualizações intuitivas e metadados sobre o modelo de tradução automática.
- A tabela de comparativa de desempenho compara o desempenho dos modelos NextMT genéricos versus personalizados em quatro métricas de qualidade da tradução automática. A tabela tem duas seções principais:
  - Desempenho de base
    
    Mostra pontuações de qualidade de tradução automática automatizadas para o Phrase NextMT e um modelo NextMT personalizado sem alavancamento de memória de tradução.
  - Desempenho de RAG
    
    Mostra pontuações de qualidade de tradução automática automatizadas em que correspondências parciais com a memória de tradução são aproveitadas para adaptar o resultado da tradução automática.
  A coluna Melhor mecanismo destaca o modelo com o melhor desempenho para cada métrica.
- O painel de metadados do modelo fornece informações essenciais sobre o modelo NextMT personalizado avaliado.
A aba Visualizações fornece uma representação gráfica dos resultados da avaliação de tradução automática por meio de gráficos "donut", oferecendo uma detaliação dos segmentos de tradução avaliados (por categoria de qualidade).
- Selecione a métrica de qualidade de tradução automática desejada no menu suspenso na parte superior para benchmarcar o modelo NextMT personalizado contra o modelo Phrase NextMT genérico.
- Paire o cursor sobre cada categoria do(s) gráfico(s) de curinga para ver o percentual e o número de segmentos afetados para essa categoria.
A aba de amostra de avaliação apresenta uma prévia de amostra de segmentos do conjunto de avaliação, exibindo uma lista de segmentos de origem com pontuações de desempenho de base e RAG relevantes.

Quando um segmento é selecionado, o painel direito mostra:
- Pontuações segmentadas e indicadores de nível de qualidade para o desempenho de base e RAG.
- Uma comparação do resultado da tradução gerado pelos modelos NextMT personalizados e genéricos com a tradução de referência do conjunto de dados. Selecione Mostrar diferenças na saída do mecanismo para destacar as diferenças face à tradução de referência.