自動評価

本コンテンツはPhrase Language AIの機械翻訳により、英語から翻訳されています。

自動評価はすべてのMTモデルに対して提供されます。モデル名または詳細列の省略記号をクリックして表示します。

Phrase Custom AIは、カスタムNextMTモデルの品質をより深く理解できるように設計された、豊富なデータと高度な視覚的サポートを提供します。

概要タブは、評価結果の要約を提供し、MTモデルに関する直感的な視覚化とメタデータを特徴としています。
- パフォーマンス比較テーブルは、4つのMT品質メトリクス全体で、汎用NextMTモデルとカスタムNextMTモデルのパフォーマンスを比較します。テーブルには2つの主要なセクションがあります。
  - ベースラインパフォーマンス
    
    TMを活用しないPhrase NextMTおよびカスタムNextMTモデルの自動MT品質スコアを表示します。
  - RAGパフォーマンス
    
    TMのあいまい一致を活用してMT出力を適応させた場合の自動評価によるMT品質スコアを表示します。
  ベストエンジン列は、各メトリクスで最もパフォーマンスの高いモデルを強調表示します。
- モデルメタデータパネルは、評価されたカスタムNextMTモデルに関する重要な情報を提供します。
視覚化タブは、ドーナツチャートを通じてMT評価結果をグラフィカルに表示し、評価された翻訳セグメントを品質カテゴリ別に内訳として提供します。
- 上部のドロップダウンメニューから目的のMT品質メトリクスを選択し、カスタムNextMTモデルを汎用Phrase NextMTモデルと比較してベンチマークします。
- ドーナツチャートの各カテゴリにカーソルを合わせると、そのカテゴリの割合と影響を受けるセグメント数が表示されます。
評価サンプルタブは、評価セットからのセグメントサンプルのプレビューを表示し、関連するベースラインおよびRAGパフォーマンススコアを含む原文セグメントの一覧を表示します。

セグメントが選択されると、右側のパネルに以下が表示されます。
- ベースラインおよびRAGパフォーマンスのセグメント固有のスコアと品質レベルインジケーター。
- データセットの参考資料となる翻訳に対する、カスタムNextMTモデルと汎用NextMTモデルによって生成された翻訳出力の比較。エンジン出力の差異を表示を選択して、参考資料の翻訳との違いを強調します。