自動評価

本コンテンツはPhrase Language AIの機械翻訳により、英語から翻訳されています。

自動評価は、すべてのMTモデルに対して提供されます。モデル名または詳細列の省略記号をクリックして表示します。

Phrase Custom AIは、カスタムNextMTモデルの品質をより深く理解できるように設計された、豊富なデータと高度な視覚的サポートを提供します。

概要タブは、評価結果の要約を提供し、直感的な視覚化とMTモデルに関するメタデータを特徴としています。
- パフォーマンス比較テーブルは、4つのMT品質メトリック全体で、汎用NextMTモデルとカスタムNextMTモデルのパフォーマンスを比較します。テーブルには2つの主要なセクションがあります。
  - ベースラインパフォーマンス
    
    TMを活用しないPhrase NextMTおよびカスタムNextMTモデルの自動MT品質スコアを表示します。
  - RAGパフォーマンス
    
    TMのあいまい一致を活用してMT出力を適応させた場合の自動評価MT品質スコアを表示します。
  ベストエンジン列は、各メトリックで最もパフォーマンスの高いモデルを強調表示します。
- モデルメタデータパネルは、評価されたカスタムNextMTモデルに関する重要な情報を提供します。
視覚化タブは、ドーナツチャートを通じてMT評価結果をグラフィカルに表示し、評価された翻訳セグメントを品質カテゴリ別に分類して提供します。
- 上部のドロップダウンメニューから目的のMT品質メトリックを選択し、カスタムNextMTモデルを汎用Phrase NextMTモデルと比較します。
- ドーナツチャートの各カテゴリにカーソルを合わせると、そのカテゴリの割合と影響を受けるセグメント数が表示されます。
評価サンプルタブは、評価セットからのセグメントサンプルのプレビューを表示し、関連するベースラインおよびRAGパフォーマンススコアを含む原文セグメントの一覧を表示します。

セグメントが選択されると、右側のパネルに以下が表示されます。
- ベースラインおよびRAGパフォーマンスのセグメント固有のスコアと品質レベルインジケーター。
- カスタムNextMTモデルと汎用NextMTモデルによって生成された翻訳出力と、データセットからの参考資料翻訳との比較。エンジン出力の差異を表示を選択して、参考資料の翻訳との違いを強調します。