Custom AI

자동화된 평가

컨텐츠는 영어 텍스트를 Phrase Language AI를 이용해 기계 번역한 것입니다.

모든 MT 모델에 대해 자동 평가가 제공됩니다. 모델 이름이나 More 열의 말줄임표 ellipses.png를 클릭하여 확인하십시오.

Phrase Custom AI는 사용자 지정 NextMT 모델 품질을 더 깊이 이해할 수 있도록 설계된 풍부한 데이터와 고급 시각적 지원을 제공합니다:

  • Overview 탭은 MT 모델에 대한 직관적인 시각화 및 메타데이터를 포함하여 평가 결과의 요약을 제공합니다.

    • Performance Comparison 표는 네 가지 MT 품질 지표 전반에 걸쳐 일반 NextMT 모델과 사용자 지정 NextMT 모델의 성능을 비교합니다. 이 표는 두 개의 주요 섹션으로 구성됩니다:

      • 기준선 성능

        Phrase NextMT 모델의 자동 MT 품질 점수와 TM 활용이 적용되지 않은 사용자 지정 NextMT 모델의 자동 MT 품질 점수를 보여줍니다.

      • RAG 성능

        TM 퍼지 매치가 MT 출력을 조정하는 데 활용되는 자동 MT 품질 점수를 보여줍니다.

      Best Engine 열은 각 지표에 대해 가장 높은 성능을 보이는 모델을 강조합니다.

    • Model metadata 패널은 평가된 사용자 지정 NextMT 모델에 대한 필수 정보를 제공합니다.

  • Visualizations 탭은 도넛 차트를 통해 MT 평가 결과를 그래픽으로 나타내며, 품질 범주별로 평가된 번역 세그먼트의 분석 정보를 제공합니다.

    • 상단 드롭다운 메뉴에서 원하는 MT 품질 지표를 선택하여 사용자 지정 NextMT 모델을 일반 Phrase NextMT 모델과 벤치마킹하십시오.

    • 도넛 차트의 각 범주 위로 마우스를 가져가면 해당 범주에 영향을 받는 세그먼트의 비율과 수를 확인할 수 있습니다.

  • Evaluation sample 탭은 평가 세트의 세그먼트 샘플 미리보기를 제공하며, 관련 기준 및 RAG 성능 점수가 포함된 소스 세그먼트 목록을 표시합니다.

    세그먼트를 선택하면 오른쪽 패널에 다음이 표시됩니다:

    • 기준 및 RAG 성능에 대한 세그먼트별 점수와 품질 수준 지표.

    • 데이터셋의 참조 번역과 비교한 사용자 지정 및 일반 NextMT 모델의 번역 출력 비교. Show differences in the engine output을 선택하여 참조 번역과의 차이점을 강조하십시오.

도움이 되었습니까?
★ ★ ★ ★ ★

Sorry about that! In what way was it not helpful?

The article didn’t address my problem.
I couldn’t understand the article.
The feature doesn’t do what I need.
Other reason.

Note that feedback is provided anonymously so we aren't able to reply to questions.
If you'd like to ask a question, submit a request to our Support team.
Thank you for your feedback.