Custom AI

자동 평가

컨텐츠는 영어 텍스트를 Phrase Language AI를 이용해 기계 번역한 것입니다.

모든 MT 모델에 대해 자동 평가가 제공됩니다. 모델 이름을 클릭하거나 More 열의 말줄임표 ellipses.png를 클릭하여 확인하십시오.

Phrase Custom AI는 사용자 지정 NextMT 모델 품질에 대한 더 깊은 이해를 제공하도록 설계된 풍부한 데이터와 고급 시각적 지원을 제공합니다:

  • 개요 탭은 MT 모델에 대한 직관적인 시각화 및 메타데이터를 포함하여 평가 결과의 요약을 제공합니다.

    • 성능 비교 표는 4가지 MT 품질 메트릭 전반에 걸쳐 일반 NextMT 모델과 사용자 지정 NextMT 모델의 성능을 비교합니다. 이 표에는 두 가지 주요 섹션이 있습니다:

      • 기준 성능

        TM 활용 없이 Phrase NextMT 및 사용자 지정 NextMT 모델에 대한 자동 MT 품질 점수를 보여줍니다.

      • RAG Performance

        TM 퍼지 일치를 활용하여 MT 아웃풋을 조정하는 자동 MT 품질 점수를 보여줍니다.

      최고 엔진 열은 각 메트릭에 대해 가장 높은 성능을 보이는 모델을 강조합니다.

    • 모델 메타데이터 패널은 평가된 사용자 지정 NextMT 모델에 대한 필수 정보를 제공합니다.

  • 시각화 탭은 도넛 차트를 통해 MT 평가 결과를 그래픽으로 나타내며, 평가된 번역 세그먼트를 품질 범주별로 분류하여 제공합니다.

    • 상단의 드롭다운 메뉴에서 원하는 MT 품질 메트릭을 선택하여 일반 Phrase NextMT 모델과 사용자 지정 NextMT 모델을 벤치마킹하십시오.

    • 도넛 차트의 각 범주 위로 마우스를 가져가면 해당 범주에 영향을 받는 세그먼트의 비율과 수를 확인할 수 있습니다.

  • 평가 샘플 탭은 평가 세트의 세그먼트 샘플 미리 보기를 제공하며, 관련 기준 및 RAG 성능 점수가 포함된 소스 세그먼트 목록을 표시합니다.

    세그먼트가 선택되면 오른쪽 패널에 다음이 표시됩니다:

    • 기준 및 RAG 성능에 대한 세그먼트별 점수와 품질 수준 지표.

    • 데이터셋의 참조 번역과 비교하여 사용자 지정 및 일반 NextMT 모델이 생성한 번역 아웃풋의 비교. 엔진 아웃풋의 차이 표시를 선택하여 참조 번역과의 차이점을 강조하십시오.

도움이 되었습니까?

Sorry about that! In what way was it not helpful?

The article didn’t address my problem.
I couldn’t understand the article.
The feature doesn’t do what I need.
Other reason.

Note that feedback is provided anonymously so we aren't able to reply to questions.
If you'd like to ask a question, submit a request to our Support team.
Thank you for your feedback.