Custom AI

자동화된 평가

컨텐츠는 영어 텍스트를 Phrase Language AI를 이용해 기계 번역한 것입니다.

모든 MT 모델에 대해 자동화된 평가가 제공됩니다. 모델 이름이나 ellipses.png의 생략 기호를 클릭하여 더 보기 열에서 확인하세요.

Phrase Custom AI는 사용자 지정 NextMT 모델 품질에 대한 더 깊은 이해를 제공하기 위해 설계된 풍부한 데이터와 고급 시각적 지원을 제공합니다:

  • 개요 탭은 MT 모델에 대한 평가 결과의 요약을 제공하며, 직관적인 시각화와 메타데이터를 특징으로 합니다.

    • 성능 비교 표는 네 가지 MT 품질 지표에 걸쳐 일반 NextMT 모델과 사용자 지정 NextMT 모델의 성능을 비교합니다. 표는 두 개의 주요 섹션으로 나뉩니다:

      • 기준 성능

        Phrase NextMT와 TM 활용 없이 사용자 지정 NextMT 모델에 대한 자동화된 MT 품질 점수를 보여줍니다.

      • RAG 성능

        TM 퍼지 일치를 활용하여 MT 출력을 조정하는 자동화된 MT 품질 점수를 보여줍니다.

      최고 엔진 열은 각 지표에 대해 가장 높은 성능을 보이는 모델을 강조합니다.

    • 모델 메타데이터 패널은 평가된 사용자 지정 NextMT 모델에 대한 필수 정보를 제공합니다.

  • 시각화 탭은 도넛 차트를 통해 MT 평가 결과의 그래픽 표현을 제공하며, 품질 카테고리별로 평가된 번역 세그먼트를 분류합니다.

    • 상단의 드롭다운 메뉴에서 원하는 MT 품질 지표를 선택하여 사용자 지정 NextMT 모델을 일반 Phrase NextMT 모델과 비교하세요.

    • 도넛 차트의 각 카테고리 위에 마우스를 올리면 해당 카테고리에 영향을 받은 세그먼트의 비율과 수를 확인할 수 있습니다.

  • 평가 샘플 탭은 평가 세트에서 세그먼트 샘플 미리 보기를 제공하며, 관련 기준 및 RAG 성능 점수가 포함된 소스 세그먼트 목록을 표시합니다.

    세그먼트를 선택하면 오른쪽 패널에 다음이 표시됩니다:

    • 기준 및 RAG 성능에 대한 세그먼트별 점수와 품질 수준 지표.

    • 사용자 지정 및 일반 NextMT 모델에 의해 생성된 번역 출력을 데이터 세트의 참조 번역과 비교합니다. 선택 엔진 아웃풋의 차이를 보여주기 참조 번역과의 차이를 강조합니다.

도움이 되었습니까?

Sorry about that! In what way was it not helpful?

The article didn’t address my problem.
I couldn’t understand the article.
The feature doesn’t do what I need.
Other reason.

Note that feedback is provided anonymously so we aren't able to reply to questions.
If you'd like to ask a question, submit a request to our Support team.
Thank you for your feedback.