LQA 평가(TMS)

컨텐츠는 영어 텍스트를 Phrase Language AI를 이용해 기계 번역한 것입니다.

사용 가능:

Team, Professional, Business, Enterprise 및 Software UI/UX 요금제

라이선스에 관한 질문은 영업팀에 문의하십시오.

사용 가능:

Ultimate 및 Enterprise 요금제(레거시)

라이센스 질문은 영업팀에 문의하십시오.

검토자가 CAT 편집기에서 언어 품질 평가(LQA)를 수행하여 사전 정의된 기준에 따라 번역된 콘텐츠의 품질을 평가합니다. 문제는 세그먼트별로 표시되고 유형과 심각도에 따라 분류된 뒤, 최종 품질 점수에 반영되는 점수표에 저장됩니다.

품질 보증(QA) 검사는 자동화되어 누락된 태그나 오타와 같은 기술적 문제를 찾는 반면, LQA 평가는 사람이 수행하며 언어적 품질에 중점을 둡니다.

LQA 평가 생성 및 보기는 LQA가 활성화된 워크플로 단계에서만 가능합니다. LQA 창 자체는 모든 워크플로 단계의 편집기에 표시됩니다.

LQA가 활성화된 단계에 대한 LQA는 프로젝트 생성 시 또는 프로젝트에 단계를 추가할 때만 활성화할 수 있습니다. LQA가 활성화된 단계로 프로젝트를 생성하지만 프로젝트 생성 중에 이를 끄면 나중에 다시 활성화할 수 없습니다.

구매자 조직과 공급업체 조직 간에 작업이 공유되는 경우, LQA 평가를 사용할 수 있는지는 이미 진행 중인 평가가 있는지와 공유 범위에 따라 달라집니다. LQA 평가는 구매자와 공급업체 중 먼저 시작한 쪽에 귀속됩니다. 상대방은 평가가 완료되거나 폐기될 때까지 해당 작업 또는 워크플로 단계에서 새 평가를 시작하거나 기존 평가에 추가할 수 없습니다. 한쪽에서 평가가 열려 있는 동안에는 다른 쪽에서 LQA 옵션이 전혀 나타나지 않을 수 있습니다.

상대방이 이미 시작한 평가에 대한 권한은 공유 범위에 따라 다릅니다. 전체 프로젝트가 공유되는 경우, 수신 측은 기존 평가를 편집 모드로 열고 새 문제를 추가할 수 있습니다. 전체 프로젝트가 아닌 특정 작업만 공유되는 경우, 수신 측은 평가를 편집하거나 새 문제를 추가할 수 없으며 답글만 달 수 있는 권한으로 제한됩니다.

콘텐츠 품질을 평가할 때 콘텐츠 유형이나 고객에 따라 다른 규칙이 필요할 수 있습니다. 일부 콘텐츠는 정확한 용어가 필요할 수 있고, 다른 콘텐츠는 로캘 규칙을 따르거나 번역문의 길이와 마크업을 정확하게 맞춰야 할 수 있습니다. 오류에 따라 다른 심각도나 할당된 가중치가 필요할 수도 있습니다.

전반적인 피드백은 결합된 작업에 대해 제공할 수 없습니다.

LQA 이슈 추가

LQA 이슈를 추가하려면 다음 단계를 따르십시오:

CAT 편집기에서 LQA 창 을 선택하고 LQA 시작을 클릭합니다.
세그먼트를 선택합니다.
- 특정 텍스트를 평가하려면 세그먼트 내의 텍스트를 선택합니다.
세그먼트 옆의 플래그 아이콘 을 클릭하여 오류 범주 드롭다운 목록을 엽니다.
오류 범주와 심각도, 이슈의 반복 여부를 선택하고, 필요한 경우 설명을 입력합니다.

선택적으로 @를 입력하거나 선택하여 설명에 멘션을 추가하고 목록에서 원하는 사용자나 사용자 그룹을 선택합니다. 멘션된 사용자에게는 인앱 알림 및 이메일 알림(프로젝트에서 활성화된 경우)이 전송됩니다.
이슈 플래그 지정을 클릭합니다.

이슈에 플래그가 지정되면 메뉴에서 편집, 답글 작성 또는 삭제할 수 있습니다.
- LQA 이슈에 답글을 달 때 @를 입력하거나 클릭하고 목록에서 원하는 사용자나 사용자 그룹을 선택하여 멘션을 추가할 수 있습니다. 멘션된 사용자에게는 인앱 알림 및 이메일 알림(프로젝트에서 활성화된 경우)이 전송됩니다.
필요에 따라 마지막 두 단계를 반복하여 더 많은 이슈에 플래그를 지정합니다.
LQA 완료를 클릭합니다.

LQA 결과와 플래그가 지정된 모든 이슈가 LQA 탭에 나열됩니다.

LQA 이슈가 있는 세그먼트는 채워진 플래그 아이콘 으로 식별됩니다. 생성된 LQA 이슈는 해당 이슈의 말줄임표 메뉴 에서 편집하거나 삭제할 수 있습니다(다른 사용자가 생성한 이슈는 편집하거나 삭제할 수 없음).

대량 이슈 추가

한 번에 최대 500개 세그먼트에 이슈를 추가할 수 있습니다. 선택한 세그먼트에서 첫 번째 이슈는 부모 로, 이후의 이슈는 자식 Child Comment 으로 간주됩니다. 이러한 이슈는 개별적으로 처리하는 대신 일괄 편집하거나 삭제할 수 있습니다.

일괄 처리된 이슈의 관계

자식 이슈를 편집하거나 답글을 달면 부모 이슈와의 관계가 끊어집니다(더 이상 일괄 작업을 수행할 수 없음).
부모 이슈에 답글을 달아도 자식 이슈와의 관계는 끊어지지 않으며, 답글이 자식 이슈에 반영되지도 않습니다.
부모 이슈의 수정 사항은 부모 이슈에만 적용하거나 자식 이슈에도 함께 적용할 수 있습니다.
부모 이슈를 삭제하면 자식 이슈 간의 관계가 끊어집니다(더 이상 일괄 작업을 수행할 수 없음).

일괄 이슈를 추가하려면 다음 단계를 따르십시오:

LQA 창이 표시된 상태에서 이슈를 표시할 세그먼트를 여러 개 선택합니다.

선택한 세그먼트의 번호가 새 이슈 창에 표시됩니다.
오류 범주와 심각도를 선택하고, 반복 이슈인지 여부를 선택한 다음 필요에 따라 설명을 입력합니다.
선택한 세그먼트에서 이슈를 표시할 방법을 선택합니다:
- 후속 세그먼트의 이슈를 반복 이슈로 표시.
- 모든 세그먼트의 이슈를 반복 이슈가 아닌 것으로 표시.
  
  반복되는 이슈에는 이 옵션이 없습니다.
이슈 플래그 지정을 클릭합니다.

이슈가 지정된 세그먼트에 추가되며, 부모 이슈는 로, 자식 이슈는 로 표시됩니다. 자식 아이콘을 클릭하면 부모 이슈로 이동합니다.

나열된 이슈는 이슈 필터 를 사용하여 필터링할 수 있습니다. 옵션을 조합하여 심각도별로 필터링하거나 반복되는 이슈만 및 부모 이슈만 표시할 수 있습니다.

일괄 평가 점수 매기기

	반복되는 이슈 선택 해제, 후속 세그먼트의 이슈를 반복 이슈로 표시.	반복되는 이슈 선택 해제, 모든 세그먼트의 이슈를 반복 이슈가 아닌 것으로 표시.	반복되는 이슈와 후속 세그먼트의 이슈를 반복되는 이슈로 표시 옵션이 선택된 경우
세그먼트 1	고유 오류 - 페널티 추가됨(부모 이슈)	고유 오류 - 페널티 추가됨	반복된 오류 - 페널티 추가되지 않음
세그먼트 2	반복된 오류 - 페널티 추가되지 않음	고유 오류 - 페널티 추가됨	반복된 오류 - 페널티 추가되지 않음
세그먼트 3	반복된 오류 - 페널티 추가되지 않음	고유 오류 - 페널티 추가됨	반복된 오류 - 페널티 추가되지 않음

LQA 평가 생성

LQA 평가를 생성하려면 LQA 탭에서 완료를 클릭하십시오. 전체 피드백은 선택적으로 적용할 수 있습니다.

LQA 프로필에 설정된 통과/실패 임계값을 기준으로 점수가 계산되고 결과가 표시됩니다. 해당 워크플로 단계에 LQA가 활성화된 경우, 점수와 결과가 LQA 탭 및 작업 테이블의 LQA 점수 열에 표시됩니다.

팁

LQA 점수 열이 보이지 않으면 작업 테이블에서 아이콘을 클릭하고 열 사용자 지정을 선택하여 활성화하십시오.

점수는 작업의 총 단어 수를 기준으로 계산됩니다.

채점 예시:

500단어 텍스트에 치명적인 정확도 오류 1개와 경미한 문법 오류 1개가 포함된 경우 LQA에서 불합격하도록 설정됩니다. 정확도 오류에는 2.0의 가중치가 부여되고 문법 오류에는 1.0의 가중치가 부여됩니다. 치명적 오류에는 벌점 10점이, 경미한 오류에는 벌점 1점이 부과됩니다.

각 오류 범주에 대한 이슈 수를 계산하고 각각의 심각도 가중치 및 오류 가중치를 곱하십시오:
- 정확도 페널티 = 치명적 오류 수 x 치명적 오류 페널티 x 정확도 가중치 = 1 x 10 x 2.0 = 페널티 20점
- 문법 페널티 = 경미한 오류 수 x 경미한 오류 페널티 x 문법 가중치 = 1 x 1 x 1.0 = 페널티 1점
페널티 합계 계산:
- 페널티 합계 = 정확도 페널티 + 문법 페널티 = 20 + 1 = 21
MQM 채점 모델 [점수 = 1 - 페널티 합계/단어 수]을 사용하여 합격/불합격 점수를 계산하십시오:
- 점수 = 1 - 페널티 합계/단어 수 = 1 - 21/500 = 0.958
점수 결과를 백분율로 표시하십시오:
- 점수 % = 0.958 x 100 = 95.8
점수 %를 합격/불합격 임계값으로 입력하십시오:
- 합격/불합격 임계값은 95.8%입니다.

작업 테이블의 결과를 클릭하면 이메일로 성적표를 보내거나 스프레드시트(.XLXS) 파일로 내보낼 수 있는 옵션이 포함된 성적표 창이 열립니다.

작업을 두 개 이상 선택한 후 마우스 오른쪽 버튼으로 클릭하면 여러 성적표를 다운로드하는 옵션이 표시됩니다.

Phrase는 성적표 파일 이름을 자동으로 지정하며 이 이름은 변경할 수 없습니다. 단일 성적표는 LQA_<project name>_<source language>_<target language>_<job filename>.xlsx 파일로 다운로드됩니다. 다운로드에 여러 작업이 포함된 경우, 성적표는 작업당 하나의 .XLSX 파일이 포함된 LQA_<project name>_<project ID>.zip이라는 이름의 ZIP 압축 파일 하나로 제공됩니다. 확장자 앞의 이름이 250자를 초과하면 Phrase는 확장자를 추가하기 전에 이름을 250자로 자릅니다.

이메일로 수신된 LQA 성적표 다운로드 링크는 5일 후에 만료됩니다.

하나의 LQA 성적표 이메일에는 전송에 포함된 모든 작업에 대한 단일 다운로드 링크가 포함되어 있습니다. 전송에 작업이 두 개 이상 포함된 경우 해당 링크를 통해 작업당 하나의 성적표가 포함된 ZIP 아카이브를 다운로드할 수 있습니다. 기본 템플릿과 같이 {report.file.url} 매크로를 {jobInfo} 블록 외부에 유지하십시오. Phrase는 {jobInfo}를 먼저 처리한 다음, {report.file.url}이 나타나는 모든 곳에 매번 동일한 링크를 삽입합니다.

기본적으로 작업에 할당된 언어 전문가는 자신의 LQA 성적표를 다운로드할 수 있습니다. 성적표 다운로드를 프로젝트 관리자와 관리자로만 제한하려면 프로젝트 설정의 액세스 및 보안 섹션에서 언어 전문가가 LQA 성적표를 다운로드하도록 허용을 비활성화하십시오. 이는 설정의 액세스 및 보안 섹션에서 조직 전체 기본값으로 설정할 수도 있으며, 새 프로젝트는 이를 상속받습니다.

LQA 평가에 기록되고 Analytics에 표시되는 번역 제공업체는 평가가 시작될 때 이전 워크플로 단계에서 번역가로 할당된 제공업체를 기준으로 한 번만 결정됩니다. 아직 할당된 제공업체가 없으면 대신 검토자의 이름이 사용됩니다. 나중에 번역가를 재할당해도 이미 존재하는 평가의 이 값은 업데이트되지 않습니다.

참고

서로 다른 조직(예: 구매자 조직과 공급업체 조직) 간에는 LQA 성적표 다운로드 URL을 공유할 수 없습니다.

완료된 LQA 평가 편집

LQA 평가가 완료되면 해당 문제는 잠기고 성적표는 읽기 전용이 됩니다. 변경하려면:

CAT 편집기에서 LQA 창 을 선택하고 창 상단의 점 3개 메뉴를 클릭하십시오.
LQA 편집을 선택하십시오.
필요에 따라 문제를 추가, 편집 또는 제거하십시오.
LQA 완료를 다시 클릭하여 점수와 성적표를 다시 생성하십시오.

이렇게 하면 기존 평가가 그대로 다시 열립니다. 기존에 표시된 문제는 유지됩니다.

개별 LQA 문제를 편집하거나 삭제하려면 작업이 수락됨 상태여야 합니다. 작업이 완료됨 또는 전달됨으로 이동한 경우 해당 문제에 대한 편집 및 삭제 옵션을 더 이상 사용할 수 없습니다.

워크플로 단계의 LQA 점수

워크플로에서 LQA가 활성화되면 모든 단계에 LQA 점수가 표시됩니다.

LQA 단계가 하나만 있는 경우 모든 워크플로 단계에 동일한 점수가 표시됩니다.
LQA 단계가 여러 개인 경우 표시되는 점수는 가장 최근의 LQA 단계에 따라 달라집니다:
- LQA 단계를 포함하여 그 이전 단계에는 해당 단계의 점수가 표시됩니다.
- 나중에 있는 LQA 단계 이후의 단계에는 해당 LQA 단계에서 업데이트된 점수가 표시됩니다.

사례

2단계와 4단계에서 LQA가 활성화된 5단계 워크플로의 경우:

1단계와 2단계에는 2단계의 LQA 점수가 표시됩니다.
3단계, 4단계, 5단계에는 4단계의 LQA 점수가 표시됩니다.

추가 LQA 단계가 완료됨에 따라 표시되는 점수가 그에 맞춰 업데이트됩니다.

반복 평가하기

최대 500개 세그먼트에 대해 다양한 플래그 지정 옵션을 사용하여 항목에 평가를 추가할 수 있습니다.

반복을 평가하려면 다음 단계를 따르십시오:

LQA 창이 표시된 상태에서 문제 플래그를 지정할 반복을 선택하십시오.

선택한 항목 이후에 나타나는 반복 항목에도 함께 플래그를 지정할 수 있습니다.
오류 범주와 심각도를 선택하고, 이슈가 반복되는지 표시한 다음, 필요한 경우 설명을 입력하십시오.
반복에 플래그를 지정할 방법을 선택하십시오:
- 후속 반복의 문제를 반복되는 문제로 플래그
- 모든 반복의 문제를 반복되지 않는 문제로 플래그
  
  문제가 반복되는 것으로 표시된 경우 이 옵션은 사용할 수 없습니다.
- 이 세그먼트의 문제만 플래그
  
  후속 또는 이전 반복은 독립적으로 플래그를 지정할 수 있습니다.
이슈 플래그 지정을 클릭합니다.

문제가 지정된 세그먼트에 추가되며, 상위 문제는 로, 하위 문제는 로 표시됩니다. 하위 아이콘을 클릭하면 상위 이슈로 이동합니다.

나열된 이슈는 이슈 필터 를 사용하여 필터링할 수 있습니다. 옵션을 조합하여 심각도별로 필터링하거나 반복 이슈만 또는 상위 이슈만 표시할 수 있습니다.

상위 이슈를 편집하거나 삭제할 때 해당 명령을 상위 이슈에만 적용할지, 아니면 하위 이슈를 포함하여 일괄 생성된 모든 이슈에 적용할지 선택할 수 있습니다. 하위 이슈를 편집하거나 삭제하면 선택한 이슈에만 명령이 적용됩니다.

반복되는 LQA 이슈는 처리 방식이 다를 수 있으며, 다음 중 하나로 처리할 수 있습니다:

반복 이슈로 표시할 수 있으며, 이 경우 상위 이슈를 제외한 나머지 이슈에는 최종 LQA 점수에 반영되는 페널티 점수가 부과되지 않습니다.
고유 이슈로 표시하면 최종 LQA 점수에 페널티 점수가 추가되며, 후속 이슈도 고유한 것으로 간주되어 점수에 반영됩니다.

반복 세그먼트 채점

	반복 이슈 선택 해제 및 후속 세그먼트의 이슈를 반복 이슈로 표시. 선택	반복 이슈 선택 해제 및 모든 세그먼트의 이슈를 반복되지 않는 이슈로 표시. 선택	반복 이슈 선택 해제 및 이 세그먼트의 이슈만 표시 선택	반복 이슈 선택 및 후속 세그먼트의 이슈를 반복 이슈로 표시. 선택	반복 이슈 선택 및 이 세그먼트의 이슈만 표시 선택
반복 1	고유 오류 - 페널티 추가됨(상위 이슈)	고유 오류 - 페널티 추가됨	고유 오류 - 페널티 추가됨	반복된 오류 - 페널티 추가되지 않음	반복된 오류 - 페널티 추가되지 않음
반복 2	반복된 오류 - 페널티 추가되지 않음	고유 오류 - 페널티 추가됨	기록된 오류 없음	반복된 오류 - 페널티 추가되지 않음	기록된 오류 없음
반복 3	반복된 오류 - 페널티 추가되지 않음	고유 오류 - 페널티 추가됨	기록된 오류 없음	반복된 오류 - 페널티 추가되지 않음	기록된 오류 없음

삭제된 LQA 이슈 및 댓글은 30일 동안 보관됩니다. 해당 기간 내에는 includeDeleted 매개변수를 true로 설정하고 List LQA conversations API 엔드포인트를 사용하여 삭제된 항목을 조회할 수 있습니다: GET /api2/v1/jobs/{jobUid}/conversations/lqas?includeDeleted=true.

이 요청은 작업 UID당 한 번 수행됩니다. 응답에는 삭제된 항목을 포함한 각 LQA 대화가 deleted 필드, 설명, 작성자 및 관련 날짜와 함께 나열됩니다. 요청을 수행하는 사용자에게는 해당 작업을 편집할 권한이 있어야 합니다.