콘텐츠로 이동

점수와 작업 상태

Prism Score, 프롬프트 점수, 하위작업 상태를 읽는 방법을 안내합니다.

Prism은 기간 안에 끝난 하위작업에 점수를 매깁니다. 점수는 다시 살펴볼 작업을 고르는 데 사용하고, 실제 작업을 열어 직접 확인하세요. 점수는 일반적인 개발 능력이나 사업 성과를 평가한 값이 아닙니다.

세션, 작업, 하위작업, 프롬프트가 서로 어떻게 연결되는지는 핵심 개념에서 설명합니다. 이 페이지는 두 가지 점수, 하위작업을 평가하는 방식, 점수에 포함되는 하위작업, 값이 잠정에서 확정으로 바뀌는 과정을 설명합니다.

개요(내 작업 그룹)는 0에서 100까지의 점수 하나를 대표값으로 보여 줍니다.

  • Prism Score는 집계 대상인 코드 작업 가운데 완료되고 검증되었으며 재작업이 없었던 비율을 작업 크기로 가중한 값입니다. 등급 구간이 함께 표시되며, 점수가 정확도 검사를 통과한 뒤에만 나타납니다.
  • 프롬프트 점수는 해당 기간에 끝난 하위작업의 프롬프트 점수 평균입니다. 등급 구간은 없습니다. Prism Score가 나타나기 전에는 대표값 카드와 추이 차트에 프롬프트 점수가 표시됩니다(차트 제목은 프롬프트 점수 추이입니다).

표본이 부족하면 카드에 “표본 부족”이 표시되고 “표본이 부족해 점수와 등급을 낼 수 없습니다.”라는 안내가 붙습니다. 대시(—)는 카드에 표시할 값이 없다는 뜻입니다.

점수 카드는 직전 기간 대비 변화를 보여 줍니다. 작업 결과 지표 섹션(Prism Score가 보일 때는 점수 세부 지표)은 하위작업이 어떻게 끝났는지를 비율로 보여 주며, 각 비율이 근거로 삼은 하위작업 또는 묶음 수가 옆에 함께 표시됩니다. 진행 중, 포기, 불확정, 판정 불가, 인계, 검증 없이 완료, 수용만으로 완료가 해당합니다. 개요 제목 아래에는 값을 판정한 규칙의 버전이 점수 규칙 표시로 나타납니다.

하위작업의 프롬프트 점수가 만들어지는 방식

섹션 제목: “하위작업의 프롬프트 점수가 만들어지는 방식”

프롬프트(분석 그룹)를 여세요. 하위작업의 점수는 필수 항목 가운데 충족한 비율이며, 충족한 선택 항목마다 가산점이 붙습니다. 필수 항목을 놓치면 89점 이하로 제한됩니다. 기간의 점수는 그 기간에 끝난 하위작업 점수의 평균입니다.

프롬프트마다 일곱 가지 항목을 확인합니다.

항목 확인하는 내용
목표 명시 결과를 구체적이고 관찰 가능한 형태로 적었는지
범위 한정 건드리는 파일, 기능, 범위를 좁혔는지
구체적 참조 모델이 열어볼 수 있는 파일, 라인, @ 참조를 인용했는지
맥락 충분 필요한 에러, 예시, 산출물을 포함했는지
검증 요청 테스트, 기대 결과, 성공 기준을 요청했는지
근본 원인 지향 증상이 아니라 근본 원인을 겨냥했는지
산출물 형식 명시 응답이 갖춰야 할 형식, 분량, 대상, 형태를 지정했는지

항목이 필수인지, 선택인지, 해당 없음인지는 하위작업의 유형에 따라 달라집니다. 세션 화면은 유형을 의도로 보여 줍니다. 질문, 조사, 리뷰, 계획·스펙, 소규모 변경, 버그 수정, 기능, 리팩터링 중 하나입니다. 해당하지 않는 항목은 “미충족”이 아니라 “해당 없음”으로 표시됩니다.

프롬프트별 점수는 프롬프트마다 일곱 항목의 충족 여부와 점수를 보여 줍니다. 점수만 보여 주며 프롬프트 원문은 보여 주지 않습니다. 역량 화면은 항목별로 해당 항목을 충족한 프롬프트의 비율을 보여 줍니다. 통과율은 항목을 충족한 프롬프트를 충족하거나 놓친 프롬프트 전체로 나눈 값입니다.

사소한 하위작업은 작업량 하한에 못 미치는 하위작업이며 점수가 매겨지지 않습니다. 프롬프트 화면은 이 하위작업의 수와 전체에서 차지하는 비중을 보여 줍니다.

내 기록 비교는 가장 최근에 채점된 날의 값을 최근 채점된 날들의 중앙값과 비교합니다. 채점된 날이 충분히 쌓이면 나타나며, 그 전에는 채점된 날이 며칠인지 카드에 표시됩니다. 값은 일 단위 잠정값이며 공식 값이 아닙니다. 평소값은 중앙값이므로 하루 부진에 흔들리지 않습니다.

세션 화면은 모든 하위작업을 상태와 점수와 함께 보여 줍니다. 상태는 다음과 같습니다.

상태 표시되는 화면
완료 세션, 프롬프트
진행 중 세션
중단 세션, 프롬프트
포기 세션, 프롬프트
실패 세션, 프롬프트
판정 대기 세션, 프롬프트
불확정 세션, 프롬프트
판정 불가 세션, 프롬프트

하위작업을 열면 “종료 사유”에 답변 대기, 주제 전환, 창 닫힘, 목표 없음, 기록 공백, 기록 손상, 검증 실패 중 하나가 표시됩니다. 프롬프트 화면의 불확정·판정 불가는 판정 불가 하위작업을 기록 공백, 목표 없음, 그 밖의 이유로 나누어 보여 줍니다.

“판정 대기 중이거나 집계 중입니다.”라는 안내는 결과가 아직 준비되지 않았다는 뜻이므로 나중에 다시 확인하세요.

세션 화면의 점수 포함? 열에는 포함 또는 제외가 표시되고, 제외된 항목에는 “점수에서 제외” 표시가 붙습니다. 제외만 보기를 선택하면 제외된 하위작업만 볼 수 있습니다. 하위작업이 완료율에 반영되거나 반영되지 않은 이유는 세션에서 확인하세요.

점수가 잘못된 것 같다면 하위작업을 열고 이 점수가 잘못된 것 같습니다를 선택하세요. 잘못되었다고 생각하는 사실 하나를 고르면 그 부분만 다시 판정합니다. 같은 사실에는 한 번만 이의를 제기할 수 있고, 결과가 나오면 알림으로 알려 드립니다.

개요 화면의 추이 차트에서는 최근 몇 주 또는 몇 개월이 각각 점 하나로 표시됩니다. 점수 규칙 v3로 점수가 매겨진 기간은 현재 규칙의 첫 기간 앞에 점으로 나타나며, 규칙이 바뀐 시점에는 경계가 표시됩니다. v3 점수는 점수 규칙 v3로 매긴 Prism Score입니다. 추이가 Prism Score를 보일 때만 v3 점과 규칙이 바뀐 경계가 나타나며, 프롬프트 점수를 보일 때는 나타나지 않습니다. 등급 구간은 없고, 경계를 넘어서는 직전 기간과의 변화를 보여 주지 않습니다. 팀 점수는 현재 규칙부터 시작합니다.

  • 값은 해당 기간이 확정될 때까지 잠정입니다. 아직 끝나지 않은 기간에는 “기간이 끝나지 않아 잠정 값입니다.”라는 안내가 붙습니다.
  • 차트 설명에는 마지막으로 확정된 기간까지를 뜻하는 “확정”이 표시되고, 확정된 값이 없으면 “아직 확정된 값이 없습니다.”가 표시됩니다.
  • “확정 보류”는 재판정이 진행되는 동안 확정을 미루고 있다는 뜻입니다.

정정과 버전 경계는 확정 뒤에 바뀐 값을 원인과 함께 보여 줍니다. 이의 제기로 하위작업이 다시 판정된 경우, 완료 후 재작업이 확인된 경우, 그 밖의 경우로 나뉩니다. 점수 규칙이 바뀐 시점도 함께 표시됩니다. 규칙이 바뀐 경계의 앞뒤 값은 이어서 비교하지 않으며, 비교할 수 없는 곳에는 “비교 불가”가 나타납니다. 일부 값을 둘 이상의 규칙으로 판정했다면 제목 아래에 “혼합 규칙으로 판정한 비율”이 표시됩니다.

점수 이력 (v3)(사이드바의 고급 그룹에 같은 이름으로 있습니다)은 점수 규칙 v3로 점수가 매겨진 하위작업을 제목, 종료한 날, 상태(완료 또는 미완료), 등급으로 보여 줍니다. 등급 열의 대시(—)는 등급이 없는 하위작업이라는 뜻입니다. 더 보기를 선택하면 다음 행을 불러옵니다.

프롬프트 또는 세션 화면에서 행을 선택하고, 평가를 원래 작업과 비교하세요. 필요한 후속 질문과 결과 검증은 계속 진행하면 되며, 더 높은 점수를 위해 작업 방식을 바꿀 필요는 없습니다. 비어 있거나 일부만 있거나 대기 중인 값이 화면에 어떻게 표시되는지는 기간과 데이터 상태에서 확인하세요.