Codex에서 ChatGPT Work 사용량 인사이트 보기
관리자 콘솔의 인사이트를 통해 팀이 ChatGPT Work와 Codex를 어떤 용도로 사용하고 어디에 크레딧을 소비하는지 파악할 수 있습니다. 워크스페이스 개요에서 범주를 열면 해당 범주의 작업과 사용량을 확인할 수 있습니다. 결과를 비교하기 전에 각 화면에 표시된 범위를 확인하세요.
이 화면을 활용하여 담당자와 함께 평가할 워크플로를 파악하세요. 사용량 및 지출을 팀의 기록과 함께 검토하여 작업에 드는 수고가 줄었는지, 품질 기준을 충족하는지, 더 나은 결과를 내는지 확인하세요.
분석 화면
관리자 콘솔에는 ChatGPT Work와 Codex의 분석 기능이 포함되어 있습니다. 사용량 화면에는 활동과 소비량이 표시됩니다. 인사이트는 사용량을 범주와 작업별로 분류합니다. 엔지니어링 업무의 경우 코드 리뷰 화면에서 리뷰 활동과 발견된 문제를 확인할 수 있습니다.
토큰을 살펴보려면 사용량 화면에서 제공하는 토큰 지표를 사용하세요. 메시지 비중, 크레딧 비중, 토큰 비중은 서로 다른 항목을 나타내므로 결과를 비교하거나 공유할 때 이 명칭을 그대로 유지하세요.
인사이트 열기
관리자 콘솔에서 워크스페이스를 선택하고 분석 > 인사이트 를 엽니다. 해당 워크스페이스의 분석에 대한 접근 권한이 필요하며, 표시되는 화면과 데이터는 권한 및 활성화된 기능에 따라 달라집니다.
결과를 살펴보기 전에 워크스페이스, 날짜 범위, 사용 가능한 필터를 확인하세요. 활동을 비교할 때는 이 조건을 일관되게 유지하세요. 인사이트 기록은 분류가 시작된 시점부터만 제공됩니다.
사용 사례와 작업
개요에서 사용 사례 / 작업 전환 버튼을 사용하여 포괄적인 범주와 더 구체적인 활동 사이를 전환할 수 있습니다. 사용 사례 탭에서 범주를 펼치면 해당 범주의 작업이 표시됩니다.
차트에서 사용 사례나 작업을 선택하면 세부 정보가 열립니다. 상위 10개 외의 범주와 작업까지 비교하려면 사용 사례 표를 활용하세요.
하나의 범주에는 여러 워크플로가 포함될 수 있습니다. 범주를 단일 비즈니스 프로세스로 간주하기 전에 해당 작업을 확인하세요. 분류되지 않은 활동이 있다면 결과를 설명할 때 그 한계를 명시하세요.
메시지, 크레딧, 활성 사용자
각 범주나 작업을 이해하려면 표의 메시지, 크레딧, 활성 사용자를 함께 살펴보세요. 샘플링 안내가 표시되면 표시된 수치는 표본으로 추출된 활동을 반영합니다. 이 수치를 확대 적용하여 워크스페이스 전체 활동을 추정하지 마세요.
메시지 는 범주 또는 작업과 관련된 메시지 수를 나타냅니다. 메시지 수만으로는 팀이 완료한 작업량을 알 수 없습니다.
크레딧 비중 은 범주 또는 작업과 관련된 크레딧 소비의 비중을 나타냅니다. 크레딧 및 메시지와 함께 살펴보면 소비가 어디에 집중되어 있는지 파악할 수 있습니다.
활성 사용자 는 범주 또는 작업에서 활동한 사람 수를 나타냅니다. 메시지와 함께 살펴보면 범주를 사용하는 사람 수와 해당 범주에서 발생하는 활동량을 비교할 수 있습니다.
어떤 범주가 크레딧의 큰 비중을 차지한다면 해당 범주의 작업, 모델, 설정을 확인하세요. 더 복잡한 작업이나 다른 모델 선택이 해당 범주의 크레딧 사용량을 설명할 수 있습니다. 소비량이 적절한지 판단하기 전에 팀이 달성한 결과를 검토하세요.
어떤 범주의 활성 사용자가 적다면 해당 사용자에게 어떻게 활용하고 있으며 어떤 어려움을 겪고 있는지 물어보세요. 공유할 만한 워크플로가 있거나 추가 지원이 필요할 수 있습니다.
범주 세부 정보
범주의 세부 정보를 열면 오른쪽 패널에서 작업과 사용량의 세부 내역을 확인할 수 있습니다.
범주에 포함된 작업과 각 작업에서 사용한 크레딧을 검토하세요. 모델, 추론, 속도별 내역은 선택한 범주 또는 작업 내에서 각 옵션이 차지하는 크레딧 비중을 보여 줍니다. 소비량이 달라지면 팀에 작업이나 이러한 설정이 변경되었는지 물어보세요.
제공되는 경우 범주 또는 작업의 플러그인 및 스킬 호출을 검토하세요. 이 수치에는 선택한 날짜와 필터 범위 내에서 ChatGPT Work와 Codex 전반의 활동이 포함됩니다. 호출 수는 메시지 수나 완료된 작업 수와 다릅니다.
확인한 내용을 공유할 때 추정치는 계속 추정치로 표시하세요. 플러그인과 스킬의 크레딧 할당량은 서로 겹칠 수 있으므로 총투자액을 계산하기 위해 두 화면의 수치를 더하지 마세요. 크레딧과 청구에 미치는 영향을 해석하는 방법에 대한 자세한 내용은 ChatGPT Work 사용량 및 비용을 참조하세요.
코드 리뷰
엔지니어링 업무를 검토하는 경우 코드 리뷰 를 열어 워크스페이스에서 제공하는 리뷰 지표를 확인하세요.
- 리뷰한 PR 은 풀 리퀘스트 리뷰 활동을 나타냅니다. 리뷰한 풀 리퀘스트가 반드시 병합되거나 배포된 것은 아닙니다.
- 발견된 문제 는 해당 리뷰에서 발견된 문제를 나타냅니다. 어떤 발견 사항이 유용했고 실제 조치로 이어졌는지 리뷰어에게 확인하세요.
- 우선순위별 문제, 반응, 반응 감성 은 발견된 문제와 사람들의 반응에 대한 맥락을 더해 줍니다.
수치가 0이면 활동이 없었거나 보고에 누락이 있었을 수 있습니다. 수치를 해석하기 전에 날짜 범위와 관련 리뷰가 포함되어 있는지 확인하세요.
가치 평가
팀이 ChatGPT Work 또는 Codex에서 사용하는 워크플로를 하나 선택하세요. 업무 책임자와 개선할 결과 및 측정 방법에 합의하세요. 고객사 브리핑 자료, 재고 계획, 풀 리퀘스트와 같은 팀의 기록과 함께 인사이트를 검토하세요. 실제 업무를 수행하는 사람들을 평가에 참여시키세요.
일관된 보고 기간을 사용하고 샘플링 안내가 있는지 확인하세요. 범주에는 여러 워크플로가 포함될 수 있으며 활동 수치는 완료된 작업량을 측정하지 않습니다. 아래 예시는 사용량 데이터와 워크플로의 증거를 함께 활용하여 가치를 조사하는 방법을 보여 줍니다.
버그 수정
Codex가 엔지니어의 조사와 재작업을 줄여 버그를 해결하는 데 도움이 되고 있나요?
한 서비스에서 반복되는 버그 유형을 선택하세요. 예를 들어 잘못된 입력 처리가 있습니다. 해당 코드를 잘 아는 엔지니어와 함께 이슈, 수정 사항, 회귀 테스트를 검토하세요.
조사 방법
- 유사한 수정 작업을 비교하세요. 복잡도가 비슷한 버그의 조사, 구현, 리뷰 시간을 기록하세요. 실제 작업에 들인 시간과 리뷰 또는 릴리스를 기다린 시간을 구분하세요.
- 인사이트를 확인하세요. 소프트웨어 엔지니어링을 열고 조사와 관련된 작업을 찾으세요. 비교 대상 기간의 크레딧과 활성 사용자를 검토하세요.
- 결과를 확인하세요. 테스트가 버그를 재현하고 수정 후에는 통과하는지 확인하세요. 엔지니어가 무엇을 바로잡았는지 물어보고, 다시 열린 이슈나 회귀 문제를 기록하세요.
- 검증된 수정 작업에 드는 총수고가 줄었다면 워크플로를 공유하세요. 재작업이 여전히 많다면 재현 단계나 저장소 컨텍스트를 개선하고 다시 비교하세요.
테스트 추가
Codex가 팀이 중요한 실패 사례를 더 적은 수작업으로 테스트하는 데 도움이 되고 있나요?
테스트 범위에 알려진 공백이 있는 모듈을 선택하세요. 결과를 비교하기 전에 어떤 동작과 실패 사례에 테스트가 필요한지 합의하세요.
조사 방법
- 공백을 정의하세요. 테스트가 누락된 동작을 나열하고 비슷한 테스트를 추가하는 데 필요한 수고를 기록하세요. 테스트 보고서를 사용하여 시작 시점의 테스트 범위를 기록하세요.
- 인사이트를 확인하세요. 소프트웨어 엔지니어링에서 관련 작업을 찾으세요. 같은 기간의 크레딧과 제공되는 모델 및 추론별 내역을 검토하세요.
- 테스트를 점검하세요. 엔지니어가 검증문이 의도한 실패를 잡아내는지 확인하도록 하세요. 불안정한 테스트 결과, 늘어난 실행 시간, 테스트를 다시 작성하거나 유지 관리하는 데 들인 시간을 기록하세요.
- 유용한 테스트를 반영하는 데 드는 수고가 줄었다면 이 접근 방식을 재사용하세요. 실패를 잡아내지 못한 채 테스트가 통과한다면 기대 동작을 명확히 하고 다시 시도하세요.
코드 리팩터링
Codex가 팀이 기대 동작을 유지하면서 리팩터링을 완료하는 데 도움이 되고 있나요?
패키지 전반에서 더 이상 사용되지 않는 API를 교체하는 것처럼 범위가 한정된 변경을 하나 선택하세요. 어떤 호출 지점을 범위에 포함할지, 팀이 결과를 어떻게 검증할지 합의하세요.
조사 방법
- 범위를 정하세요. 업데이트할 호출 지점과 비슷한 수동 변경에 드는 수고를 기록하세요. 특히 이전에 미뤄 둔 작업이라면 추정치를 명시하세요.
- 인사이트를 확인하세요. 같은 기간의 관련 소프트웨어 엔지니어링 작업과 해당 크레딧을 검토하세요. 소비량이 눈에 띄면 제공되는 모델 및 추론별 내역을 확인하세요.
- 변경 사항을 검증하세요. diff를 검토하고 관련 검사를 실행하며 누락된 호출 지점이나 동작 변경을 찾으세요. 리뷰, 수정, 후속 수정에 들인 수고도 포함하세요.
- 리팩터링이 합의한 검사를 통과하면 다른 패키지로 확대하세요. 정리할 작업이 너무 많이 남았다면 변경 범위를 좁히거나 먼저 작동하는 예시를 제공하세요.
고객사 조사
ChatGPT Work가 영업 담당자가 더 적은 수고로 정확한 고객사 브리핑 자료를 준비하는 데 도움이 되고 있나요?
브리핑 자료를 정기적으로 준비하는 영업팀을 선택하세요. 고객사 이력, 현재 우선순위, 고객에게 할 질문 등 각 브리핑 자료에 포함할 내용을 합의하세요.
조사 방법
- 유사한 브리핑 자료를 비교하세요. 시범 운영 전과 운영 중의 준비 및 검토 시간을 기록하세요. 동일한 품질 기준을 적용하고 비슷한 수준의 조사가 필요한 고객사를 대상으로 하세요.
- 인사이트를 확인하세요. 영업에서 고객사 조사 및 계획 작업을 찾으세요. 사용 가능한 그룹 필터로 해당 팀에 초점을 맞추세요. 같은 기간의 크레딧, 모델 선택, 제공되는 플러그인 또는 스킬 활동을 검토하세요.
- 영업 담당자와 함께 브리핑 자료를 검토하세요. 원본 기록과 대조하여 사실을 확인하고 조사가 대화 준비에 도움이 되는지 평가하세요. 수정에 들인 수고를 포함하고, 절약한 시간이 고객과의 대화나 후속 업무에 사용되는지 추적하세요.
- 정확한 브리핑 자료를 만드는 데 드는 수고가 줄었다면 접근 방식을 공유하세요. 중요한 맥락이 빠져 있다면 원본 자료를 개선하거나 공용 스킬을 제공하세요. 이후 검증된 영업 기회나 매출의 변화를 평가하려면 CRM 기록을 사용하세요. 인사이트만으로는 이러한 연관성을 입증할 수 없습니다.
재고 계획
ChatGPT Work가 팀이 더 적은 수작업으로 신뢰할 수 있는 재고 계획을 준비하는 데 도움이 되고 있나요?
행사용 재고 준비처럼 반복되는 계획 주기를 선택하세요. 어떤 제품과 장소를 범위에 포함할지, 팀이 어떤 판매 및 재고 기록을 사용할지 합의하세요.
조사 방법
- 현재 프로세스를 기록하세요. 기록 수집, 계획 작성, 계획 수정에 드는 시간을 측정하세요. 비슷한 주기에서 발생한 재고 부족이나 과잉 재고를 기록하세요.
- 인사이트를 확인하세요. 팀의 계획 업무에 맞는 범주와 작업을 찾으세요. 같은 기간의 크레딧과 활성 사용자를 검토하세요. 범주의 사용량을 이 워크플로의 사용량으로 간주하기 전에 팀과 일치 여부를 확인하세요.
- 계획을 실제 결과와 비교하세요. 재고 담당자가 수량, 가정, 누락된 데이터를 검증하도록 하세요. 검토와 수정에 들인 수고를 포함하세요. 주기가 끝나면 계획한 재고를 판매량 및 남은 재고와 비교하세요.
- 계획이 신뢰할 수 있고 수고가 줄었다면 워크플로를 재사용하세요. 재고 부족이나 과잉 재고가 늘어나면 입력 자료와 가정을 다시 검토하세요. 비용 절감 여부는 재고 및 구매 기록을 사용하여 평가하세요.
평가 내용을 기록하세요. 사용 사례, 책임자, 보고 기간을 명시하세요. 기준선, 결과, 크레딧, 한계를 포함하세요. 팀과 합의한 변경 사항과 이를 검토할 날짜를 기록하세요. 완료된 작업 수는 팀의 기록에서 집계하고 추정치는 명시하세요.
ROI를 평가하려면 개선의 가치를 AI, 설정, 교육, 지속적인 지원에 드는 비용과 비교하세요. 작업을 검토하고 수정하는 데 들인 시간도 포함하세요. 시간이 절약되었다고 해서 자동으로 현금 지출이 줄어드는 것은 아닙니다. 팀이 확보한 여력을 어떻게 활용하는지 확인하세요.
사용량 한도를 높이기 전에 현재 한도, 소비량, 추가 용량이 필요한 작업을 검토하세요. 소비한 크레딧이 자동으로 추가 청구 금액이 되는 것은 아닙니다. ChatGPT Work 사용량 및 비용을 참조하세요.
사용량 인사이트는 ChatGPT Work와 Codex에 대한 투자 수익을 이해하는 데 필요한 요소 중 하나입니다. 선택한 범위 내의 사용량과 크레딧 소비량을 보여 줍니다. 실제 업무를 수행하는 팀은 무엇이 달라졌는지, 결과가 개선되었는지, 그 개선이 어느 정도의 가치가 있는지 설명할 수 있습니다. 두 가지를 함께 활용하여 어떤 워크플로를 확대하고 어디에 추가 지원이 필요한지 결정하세요.