Аналитика использования ChatGPT Work в Codex

Раздел Insights в консоли администратора помогает понять, для чего команды используют ChatGPT Work и Codex и на что расходуются кредиты. Откройте категорию в обзоре рабочего пространства, чтобы посмотреть ее задачи и показатели использования. Перед сравнением результатов проверьте, какой набор данных охватывает каждое представление.

Используйте эти представления, чтобы определить рабочие процессы для оценки вместе с ответственными за них людьми. Сопоставляйте показатели использования и расходы с данными команды, чтобы понять, требует ли работа меньше усилий, соответствует ли стандартам качества и дает ли лучшие результаты.

Представления аналитики

В консоли администратора доступна аналитика ChatGPT Work и Codex. Раздел «Использование» показывает активность и потребление ресурсов. Insights группирует использование по категориям и задачам. Для инженерной работы раздел «Проверка кода» показывает активность проверок и выявленные проблемы.

Если вы анализируете токены, используйте показатели токенов, доступные в разделе «Использование». Доля сообщений, доля кредитов и доля токенов описывают разные величины; сохраняйте эти обозначения при сравнении результатов и обмене ими.

Открытие Insights

В консоли администратора выберите рабочее пространство и откройте Аналитика > Insights. Вам потребуется доступ к аналитике этого рабочего пространства; доступные представления и данные зависят от ваших разрешений и включенных функций.

Прежде чем изучать результаты, проверьте рабочее пространство, диапазон дат и доступные фильтры. При сравнении активности используйте одинаковые параметры. История Insights доступна только с момента начала классификации.

Сценарии использования и задачи

На странице обзора используйте переключатель «Сценарии использования / Задачи», чтобы переключаться между широкими категориями и более конкретными действиями. На вкладке «Сценарии использования» разверните категорию, чтобы увидеть ее задачи.

Выберите сценарий использования или задачу на диаграмме, чтобы открыть подробные сведения. Используйте таблицу сценариев использования для сравнения категорий и задач за пределами первой десятки.

Категория может включать несколько рабочих процессов. Изучите ее задачи, прежде чем рассматривать ее как единый бизнес-процесс. Если часть активности не классифицирована, укажите это ограничение при описании результатов.

Сообщения, кредиты и активные пользователи

Рассматривайте столбцы «Сообщения», «Кредиты» и «Активные пользователи» вместе, чтобы понять особенности каждой категории или задачи. Если появляется уведомление о выборке, отображаемые значения отражают активность в выборке. Не экстраполируйте их для оценки общей активности рабочего пространства.

Сообщения — количество сообщений, связанных с категорией или задачей. Этот показатель не говорит о том, какой объём работы завершила команда.

Доля кредитов — доля потребления кредитов, связанная с категорией или задачей. Рассматривайте её вместе с показателями «Кредиты» и «Сообщения», чтобы понять, где сосредоточено потребление.

Активные пользователи — количество людей, активных в категории или задаче. Рассматривайте этот показатель вместе с показателем «Сообщения», чтобы сопоставить количество людей, использующих категорию, с объёмом создаваемой ими активности.

Если на категорию приходится большая доля кредитов, проверьте ее задачи, модели и настройки. Потребление кредитов в категории может объясняться более сложной работой или выбором других моделей. Изучите, чего добилась команда, прежде чем решать, оправдано ли такое потребление.

Если в категории мало активных пользователей, спросите их, как они ее используют и с какими трудностями сталкиваются. Возможно, у них есть рабочий процесс, которым стоит поделиться, или им нужна дополнительная поддержка.

Сведения о категории

Откройте сведения о категории, чтобы увидеть ее задачи и разбивку использования на выдвижной панели справа.

Изучите задачи категории и расход кредитов на каждую из них. Разбивки по моделям, рассуждению и скорости показывают долю кредитов для каждого варианта в выбранной категории или задаче. Если потребление меняется, спросите команду, изменилась ли работа или эти настройки.

Если такие данные доступны, изучите вызовы плагинов и навыков для категории или задачи. Эти значения включают активность в ChatGPT Work и Codex в пределах выбранных дат и фильтров. Вызовы не равнозначны сообщениям или завершенным задачам.

Когда делитесь выводами, явно обозначайте оценочные значения как оценки. Распределение кредитов по плагинам и навыкам может пересекаться, поэтому не складывайте показатели этих представлений для расчета общих вложений. Подробнее об интерпретации кредитов и их влиянии на счета см. в разделе Использование и стоимость ChatGPT Work.

Проверка кода

Если вы оцениваете инженерную работу, откройте Проверка кода, чтобы увидеть доступные для вашего рабочего пространства показатели проверок.

• Проверенные PR — активность проверок PR. Проверенный PR не обязательно был слит или развёрнут.
• Найденные проблемы — проблемы, выявленные при этих проверках. Уточните у авторов проверок, какие находки оказались полезными и привели к действиям.
• Проблемы по приоритету, реакции и тональность реакций дают дополнительный контекст о найденных проблемах и отклике людей.

Нулевое значение может означать отсутствие активности или пробел в отчётности. Прежде чем интерпретировать его, проверьте диапазон дат и то, включены ли соответствующие проверки.

Оценка ценности

Выберите рабочий процесс, который ваша команда использует в ChatGPT Work или Codex. Согласуйте с ответственным со стороны бизнеса, какой результат нужно улучшить и как вы будете его измерять. Изучайте Insights вместе с материалами команды, например справками о клиентах, планами запасов или PR. Привлеките к оценке людей, выполняющих эту работу.

Используйте единый отчетный период и проверяйте уведомления о выборке. Категории могут включать несколько рабочих процессов, а показатели активности не измеряют завершенную работу. Примеры ниже показывают, как исследовать ценность, используя и данные об использовании, и фактические результаты рабочего процесса.

Зафиксируйте оценку. Укажите сценарий использования, ответственного и отчетный период. Включите исходные показатели, результаты, кредиты и ограничения. Запишите согласованные с командой изменения и дату их пересмотра. Подсчитывайте завершенную работу по данным команды и помечайте оценочные значения.

Для оценки ROI сравните ценность улучшения с затратами на ИИ, настройку, обучение и постоянную поддержку. Включите время на проверку и исправление работы. Сэкономленное время не означает автоматической экономии денег; проверьте, как команда использует высвободившиеся ресурсы.

Прежде чем повышать лимиты использования, изучите текущие лимиты, потребление и работу, которой требуется больше ресурсов. Израсходованные кредиты не означают автоматического увеличения суммы счета. См. раздел Использование и стоимость ChatGPT Work.

Аналитика использования — один из источников для оценки отдачи от вложений в ChatGPT Work и Codex. Она показывает использование и потребление кредитов в пределах выбранного набора данных. Команды, выполняющие работу, могут объяснить, что изменилось, улучшились ли результаты и какова ценность этого улучшения. Используйте оба источника, чтобы решить, какие рабочие процессы расширять и где команде нужна дополнительная поддержка.