Голосовой режим ChatGPT

Голосовой режим ChatGPT на базе GPT-Live позволяет обсуждать идеи и координировать задачи в Chat, Work и Codex в приложении ChatGPT для настольных компьютеров. Начинайте работу, проверяйте ход выполнения или меняйте направление, не возвращаясь к набору текста.

Голосовой режим ChatGPT доступен в приложении ChatGPT для настольных компьютеров в рамках планов ChatGPT Plus, Pro, Business, Edu и Enterprise. Для Enterprise и Edu сначала предусмотрен двухнедельный период раннего доступа, после которого функция становится доступна по умолчанию. Голосовой режим ChatGPT также можно использовать через Remote в iOS после сопряжения телефона с настольным хостом. Доступность также зависит от этапа развёртывания и настроек рабочего пространства. См. раздел Доступность функций.

Голосовой чат openai/codex

Можете объяснить, как работает голосовой режим в настольном приложении ChatGPT?

Конечно. Вы можете обсуждать идеи, проверять код и продолжать работу в разных проектах, сохраняя контекст.

Хорошо. Откройте актуальные компоненты голосового режима и покажите, что заслуживает внимания.

Проверены актуальные компоненты голосового режима Codex
Найдены область голосового взаимодействия в реальном времени и поле ввода сообщений

Слушаю

Начало голосового разговора

Откройте в приложении ChatGPT для настольных компьютеров задачу Codex, которую хотите обсудить, или начните новый чат либо задачу.
Выберите Start voice chat в существующей задаче или Start new voice chat в новом чате либо задаче.
При первом запуске голосового чата разрешите доступ к микрофону, выберите голос и проверьте контекст экрана в macOS.
Начните говорить. По завершении выберите Stop voice chat.

Поддержка голосового режима в существующих задачах Codex развёртывается постепенно. Когда она станет доступна, вы сможете начать разговор в задаче, которая была начата с текстовых сообщений. Голосовой режим использует историю разговора и выбранную модель этой задачи для выполнения ваших запросов, поэтому вы можете обсуждать ход выполнения или менять направление, не создавая новую задачу.

Если Start voice chat недоступно в существующей задаче, обновите приложение для настольных компьютеров и хост Codex, на котором выполняется задача. Доступность также зависит от вашей учётной записи и рабочего пространства. Вы по-прежнему можете начать новый голосовой чат там, где эта возможность поддерживается, или использовать голосовой ввод для ввода текста запроса. Чтобы возобновить предыдущий голосовой чат, откройте его и выберите Start voice chat.

Сочетание клавиш можно настроить в разделе Settings > Voice > Voice chat hotkey.

Ведение разговора

Голосовой режим ChatGPT поддерживает естественное чередование реплик. Вы можете прервать ChatGPT во время ответа, задать дополнительный вопрос или изменить направление. Если ChatGPT приступит к работе, продолжайте говорить, чтобы проверять ход выполнения или корректировать задачу.

Делегирование и координация работы

Голосовой режим ChatGPT может запускать отдельные задачи для длительной работы, проверять существующие задачи и отправлять дополнительные инструкции. Он сообщает о ходе выполнения, препятствиях и результатах в голосовом разговоре, чтобы вы могли продолжать общение, пока работа выполняется.

Например:

«Проверь сегодняшнюю памятку по запуску и обобщи решения, которые требуют утверждения».
«Запусти задачу Codex, чтобы выполнить тесты и выяснить причины всех сбоев».
«Проверь активные задачи и обобщи всё, что препятствует их выполнению».

Вы также можете попросить переключиться на другую задачу Codex, а затем вернуться к предыдущей. Например, скажите: «Переключи меня на задачу, в которой проверяются тесты», а затем: «Верни меня к предыдущей задаче». Целевая задача должна поддерживать голосовой режим и быть доступна на подключённом хосте.

Голосовой режим ChatGPT использует те же разрешения, что и задачи, которыми он управляет в Chat, Work и Codex в приложении ChatGPT для настольных компьютеров.

Покажите ChatGPT, что видите

В macOS включите Screen context в разделе Settings > Voice, а затем скажите: «Посмотри сюда». ChatGPT может сделать снимок приложения в окне на переднем плане и использовать его как контекст. Ваша организация может отключить эту возможность.

Снимок приложения может содержать изображение окна и доступный текст, включая содержимое за пределами видимой области прокрутки. macOS может запросить разрешения Screen & System Audio Recording и Accessibility. Не показывайте окна, содержащие конфиденциальную информацию, в том числе текст за пределами видимой области прокрутки.