Голос вместо клавиатуры. ChatGPT Voice научился управлять агентами на компьютере

Об этом сообщает TechCrunch .

Голосовой режим работает на базе нового семейства моделей ChatGPT-Live, которое OpenAI представила в начале этого месяца.

ChatGPT Voice совместим с ChatGPT Work и Codex, а также может использовать навыки работы с компьютером для поиска на сайтах и в приложениях. На macOS функция Appshots позволяет приложению видеть содержимое экрана пользователя, включая замещающий текст.

Мобильная версия ChatGPT Voice на старте обеспечивала более плавный диалог и лучше справлялась с ситуациями, когда собеседник перебивает, однако не умела выполнять действия на телефоне. Обновление для десктопа существенно расширяет возможности: пользователь может диктовать сложные многоэтапные команды, а ChatGPT реагирует, когда ему требуется уточнение.

В демонстрационном видео OpenAI разработчик одной командой попросил ChatGPT создать новую ветку, сделать pull request и найти первопричину ошибки.

В Codex голосовым режимом можно пользоваться и через приложение для iOS посредством удаленного доступа.