Компанія OpenAI випустила масштабне оновлення десктопного застосунку ChatGPT, додавши підтримку голосового керування ШІ-агентами. Тепер користувачі можуть не лише спілкуватися з чат-ботом, а й доручати йому виконання складних завдань на комп’ютері за допомогою голосових команд.
Нова функція базується на голосових моделях сімейства ChatGPT-Live, які забезпечують більш природне спілкування та дозволяють системі одночасно слухати користувача, відповідати й координувати роботу інтелектуальних агентів. Завдяки цьому взаємодія з ШІ стає значно швидшою та комфортнішою.
Оновлений голосовий режим інтегрований із сервісами ChatGPT Work і Codex. Це означає, що користувач може диктувати багатоетапні завдання, а система самостійно виконає необхідні дії або поставить уточнювальні запитання, якщо для виконання команди бракуватиме інформації.
Серед нових можливостей – керування діями на комп’ютері, пошук інформації в програмах і на вебсайтах, а також взаємодія з відкритими застосунками. Для комп’ютерів Mac передбачено функцію Appshots, яка після надання дозволу може аналізувати вміст екрана користувача, включно з альтернативним текстом зображень.
Раніше голосовий режим ChatGPT був зосереджений переважно на природному діалозі та підтримці розмови. Нове оновлення значно розширює його можливості, перетворюючи чат-бота на повноцінного цифрового помічника, який здатний виконувати практичні завдання без необхідності користувачу вручну працювати з клавіатурою чи мишею.
Під час демонстрації нових можливостей розробники показали, як ChatGPT за однією голосовою командою створює нову гілку проєкту, формує pull request та знаходить причину програмної помилки. Крім того, використовувати голосове керування в Codex можна навіть із застосунку для iPhone через віддалений доступ.
Запуск оновлення демонструє прагнення OpenAI зробити взаємодію зі штучним інтелектом максимально природною. Компанія поступово переходить від звичайного голосового спілкування до повноцінного голосового керування цифровими агентами, здатними виконувати реальні робочі завдання на комп’ютері.