🔥 Виртуальный собеседник появится в ChatGPT Plus уже на следующей неделе

В мае OpenAI анонсировала новую флагманскую модель GPT-4o (где «o» означает «omni»), которая обладает усовершенствованными аудиовозможностями.

Модель GPT-4o способна реагировать на аудиовходы с задержкой всего в 320 мс, что сопоставимо со временем реакции человека в обычном разговоре.

OpenAI также сообщила, что режим Голоса в ChatGPT будет использовать возможности модели GPT-4o для обеспечения плавного голосового общения.

Технические характеристики

Разработчики так описали голосовые возможности GPT-4o:

• Единая модель: GPT-4o обрабатывает текст, зрение и аудио одной и той же нейронной сетью.
• Быстрая реакция: Задержка отклика всего 320 мс.
  
• Универсальные возможности: Возможность обработки различных типов данных.
  

С GPT-4o мы обучили единую новую модель, охватывающую текст, зрение и аудио, что означает, что все входные и выходные данные обрабатываются одной и той же нейронной сетью. Поскольку GPT-4o является нашей первой моделью, объединяющей все эти модальности, мы только начинаем исследовать, что она может делать и какие у нее ограничения. 

Задержка и подготовка к запуску

В июне OpenAI объявила, что запуск продвинутого режима Голоса, который планировался для альфа-тестирования небольшой группы пользователей ChatGPT Plus в конце июня, будет отложен на месяц.

Компания пояснила, что ей требуется больше времени для улучшения способности модели обнаруживать и отказываться от определенного контента, а также подготовки инфраструктуры для масштабирования до миллионов пользователей с поддержанием мгновенного отклика.

Подтверждение запуска

Сегодня генеральный директор OpenAI Сэм Альтман подтвердил в своем посте в X, что альфа-версия режима Голоса будет запущена на следующей неделе для подписчиков ChatGPT Plus.

Текущие проблемы и улучшения

Текущий режим Голоса в ChatGPT неинтуитивен из-за значительных задержек в 2.8 сек (GPT-3.5) и 5.4 сек (GPT-4) в среднем. Продвинутый режим Голоса на базе GPT-4o позволит подписчикам ChatGPT вести плавные разговоры без задержек.

Новая поисковая система SearchGPT

Отметим, что также накануне OpenAI анонсировала разработку собственной поисковой системы под названием SearchGPT.

На официальном сайте компании сообщается, что новинка будет быстро и напрямую отвечать на вопросы пользователей с актуальной информацией из интернета, предоставляя прямые ссылки на соответствующие источники.