⚪️ Новый ассистент взаимодействует с человеком в реальном времени. На презентации разработчики сказали, что задержка в ответах составляет ~320 миллисекунд — это сопоставимо со скоростью реакции человека. Кроме того, ИИ реагирует, если его перебивают, не теряет нить разговора и запоминает контекст.

⚪️ ChatGPT может отвечать на запросы в определенном стиле — например, разговаривать как пират, напевать или нашептывать, а также быстро переключаться между языками и менять темп речи. У него получается имитировать голоса популярных персонажей и даже смешивать их манеру речи в одной фразе. Причем делает это, как обычный человек, — голос может быть узнаваем, но все равно нет абсолютного сходства.

⚪️ Одна из главных особенностей нового режима — поддержка множества языков, в том числе не самых распространенных, например армянского. Причем виртуальный ассистент может не только говорить на них сам, но и воспринимать их «на слух» и переводить фразы в режиме реального времени. Он также помогает с изучением иностранных языков, подсказывая правильное произношение.

В одном из примеров ассистента попросили рассказать с выражением историю на русском (смотрите видео выше). Слышно, что у него есть небольшие проблемы с произношением и интонацией. Но он правильно строит предложения и не теряет смысл повествования.

⚪️ Когда ИИ попросили вслух быстро досчитать до 50, ближе к концу он начинает немного запинаться, как будто ему не хватает воздуха (смотрите видео выше). При этом в текстовой версии ответа нет никаких пауз или соответствующих пометок. Просто модель использует естественные речевые шаблоны, которые включают в себя короткие перерывы, чтобы перевести дух. И даже если попросить ИИ не дышать и вести себя как Супермен, которому не нужен воздух, он все равно делает паузы.

⚪️ Виртуальный ассистент умеет петь, а если расположить рядом два устройства с ChatGPT, то они могут продолжать строчки песни друг за другом. После релиза выяснилось, что голосовому режиму по силам даже битбокс.