В Cisco WebEx внезапно заработал довольно неплохо работающий перевод английской речи в текст, а оттуда в другой язык налету. Т.е. общаясь со своими американскими друзьями вы можете увидеть на их окне русские субтитры (да, русский тоже поддерживается), перевод осуществляется на более чем 100 языков. https://www.zdnet.com/article/ciscos-webex-debuts-free-real-time-translation-from-english-to-100-languages/

А майкрософт в ответ тут же показывает маленькие колонки-шайбы Intelligent Speakers, которые налету транскрибируют голосовые встречи (в том числе проводимые через Teams), и что важнее умеют различать по голосам участников и вписывать их репликами в чат, а не просто писать сплошной текст.
Интересно что эту фичу первый раз показали на BUILD'18, т.е. более 2 лет назад уже.
https://www.theverge.com/2021/3/2/22308962/microsoft-intelligent-speaker-teams-translation-trannoscription-features?scrolla=5eb6d68b7fedc32c19ef33b4

Началась конференция Microsoft Ignite 2021. Главное про Teams
_________

Microsoft анонсировала платформу Mesh — она позволяет нескольким людям общаться в виртуальном пространстве, которое накладывается на реальный мир.

Тестовая версия выйдет в марте на гарнитуре HoloLens 2: vc.ru/services/215734

​Еще немного анонсов про Microsoft Teams с конференции Ignite 2021:

— Режим Dynamic View будет менять раскладку собеседников на экране с помощью искусственного интеллекта — максимально естественным образом, обеспечивая оптимальный просмотр. Также для переключения раскладок добавили отдельную кнопку в панель управления собранием.

— В Teams появятся анимированные реакции.

— Станет доступна опция Microsoft Teams Connect. С ее помощью к каналам Teams cмогут присоединяться внешние пользователи.

— Пользователи Android и iOS смогут редактировать гифки прямо в приложении Teams. Также в мобильных приложениях появится темная тема. Станут доступными расширенная библиотека смайликов и возможность закреплять чаты.

— Появится поддержка нескольких регионов Multi-Geo для распределенных организаций.

— В Teams будет свой зал ожидания для пользователей, которые не были приглашены организатором собрания.

— В Teams теперь тоже будет показываться предупреждение при попытке открыть подозрительную ссылку.

— Пользователи Teams теперь тоже смогут совместно редактировать зашифрованные с помощью службы Microsoft Information Protection документы Office и пользоваться функцией автосохранения.

— Появится новый режим, который позволит при плохой связи ограничить передаваемый во время видеозвонков объем данных.

— Все звонки в Teams можно будет перенаправлять между различными устройствами — например, с ноутбука на смартфон.

— Пользователи приложений, созданных на базе платформы Azure Communication Services, смогут подключаться к собраниям Teams. Доступно в бета-версии.

— Добавили возможность брендирования и кастомизации приложений.

— В приложение Microsoft Teams Rooms для переговорных комнат встроили Microsoft Defender for Endpoint для защиты от угроз, критических ошибок и уязвимостей.

Более подробно в блоге Microsoft
_________

Microsoft выпустила приложение Group Transcribe — оно в реальном времени предлагает расшифровку онлайн-собраний и перевод на несколько десятков языков.

Пока приложение доступно только на iOS: vc.ru/services/216219

Андрей Себрант уже попробовал Group Transcribe ↑ и делится впечатлениями ↓

Дурной пример, говорят, заразен ;) Мало того, что модный Клабхаус выпустили только для пользователей айфонов, так теперь не маленький стартап, а большой Microsoft выкатил очень интересное приложение для текстовой расшифровки речи на совещаниях. Строго говоря, это не сам Microsoft, в его экспериментальное исследовательское подразделение Microsoft Garage, но все равно прикольно.
Про стенографическое приложение мечтают давно, но пока хорошего так и нет. Я попробовал этот Group Transcribe просто в режиме стенографирования моего монолога на русском и остался впечатлён качеством: на зачитанной мной странице текста пришлось в итоге исправить шесть мест, с таким качеством уже можно работать. Хотя ведёт себя приложение как положено эксперименту: иногда начинает глючить, перестаёт слышать голос - и уж точно не балует богатством функций и настроек. Но само распознавание таково, что я с интересом жду продолжения этого банкета :)

https://appleinsider.com/articles/21/03/03/microsoft-wants-its-new-group-transcribe-app-to-replace-meeting-notes

В десктопной версии WhatsApp теперь можно совершать аудио- и видеозвонки. Пока доступны только индивидуальные вызовы, но скоро обещают и групповые: vc.ru/social/216397

Google объявил о новом аудиокодеке Lyra, который сейчас внедряют в сервис Duo.

Lyra поддерживает ультранизкий битрейт 3 кбит/с, эффективно сжимает звук без потери качества при 8 кбит/c и может использоваться, если пропускная способность канала связи сократится на 60%. Самый популярный сейчас кодек Opus также работает в сетях с ограниченной пропускной способностью, но начиная с 8 кбит/с звук сжимает более грубо. Кодеки Speex, MELP, AMR могут работать с таким битрейтом, как и Lyra, но обладают рядом недостатков — они наделяют звук артефактами и делают голос роботизированным. В блоге можно послушать сравнительные сэмплы и подробнее почитать про интеллектуальную обработку, которая восстанавливает речь с использованием минимального объема данных.

Еще неизвестно, когда новый кодек станет общедоступным. Techradar предполагает, что пользователи Duo на Android и iOS могут узнать об этом постфактум.

​Стартап Grip делает омниканальную платформу для бизнес-нетворкинга. Проект собрал $14,5 млн финансирования. Решение можно использовать на онлайн-конференциях и гибридных мероприятиях. Раньше оно было заточено исключительно под живой формат.

Система на базе искусственного интеллекта подбирает для вас интересные выступления, помогает заранее планировать деловые встречи с гостями или спикерами, при этом кандидаты для общения выбираются с учетом ваших интересов. Их можно добавлять к своим собраниям, сервис совместим с популярными приложениями для видеоконференций — Zoom, BlueJeans.

Обещают еще скоро функционал для быстрого нетворкинга, человека можно будет пригласить на трехминутный разговор. Алгоритмы работают и перестраиваются под вас на лету в зависимости от текущих действий и выборов почти как в дейтинговом приложении, можно подключить профиль LinkedIn.

По словам основателей, фишка Grip в том, что сервис можно параллельно использовать с другими платформами. Например, известный Hopin — для организации онлайн-семинара, а Grip — уже для нетворкинга.

Организаторы могут устанавливать правила подбора участников, чтобы охватить нужную аудиторию. Для них собирается информация о потенциальных клиентах, она будет отражена в отчете. С заинтересованными посетителями можно поддерживать связь после окончания мероприятия.

Помимо сервисов видеосвязи Grip также интегрируется с платформами потокового вещания Vimeo и YouTube. Есть мобильные приложения для Android и iOS.

Компания была основана в 2016 году, среди ее клиентов несколько крупных компаний-организаторов конференций и выставок — Reed Exhibitions, Messe Frankfurt и другие. С начала 2020 года события Grip посетили 1,5 млн человек, ежемесячно тут проходит более 100 мероприятий. За 2021 год они планируют провести уже более 10 тыс. и привлечь 5 млн посетителей.
_________

Pexip опубликовал свежий рейтинг Frost Radar for Cloud Meetings and Team Collaboration Services.

Frost & Sullivan оценивает коммуникационные сервисы по степени инновационности (на инфографике вправо) и по результатам деятельности и роста (вверх). Впереди планеты всей Microsoft и Zoom, за ними Cisco с большим отрывом по росту, но не по инновационности. Российский TrueConf в этом рейтинге есть тоже.
_________

​Microsoft в феврале (чуть раньше чем Google) представил новый аудиокодек Satin на базе машинного обучения и современных алгоритмов резервирования, который уже сейчас используется в Teams и Skype.

Satin может передавать широкополосную речь до 16кГц уже при 6 кбит/с, а стереомузыку — при 17 кбит/с. Его предшественник Silk, который в свое время заменил G.722, мог работать с переменным битрейтом от 6 кбит/с и обеспечивал широкополосную передачу речи при 14 кбит/с.

Satin кодирует и передает информацию только в нижних частотных диапазонах, верхние восстанавливает с помощью нейронных сетей. Microsoft пишет, что образовавшуюся в связи с этим вычислительную сложность удалось снизить на 40% с помощью оптимизации алгоритмов и обеспечить работоспособность кодека на всех пользовательских устройствах. Satin также усовершенствовали с точки зрения компенсации потери данных. Он кодирует пакеты независимо друг от друга, поэтому пропажа одного не влияет на качество следующих. В блоге есть сравнительные сэмплы Satin и Silk при 6 кбит/с, частотные характеристики и описание работы.

Satin уже используется в Teams и Skype для звонков один на один в диапазоне от 6 до 36 кбит/с. Скоро кодек будет поддержан для собраний Teams и передачи стереомузыки с частотой дискретизации 48 кГц.
_________