Представляем новую мультимодальную мультизадачную модель OmniFusion, которую мы сделали совместно с исследователями из Sber AI и SberDevices ✨

Модель способна анализировать, описывать и отвечать на вопросы по изображениям, поддерживая непрерывный диалог с пользователем. Анализируя предоставленные пользователем изображения, OmniFusion точно распознаёт расположенные на них объекты, их количество, цвет и положение в пространстве.

OmniFusion может не просто описать картинку, но и ответить на сопутствующие вопросы, а также использовать извлечённую информацию в ходе диалога с человеком. Например, она может распознать сфотографированное блюдо и предложить рецепты его приготовления, найти ответ на логическую задачу или объяснить шутку.

Больше интересного про архитектуру:

→ Новый пост на Хабр про то, как устроена модель OmniFusion
→ Рассказ про модель от Андрея Кузнецова, а также доклад Ивана Оселедца на AI Journey 2023

Научный сотрудник AIRI и руководитель исследовательской группы в Сколтехе Александр Коротин стал лауреатом премии за расширение границ познаний об искусственном интеллекте 🎉

Вчера на международной конференции AI Journey 2023 Александра и еще двух победителей наградили премией «Лидеры искусственного интеллекта», которая призвана отметить выдающиеся примеры внедрения искусственного интеллекта в коммерческих и государственных проектах, а также прорывные исследования в области ИИ.

Каждый из трех возможных победителей в этой категории — молодой исследователь, добившийся признанных сообществом результатов в изучении ИИ, получил денежную премию в размере 1 000 000 рублей.

Поздравляем! 💡

#AIRIseminars уже завтра, делимся подробностями:

🔵Дата и время: 29 ноября в 17:00 в онлайн-формате на YouTube-канале AIRI

🔵Тема: «Методы обучения спайковых нейронных сетей для задач анализа данных»

🔵Докладчик: Роман Рыбка, Курчатовский институт

🔵Оппонент: Петр Кудеров, AIRI

🔵Описание: развитие технологий нейроморфных вычислений является актуальной современной задачей, вдохновленной способностями мозга живых организмов. Перспектива исследования этих технологий состоит в получении энергоэффективных инструментов анализа данных, позволяющих обрабатывать информацию, представленную в спайковом виде, с минимальной задержкой.

В докладе будут рассматриваться несколько подходов к созданию моделей спайковых сетей, пригодных для реализации на нейроморфных вычислительных устройствах. Также будут обсуждаться существующие вызовы для развития этих подходов и ближайшие перспективы исследований.

Запись прошлого семинара по ссылке. До встречи!

Вчера стартовал «III Конгресс молодых ученых» в Сириусе, рассказываем, где можно послушать коллег из AIRI 😁

29 ноября

11:45—13:15
→ Алексей Осадчий поучаствует в дискуссии «Настоящее и будущее междисциплинарных исследований мозга», трансляция по ссылке.

14:15–15:45
→ Ольга Кардымон примет участие в сессии «Искусственный интеллект для науки: синергия достижений». Трансляцию можно найти в слоте сессии.

30 ноября

13:30—15:00
→ Айбек Аланов, Ольга Кардымон и Виктор Гомболевский выступят в секции AI Journey, трансляция будет на сайте.

Также трансляция идет все дни на площадке Вконтакте, до встречи! 📍

Сегодня до конца дня открыта регистрация на конференцию YaTalks 2023, которая пройдет онлайн и офлайн в Москве и Белграде 5-6 декабря 👀

Кандидат технических наук, руководитель группы FusionBrain AIRI Андрей Кузнецов выступит с докладом «Сильный ИИ — миф или уже реальность?»

5 декабря в 14:00 вместе с Андреем попробуем последовательно разобраться, что сейчас умеют LLM, с чем ещё, кроме текстов, они могут работать и как могут помочь в создании сверхсильной интеллектуальной машины.

Андрей также поделится своим опытом исследований в этой сфере, расскажет об экспериментах, бенчмарках и других больших проблемах человечества в открытых вопросах. Обсудим мультиагентный подход, способы общения LLM, механизмы Chain-of-Thought и Tree-of-Thought, общую память, self-reflection и другие аспекты, на которые стоит обратить внимание уже сейчас.

Регистрация и подробное расписание по ссылке 😁

В первый день зимы анонсируем следующий #AIRIseminars, который пройдет в офлайн-формате в нашем офисе, а также онлайн на YouTube-канале 6 декабря в 17:00 💡

🔵Тема: «Методы искусственного интеллекта в атомистическом моделировании материалов»

🔵Спикер: Александр Шапеев, Сколтех

🔵Оппонент: Артур Кадурин, AIRI

🔵Описание: в докладе будет рассказано о революции, которую искусственный интеллект делает в атомистическом моделировании материалов, а именно, как ИИ «выучивает» физику межатомных взаимодействий в автономном режиме, а также о текущих разработках, включая эквивариантные (не нейронные) тензорные сети для молекулярных моделей, разработку генеративных моделей для дизайна материалов и байесовские методы, применяемые для планирования численных экспериментов. Последние позволяют методам ИИ брать на себя рутинные задачи, традиционно выполняемые исследователями вручную, формируя будущее, в котором дизайн материалов будет осуществляется автономными цифровыми лабораториями.

Регистрация по ссылке, до встречи!

Сегодня в серии интервью с исследователями AIRI кандидат технических наук, руководитель группы FusionBrain Андрей Кузнецов 💡

🔵Почему наука?
«Изначально я не планировал связывать свою жизнь с наукой. Но на начальных курсах СГАУ один из преподавателей сказал, что есть возможность получить грант для студентов, которые хотят заниматься обработкой изображений. Я увлёкся этой темой и начал заниматься экспериментами в области компьютерного зрения и писать статьи. Впоследствии это все переросло в кандидатскую диссертацию».

🔵В свободное время
«Люблю LEGO и любые аналогичные формы создание чего-то большого из маленьких деталей. Раньше часто играл в баскетбол, сейчас стараюсь вернуть былую форму. В Самаре я живу в загородном доме и там у меня есть сад, очень люблю за ним ухаживать».

🔵Вдохновение
«Меня очень заряжает работа с темами, которые ещё не в мейнстриме. Так можно проверять свою научную интуицию — это один из важнейших критериев при стратегическом планировании исследований. Мне очень нравится исследовать такие темы — это меняет мировоззрение, потому что в такие моменты сам себе ставишь задачи, а не идёшь вместе со всеми».

🔵На работе
«Я ищу способы применения AI к обработке изображений и поиску признаков манипуляции над ними, проще говоря, определению фэйков и подделок. Также занимаюсь алгоритмами и технологиями синтеза видео по текстовым описаниям, мультимодальными архитектурами (OmniFusion) и задачами взаимодействиями языковых моделей в мультиагентной парадигме».

🔵Интересные факты
«Погружался с аквалангом в Египте во время отпуска, который был первым за 3 года! Не люблю опаздывать и обычно очень переживаю из-за этого».

🔵Наука — это
«Воплощение мечты — оставить после себя что-то интересное. Это выражается также в том, что статьи, которые мы публикуем, могут прочитать совершенно незнакомые люди на другом конце земного шара, а из этого может вырасти даже какая-то коллаборация, или просто чьи-то эксперименты будут успешнее».

Все интервью собраны по тегу #AIRIвлицах, приятного чтения 👀

Приглашаем на Новогодний огонек AIRI Seminars, где исследователи обсудят яркие статьи этого года🎄

🗓 13 декабря в 17:00

В программе выступления и дискуссия про самые яркие научные достижения года в компании 10-ти спикеров:

→  Александр Коваленко, AIRI;
→ Дмитрий Юдин, AIRI, МФТИ;
→ Иннокентий Хумонен, AIRI;
→ Валентин Хрульков, Yandex;
→ Роман Рыбка, Курчатовский институт;
→ Ирина Пионтковская, Huawei;
→ Валентин Малых, MTS AI;
→ Кирилл Солодских, TheStageai;
→ Илья Трофимов, Сколтех;
→ Алексей Осадчий, ВШЭ, AIRI.

Формат: онлайн на YouTube-канале AIRI и офлайн в нашем офисе в Москве. Чтобы попасть на офлайн-семинар, необходимо пройти регистрацию на сайте.

До встречи на заключительном семинаре 2023 года! 💡

Сегодня были объявлены победители международной премии Yandex ML Prize. Ими стали 11 человек, 3 из них — исследователи AIRI 👾

Поздравляем руководителя группы «ИИ в промышленности» Илью Макарова, научного сотрудника группы «Вероятностные методы машинного обучения» Айбека Аланова и научного сотрудника группы FusionBrain Антона Разжигаева!

Премия Яндекса в области машинного обучения вручается в пятый раз. Её учредили в 2019 году в честь Ильи Сегаловича. В прошлом году премию в номинации «Научные руководители» получил научный консультант AIRI Дмитрий Ветров.

Поздравляем всех победителей! 💛

Финальная ИИшница этого года пройдет уже в этот четверг 🍳

Делимся подробным расписанием онлайн-митапа, где исследователи расскажут про свои статьи на NeurIPS 2023:

▪️15:35
"Neural Harmonics: Bridging Spectral Embedding and Matrix Completion in Self- Supervised Learning" — Иван Оселедец, AIRI, Сколтех

▪️15:55
"PROTES: Probabilistic Optimization with Tensor Sampling" — Глеб Рыжаков, Сколтех

▪️16:15
"Star-Shaped Denoising Diffusion Probabilistic Models" — Айбек Аланов, AIRI, ВШЭ

▪️16:35
"To Stay or Not to Stay in the Pre-train Basin: Insights on Ensembling in Transfer Learning" — Ильдус Садртдинов, ВШЭ

▪️16:55
"Entropic Neural Optimal Transport via Diffusion Processes" — Никита Гущин, Сколтех

▪️17:15
"Building the Bridge of Schrödinger: A Continuous Entropic Optimal Transport Benchmark" — Александр Коротин, AIRI, Сколтех

▪️17:35
"Extremal Domain Translation with Neural Optimal Transport" — Милена Газдиева, Сколтех

▪️17:55
"Intrinsic Dimension Estimation for Robust Detection of AI-Generated Texts" — Евгений Бурнаев, AIRI, Сколтех

Ссылка на трансляцию тут, сохраняйте и подписывайтесь на YouTube-канал AIRI 👾