Forwarded from iMapDAY
Следующая по списку в рубрике отзывов - выпускница 2025 года из нашей магистратуры в МФТИ по профилю МТИИ - Ульяна Изместьева
Тема ее диплома: «Применение генеративных моделей для аугментации обучающих данных в задачах сегментации изображений».
По этой теме мы сделали неплохую статью GenLab, принятую на Neuroinformatics-2025. А также успели посотрудничать с группой FusionBrain в AIRI.
Ульяна много участвовала в индустриальных проектах, связанных с распознаванием изображений для роботов и автомобилей от ООО ИнтеграНТ (Препринт) и ООО Вега-ГАЗ. В них мы четко прочувствовали, что часто требуется быстро готовить собственные датасеты с редкими категориями, на которых нужно учить нейронные сети. И решить эту задачу могут помочь диффузионные генеративные модели.
В самом начале магистратуры Ульяна также поучаствовала в написании интересной робототехнической статьи Rozumformer в журнале Q1, где наша команда реализовала оригинальный подход Real-to-Sim-to-Real для управления манипулятором.
#Person #Papers
Тема ее диплома: «Применение генеративных моделей для аугментации обучающих данных в задачах сегментации изображений».
По этой теме мы сделали неплохую статью GenLab, принятую на Neuroinformatics-2025. А также успели посотрудничать с группой FusionBrain в AIRI.
Ульяна много участвовала в индустриальных проектах, связанных с распознаванием изображений для роботов и автомобилей от ООО ИнтеграНТ (Препринт) и ООО Вега-ГАЗ. В них мы четко прочувствовали, что часто требуется быстро готовить собственные датасеты с редкими категориями, на которых нужно учить нейронные сети. И решить эту задачу могут помочь диффузионные генеративные модели.
В самом начале магистратуры Ульяна также поучаствовала в написании интересной робототехнической статьи Rozumformer в журнале Q1, где наша команда реализовала оригинальный подход Real-to-Sim-to-Real для управления манипулятором.
#Person #Papers
🔥6🎉4👏3
Forwarded from iMapDAY
Следующая выпускница 2025 года из нашей магистратуры в МФТИ - Маргарита Кичик.
Тема ее диплома: «Распознавание физических свойств объектов трехмерных сцен по их RGB-изображениям».
Этой темой Маргарита занималась при выполнении проекта с Центром робототехники Сбера. Очень надеюсь, что некоторые части диплома превратятся в ближайшее время в хорошую научную статью.
Один из подходов, которым можно решить эту задачу - нейросетевые методы обнаружения и сегментации объектов на изображениями. Здесь Маргарите удалось дать свой вклад в индустриальную работу по детекции объектов на конвейерной ленте WaRP, популярной на Kaggle и опубликованной в журнале EAAI (Q1). Также она поучаствовала в нашем интересном исследовании вместе с AIRI в области активной сегментации SegmaTron, опубликованном в журнале Neurocomputing (Q1). Кроме того, удалось получить полезные результаты для нашего проекта STRLRobotics, в том числе, чтобы мобильный манипулятор открывал двери. Про это у нас есть статья в LNCS (Q2).
#Person #Papers
Тема ее диплома: «Распознавание физических свойств объектов трехмерных сцен по их RGB-изображениям».
Этой темой Маргарита занималась при выполнении проекта с Центром робототехники Сбера. Очень надеюсь, что некоторые части диплома превратятся в ближайшее время в хорошую научную статью.
Один из подходов, которым можно решить эту задачу - нейросетевые методы обнаружения и сегментации объектов на изображениями. Здесь Маргарите удалось дать свой вклад в индустриальную работу по детекции объектов на конвейерной ленте WaRP, популярной на Kaggle и опубликованной в журнале EAAI (Q1). Также она поучаствовала в нашем интересном исследовании вместе с AIRI в области активной сегментации SegmaTron, опубликованном в журнале Neurocomputing (Q1). Кроме того, удалось получить полезные результаты для нашего проекта STRLRobotics, в том числе, чтобы мобильный манипулятор открывал двери. Про это у нас есть статья в LNCS (Q2).
#Person #Papers
🔥4🎉4👏2
Forwarded from iMapDAY
Продолжаю отзывы: следующая по списку - выпускница 2025 года из нашей магистратуры в МФТИ - Ольга Матыкина.
Тема ее диплома: «Разработка и исследование методов мультимодальной сегментации сцены».
По этой теме у нее получилась хорошая работа по применению фундаментальных моделей для 3D-обнаружения объектов на данных камер и радаров RCDINO, принятая в журнал Optical Memory and Neural Networks. В ходе кропотливых экспериментов мы прочувствовали, что без видеокарт уровня A100 80Гб какого-то результата добиться практически невозможно для подобных задач.
Ольга много участвовала в индустриальных проектах, связанных с сегментацией и обнаружением объектов на изображениях для роботов и автомобилей от ООО ИнтеграНТ (см. Препринт) и ООО Вега-ГАЗ (статья принята в журнал Труды МФТИ). Продемонстрировала отличные навыки в реализации методов ИИ в ROS2
#Person #Papers
Тема ее диплома: «Разработка и исследование методов мультимодальной сегментации сцены».
По этой теме у нее получилась хорошая работа по применению фундаментальных моделей для 3D-обнаружения объектов на данных камер и радаров RCDINO, принятая в журнал Optical Memory and Neural Networks. В ходе кропотливых экспериментов мы прочувствовали, что без видеокарт уровня A100 80Гб какого-то результата добиться практически невозможно для подобных задач.
Ольга много участвовала в индустриальных проектах, связанных с сегментацией и обнаружением объектов на изображениях для роботов и автомобилей от ООО ИнтеграНТ (см. Препринт) и ООО Вега-ГАЗ (статья принята в журнал Труды МФТИ). Продемонстрировала отличные навыки в реализации методов ИИ в ROS2
#Person #Papers
🔥5🎉4👏3❤1
Forwarded from iMapDAY
Еще один мой выпускник 2025 года из нашей магистратуры в МФТИ - Роман Титков.
Тема его диплома: «Семантическая реконструкция 3D-сцен в реальном времени с использованием гауссовского сплаттинга».
По этой теме у Романа получились многообещающие результаты, которые мы развиваем сейчас вместе с Центром робототехники Сбера в рамках работы LEG-SLAM. Он разработал оригинальный подход по сжатию визуально-языковых признаков и добавления их в методы гауссовского сплаттинга, позволяющие задавать запросы на естественном языке к трехмерной карте. Статья по этой теме была принята на конференцию Neuroinformatics-2025.
Кроме того, он успел поучаствовать в написании нашей флагманской статьи BBQ, принятой на конференцию ICRA (A*).
Присущие Роману старательная работа с кодом, методичность в решении самых сложных задач, умение грамотно распределять время могли бы пригодиться ему в аспирантуре, если бы он решил продолжать академический трек.
#Person #Papers
Тема его диплома: «Семантическая реконструкция 3D-сцен в реальном времени с использованием гауссовского сплаттинга».
По этой теме у Романа получились многообещающие результаты, которые мы развиваем сейчас вместе с Центром робототехники Сбера в рамках работы LEG-SLAM. Он разработал оригинальный подход по сжатию визуально-языковых признаков и добавления их в методы гауссовского сплаттинга, позволяющие задавать запросы на естественном языке к трехмерной карте. Статья по этой теме была принята на конференцию Neuroinformatics-2025.
Кроме того, он успел поучаствовать в написании нашей флагманской статьи BBQ, принятой на конференцию ICRA (A*).
Присущие Роману старательная работа с кодом, методичность в решении самых сложных задач, умение грамотно распределять время могли бы пригодиться ему в аспирантуре, если бы он решил продолжать академический трек.
#Person #Papers
🔥10🎉5👏3❤2
Forwarded from База знаний AI
В AIRI и МФТИ представили метод 3DGraphLLM для расширения возможностей LLM при работе с трехмерным пространством
Он учитывает пространственные и смысловые взаимосвязи элементов внутри помещения, что улучшает обработку сложных интерьеров, где объекты находятся близко друг к другу и образуют плотные композиции.
Специалисты подчеркивают, что большинство современных подходов, основанных на LLM, используют двумерные изображения, упуская трехмерную структуру пространства, или работают с необработанными облаками точек, игнорируя смысловое взаимодействие предметов. Из-за этого алгоритмы способны определить наличие стула и стола, однако не осознают факт, что стул расположен именно возле стола и предназначен для сидения.
Обучение модели происходило на больших датасетах — ScanNet, 3RScan, которые содержат точные реконструкции реальных помещений, и расширенных наборах данных — ScanRefer и Multi3DRefer, содержащих текстовые запросы к реконструированным сценам.
На данный момент ведутся работы по интеграции метода в реальные робототехнические платформы.
🔗Источник: https://airi.net/ru/blog/rossiyskie-issledovateli-nauchili-yazykovye-modeli-ponimat-slozhnye-trekhmernye-stseny/
Он учитывает пространственные и смысловые взаимосвязи элементов внутри помещения, что улучшает обработку сложных интерьеров, где объекты находятся близко друг к другу и образуют плотные композиции.
Специалисты подчеркивают, что большинство современных подходов, основанных на LLM, используют двумерные изображения, упуская трехмерную структуру пространства, или работают с необработанными облаками точек, игнорируя смысловое взаимодействие предметов. Из-за этого алгоритмы способны определить наличие стула и стола, однако не осознают факт, что стул расположен именно возле стола и предназначен для сидения.
Обучение модели происходило на больших датасетах — ScanNet, 3RScan, которые содержат точные реконструкции реальных помещений, и расширенных наборах данных — ScanRefer и Multi3DRefer, содержащих текстовые запросы к реконструированным сценам.
На данный момент ведутся работы по интеграции метода в реальные робототехнические платформы.
🔗Источник: https://airi.net/ru/blog/rossiyskie-issledovateli-nauchili-yazykovye-modeli-ponimat-slozhnye-trekhmernye-stseny/
👍16
Оплачиваемая стажировка будет длиться 4-6 месяцев, в процессе работы вам будет помогать ментор. На выбор предоставляется 16 проектов, на страницах которых вы сможете найти описание и требования.
Два шага для подачи заявки:
Стажировку можно совмещать с написанием диплома, но нельзя совмещать с другой работой или стажировкой. А после успешного окончания возможно трудоустройство в лаборатории Центра, продолжение работы в компаниях-партнерах.
Вопросы можно задать в сообщениях @fissun.
#стажировка
Please open Telegram to view this post
VIEW IN TELEGRAM
❤8👍2🔥2🐳2
ЦКМ всесторонне развивается — недавно у нас появилась бакалаврская программа. Поэтому мы уделяем время не только науке, но и развитию преподавательских компетенций, улучшению учебных курсов.
На прошлой неделе наш сотрудник, к.т.н., сертифицированный фасилитатор ISW, Олег Буличев провёл Instuctional Skills Workshop. Это канадская программа, призванная повысить эффективность преподавания у инженеров.
За три дня обучающиеся прошли интенсивную программу: узнали новые методы, проэкспериментировали в подаче материала перед коллегами и обсудили профессиональные и этические темы.
Если вы хотите учиться в месте, где преподавателям не всё равно — поступайте к нам!
Набор в бакалавриат для студентов ФПМИ актуален до 8 сентября
Please open Telegram to view this post
VIEW IN TELEGRAM
Please open Telegram to view this post
VIEW IN TELEGRAM
❤9👍7🔥4
С 1 августа по 14 сентября в преддверии Дня Города проходит серия различных мероприятий Москва-2030. В рамках ивента завтра на площадке МГТУ им. Н.Э. Баумана, в Новом кампусе, пройдет лекция Александра Панова на тему Интеллектуальной робототехники.
На лекции обсудим, что из себя представляет современная робототехника и как совершенствуются «железо» и программное обеспечение для управления роботами. Поговорим об использовании нейросетевых моделей для обучения выполнению действий и о том, как языковые модели помогают планировать действия робота.
Приходите узнать, где в ближайшее время ждать повсеместного появления роботов-помощников!
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥9👍2
Сегодня на магистерской программе МТИИ прошёл первый учебный день.
Начало бодрое — сразу пять пар. Надеемся, что мы смогли вдохновить студентов на предстоящий учебный год.
Желаем удачи ребятам, пусть этот год принесёт много учебных и научных успехов!
Please open Telegram to view this post
VIEW IN TELEGRAM
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥23❤5❤🔥4🎉2
🎓 — Семинар 1. Мультимодальное представление сцены для навигации интеллектуального агента | Татьяна Земскова
Задача навигации является одной из основных задач для интеллектуальных агентов. Для эффективного взаимодействия с человеком робот должен понимать сложные текстовые инструкции, сформулированные на естественном языке, и мочь доезжать до любого объекта по его текстовому описанию.
На семинаре аспирантка нашего Центра расскажет о различных представлениях сцен и особенностях их использования при решении задачи навигации. В частности, рассмотрит методы навигации на основе 3D карт знаний и последовательностей изображений.
Наконец, будет рассмотрена разработанная командой Центра модель OVSegDT — лёгкая трансформерная VLA архитектура, позволяющая осуществлять навигацию до объектов, чья категория задана текстом.
👉🏻 Дата: 4.09.25, четверг в 17:00
📹 Трансляция: Youtube или ВК
🎉 Уже завтра возобновляем наши еженедельные семинары. Подключайтесь к живому обсуждению и задавайте вопросы в прямом эфире! Ждем всех!
#семинары #CV
Задача навигации является одной из основных задач для интеллектуальных агентов. Для эффективного взаимодействия с человеком робот должен понимать сложные текстовые инструкции, сформулированные на естественном языке, и мочь доезжать до любого объекта по его текстовому описанию.
На семинаре аспирантка нашего Центра расскажет о различных представлениях сцен и особенностях их использования при решении задачи навигации. В частности, рассмотрит методы навигации на основе 3D карт знаний и последовательностей изображений.
Наконец, будет рассмотрена разработанная командой Центра модель OVSegDT — лёгкая трансформерная VLA архитектура, позволяющая осуществлять навигацию до объектов, чья категория задана текстом.
👉🏻 Дата: 4.09.25, четверг в 17:00
📹 Трансляция: Youtube или ВК
#семинары #CV
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥15
🎓 — Семинар 2. Обзор конференции ACL 2025 | Александр Панов, Зоя Воловикова, Юрий Куратов
Ассоциация компьютерной лингвистики (ACL) — научная и профессиональная организация, работающая в области обработки естественного языка. Её одноимённая конференция — одна из ведущих в указанной области.
В июле этого года сотрудники и преподаватель ЦКМ представили на ACL следующие работы:
🪼 Зоя Воловикова: CrafText Benchmark: Advancing Instruction Following in Complex Multimodal Open-Ended World
🪼 Анастасия Иванова, Алексей Ковалёв: AmbiK: Dataset of Ambiguous Tasks in Kitchen Environment
🪼 Юрий Куратов: Cramming 1568 Tokens into a Single Vector and Back Again: Exploring the Limits of Embedding Space Capacity
Хотите узнать, как это было? Присоединяйтесь на завтрашний семинар, где команда поделится своими впечатлениями!
👉🏻 Дата: 11.09.25, четверг в 17:00
📹 Трансляция: Youtube или ВК
Подключайтесь к живому обсуждению и задавайте вопросы в прямом эфире! Ждем всех!
#конференции #RL #LLM
Ассоциация компьютерной лингвистики (ACL) — научная и профессиональная организация, работающая в области обработки естественного языка. Её одноимённая конференция — одна из ведущих в указанной области.
В июле этого года сотрудники и преподаватель ЦКМ представили на ACL следующие работы:
Хотите узнать, как это было? Присоединяйтесь на завтрашний семинар, где команда поделится своими впечатлениями!
👉🏻 Дата: 11.09.25, четверг в 17:00
📹 Трансляция: Youtube или ВК
Подключайтесь к живому обсуждению и задавайте вопросы в прямом эфире! Ждем всех!
#конференции #RL #LLM
Please open Telegram to view this post
VIEW IN TELEGRAM
❤7👍2🔥2
Forwarded from iMapDAY
Выступил на Media Technology Summit, который собрал представительный список российских ученых в области компьютерного зрения. Рассказал про построение динамических графов 3D сцен и насколько это может быть полезно для робототехники.
Отдельно должен отметить эффектную площадку проведения саммита - Отель Метрополь в Москве.
#Activities
Отдельно должен отметить эффектную площадку проведения саммита - Отель Метрополь в Москве.
#Activities
❤11👍5