Сегодня мы тестируем VR модуль просмотрщика от Инобитек 🤓

Первое, интерфейс десктопной версии круче зарубежных однозначно, за что от меня лично отдельный лайк 👍

Сейчас разработчики пробуют другой вариант визуализации, используя виртуальную реальность (а хочется сквозную камеру дополненной реальности уже, кстати, потому что это архиудобно). Мне повезло опробовать тестовую версию, сейчас в ней весь упор на функционал и я немного по нему пройдусь и вам расскажу.

На видео одна из наших обезьянок, которых мы сканировали в рамках проекта ELVIS V, чтобы знать о них все, приятного просмотра 😚

😵 VR² «Сложные случаи в практике витреоретинального хирурга»

25 апреля Ретинафонд провел вторую по счету конференцию в виртуальной реальности с трехмерными человечками, космосом и огроооомным экраном 🥹

Если бы для офтальмологов, да и других докторов, было нормальным иметь свой виар шлем как телефон, то народу конечно могло бы быть очень много. Виар конгрессы 😌

Интересного просмотра и 👍

🔋Компания BlinkEnergy разрабатывает модуль на веко, с помощью которого можно будет передавать питание на Электронику контактных линз.

В первую очередь речь идет конечно о линзах дополненной реальности, но инженеры нацелены в том числе и на линзы для мониторинга глюкозы и ВГД.

Одной из проблем человечества сегодня является разработка элементов питания, которые могли бы работать очень долго.

Немного нюансов, которые полезно изменят ваше искажение реальности от этой эффектной хайтек технологии:

🔋 Кажется супер технологично. Правильно кажется, но тут оригинальный чип, производство которого очень дорогое и это только внешняя часть. Прибавим дорогую линзу и о массовом использовании можно не мечтать, такая штучка обойдется минимум в 300К.

🔋 Это чувствуется и это может отвалиться (кстати что делать камызякам 😇), придется обратно приклеивать, вопросы к гигиене и все такое.

🔋 В текущей версии нет корпуса, а значит будет еще сколько-то миллиметров для него.

🔋 Эта штука прыгает по глазу и питание не сможет передаваться четко. Может греться (не факт, но фиг знает что будет если нагревать линзу на глазу, какую новую болячку современности придется еще лечить).

🔋 Эта штука сверху, а основная принимающая электроника на линзе будет давать вес. Потенциально утяжеление на линзе улетает вниз, а значит надо будет чем-то дополнительно утяжелять линзу снизу, чтобы сбалансировать, интересно как из этой ситуации выходить. Хотя может я излишне драматизирую.

🧠В восприятии оптических иллюзий виновата зона V2

Если взять известный объем физиологии зрения и сколько его изучают академически офтальмологи, то этим количеством можно пренебречь. Хотя мне кажется, что разбираясь в этом, у нас было бы чуть меньше из пальца высосанных научных идей.

Ну ведь не одному же мне знакомы эти моменты, когда лечишь себе спокойно, а потом увидел иллюзию и такой да как так-то, как это работает!? 😡 И задумываешься какая же магия все же это зрение, природа б, философствуешь сам с собой 🧐

Ладно, ближе к делу, исследователи сделали многоходовочку. Сначала убедили, что некоторые штуки на грызунах можно изучать как на людях. Ок. Потом использовали электрофизиологию и оптогенетику вместе на этих грызунах, чтобы исследовать активность мозга и понять что с ним происходит, когда он видит иллюзию. Это круто.

Если коротко, то первичная зрительная кора V1 понимает контраст, но чтобы воспринять иллюзию контраста как на видео, нужна зона выше - V2 (если вы не видите иллюзию, то у меня для вас плохие новости 🥲).

Зачем это нужно офтальмологу? Понятия не имею азаза 😄 Зато это точно нужно нам в работе над бионическим кортикальным зрением, в технологии ELVIS V, потому что это одна из областей, которую мы будем стимулировать.

🤖 ИИ при синдроме сухого глаза

"Использование глазных цифровых изображений в сочетании с ИИ создает серьезные перспективы для обнаружения и лечения ССГ, о чем свидетельствуют заметные достижения в прогнозировании офтальмологических заболеваний за последнее десятилетие" - кусочек из выводов.

Авторы в этой работе мечтают о том, чтобы однажды для ИИ диагностики можно было бы использовать смартфоны. Мне это видится уже как очевидный исход, потому что технологии позволяют. Однако пока что есть существенная проблема, которая заключается в том, что стандартизировать фотки сложно, а когда ты фотографируешь передний отрезок, то тут треш... надо начать с того, что научить протирать камеру 😭 поэтому о широком применении такого варианта еще рано говорить, поскольку тут нужна более фундаментальная проработка базовых вопросов, в отличие от уже готовых стандартизированных фоточек с фундусов, топографов и т.п.

Сама работа примечательна не ИИ как таковым, а тем, что:

🫥 Про ССГ мало говорят в разрезе ИИ, а тут целый обзор и можно сократить дорогу в этом направлении 🏆
🫥 Статья написана как раздел из учебника и начинающие могут почерпнуть для себя базу про алгоритмы, применительно к офтальмологии 🤓
🫥 Есть даже про метаверсы! 🫣 вот этого я не ожидал, авторы обсуждают как в ней можно и учиться ССГ и диагностикой заниматься 😺

Мне понравилось, что авторы наконец-то коснулись прогнозирования, потому что именно тут кроется супер жила ИИ - в умении предсказать сроки наступления невозвратных изменений, сроки лечения разными препаратами и сформировать оптимальный план лечения, понять на каком этапе может подключиться что-то системное т.д.

☝️ Нужно постоянно строить видение будущего медицины исключительно масштабно. На мой взгляд, если существующие глазные сообщества не могут формировать глобальные цели с конкретными этапами, если они не могут реально что-то делать в этом направлении, то их нужно либо переделывать, либо вообще закрывать, потому что из-за их кривого управления создается тупой вектор развития.

💊 Как вам такой Fallout?

Закон парных случаев работает и для исследований 🍽

Буквально недавно рассказывал про иллюзии и наше восприятие и вот пока еду в метро мне попадается статья про стабильность изображения, а за ней еще одна и сейчас я хочу просто поделиться интригующим началом введения, потому что не успею дочитать:

"Наше впечатление от визуального мира начинается с узоров света, которые падают на сетчатку и запускают каскад событий, приводящих к субъективному ощущению стабильного, непрерывного мира. Как возникает эта стабильность, является важнейшим вопросом в зрительной нейробиологии, учитывая, что входные данные сильно варьируются: изменения освещения (например, солнце уходит за облако), изменения внешнего вида и размера из-за движений тела (например, движение к объекту или от него), ложные изменения положения объекта из-за движений глаз."

Феномен зрения прекрасен своей загадочностью 😍

Использование дополненной реальности в хирургии давно не новость, но вот что-то как-то туговато она входит в практику. Недавно рассказывал про вариант с VisionPro, но чаще всего для таких сценариев используют HoloLens. Больше всего в этих девайсах напрягают их габариты - шлемы громоздкие 🥺А вот в 3D очках уже все, много где можно встретить.

В общем надо как-то решать проблему и похоже уверенные шаги сделали инженеры из Принстона с помощью голографии. Они создали девайс, который можно разместить на очках. Представьте себе привычные 3D очки с дополненной информацией 🥹

Основной проблемой, с которой сталкивалась технология голографических дисплеев заключалась в том, что нормальную картинку можно было получить только в узком поле зрения и если отведешь взгляд, то она исчезает. Либо четко и маленько, либо много и размыто.

Теперь правила игры меняются и большое размытое стало большим и почетче, но все еще не идеально. Поэтому авторы говорят, что нужно доделать.

Интересно, что для расчетов они использовали ИИ и это все больше становится нормальной практикой в тех случаях, когда своих мозгов не хватает, а посчитать что-то надо.

❌ “Этим шарлатам не надо давать спец доступ, он должен быть открыт для пациентов!” - цитатка комментария к новости о Med-Gemini 😜

DeepMind гугловский работает над языковой моделью Med-Gemini в сфере здравоохранения. Интересно, что даже на этапе беты он превзошел GPT-4 и отраслевые стандарты в 14 популярных профильных бенчмарках.

«Набор моделей также превзошёл людей в обобщении медицинских текстов и составлении рекомендаций, причём врачи в половине случаев оценивали ответы Med-Gemini-M 1.0 как хорошие или даже лучше, чем ответы экспертов». Другими словами он может анализировать ЭМК, чтобы снизить когнитивную нагрузку у врача за счёт эффективного извлечения и анализа важной информации из огромных объёмов данных пациентов. Вот это мне нравится.

В чем особенность, которую надо знать. Med-Gemini это семейство больших мультимодальных моделей, каждая из которых имеет своё предназначение, в отличие от больших языковых моделей, которые демонстрируют неоптимальные клинические рассуждения в условиях неопределённости, страдают галлюцинациями и предвзятостью.

Напомню, что это не итоговый результат, будут еще допиливать.

Пишите свои мнения, давайте интересно пообсуждаем 👍

https://youtu.be/SZS5WD1du3A?si=hI0QOyUmGTQVCtH9

🔴Как именно наши глаза и мозг работают вместе, чтобы картинка была стабильной, когда на самом деле все дергается?

Я вернулся к теме, которую чуть-чуть анонсировал несколько публикаций выше и могу рассказать что интересного пишут про работу мозга, потому что это увлекательный философский вопрос 🍽

☝Исследование, опубликованное в Nature Neuroscience, рассказывает нам о том, что некоторые зрительные нейроны в мозге в режиме реального времени просто видят то, что находится перед глазами. И это уход от предыдущих мнений о том, что нейроны или прогнозируют будущие изображения (могут предсказать следующее изображение, основываясь на том, куда мозг указывает глазам двигаться) или анализируют прошлые (могут сравнивать новое изображение с предыдущим, чтобы обнаружить изменения) для достижения стабильности.

Немного про сам эксперимент. Пока макака смотрела на фотографии, исследователи чекали мониторили нейронную активность в зрительной области, называемой вентральным путем. Эта область, разделенная на несколько небольших участков, обрабатывает подробную визуальную информацию, такую как форма или цвет, помогая мозгу распознавать и классифицировать объекты.

На основании этих записей исследователи обнаружили, что нейроны вентрального пути не предсказывают будущие образы и не запоминают прошлые. Вместо этого они просто воспринимают изображение, находящееся прямо перед ними в реальном времени, что исследователи называют "зрительным сосредоточением". По сути, каждый нейрон обладает туннельным зрением - как если бы вы смотрели через отверстие в листе бумаги, а когда глаз перемещается, нейрон переводится в новое положение и видит только из новой позиции.

Разочарование и интрига.
Хотя результаты и не объясняют окончательно, как мозг формирует стабильные образы, они дают нам новые критические подсказки о зрительной системе и открывают дверь для проведения новых исследований.

🎤 Это очень необычный подкаст, в котором раскрываются редко обсуждаемые стороны проекта ELVIS V

Фонд поддержки слепоглухих «Со-единение» и Лаборатория «Сенсор-Тех» обсуждают как появился проект, как он живет, как развивается, какие люди в нем работают, что такое социальное предпринимательство и даже чем этот проект отличается от академической науки.

ELVIS V - это кортикальная зрительная протезная система, которая создается, чтобы вернуть зрение тотально ослепшим людям.

Приятного прослушивания:
https://music.yandex.kz/album/18408233/track/125707604?activeTab=track-list&dir=desc

⚠️ Охох, а вот это интересная жара начинается!

Сегодня OpenAI и Google презентуют свои новые разработки, что само собой наводит шумиху там и тут 🫣

И вот на фоне этих всяких обсуждений кого там ИИ заменит одни ребята подсветили как теряется ценность крупного международного сервиса, потому что с его задачами очень эффектно справляются языковые алгоритмы.

Что же с медициной? Колл-центры, в которых ИИ вырулит любой конфликт и привлечет пациента, расположив к себе, общение с цифровой копией известного доктора, только с лучшей его версией, ИИ психологи и что еще? Можно попробовать пофантазировать в комментах 😊

Ну ладно, может я драматизирую нимношка, но в своих лекциях в РУДН уже вполне конкретные вещи студентам показываю каким может быть виртуальный пациент и это охренеть. Я вам гарантирую, что очень скоро никто уже не захочет учиться так, как это делается сейчас.

Итак, давайте немного помусолим тему ИИ при общении с пациентами и поделимся своими мыслями.

В качестве затравки я взял формулировку из предыдущего поста моей одногоупницы, у нее блат 😊

Для затравки, потому что такие вещи очень интересно обсуждать без оглядки а что там кто-то скажет. Я бы хотел все же провести эксперимент, в котором ответы машины смешаю с ответам людей и сделать потом опрос, в котором народ оценит где хорошо и что из этого ИИ.

В комменты скину результаты переписки по этому вопросу.

Давайте поддержите дискуссию, тут все свои :)