Как из "старенькой" камеры сделать фотик для NASA: история про Spectralis и искусственный интеллект

В современной офтальмологии клеточный уровень визуализации все еще остается роскошью: адаптивная оптика хороша, но дорогая, громоздкая и требует специалистов с руками из правильного места. Стандартные девайсы видели и видят только ткани, а не отдельные клетки, пока кто-то умный не решил добавить ИИ и немного магии.

Группа ученых из NIH взяли старичка и выбрали не апгрейдить его болгаркой и золотыми микросхемами, а пошли другим путем:

1. Сначала набрали два сета снимков одного и того же глаза:
⏺ один четкий, снятый на суперкрутую адаптивную оптику (где видно каждую клеточку),
⏺ другой размытый, как будто через пластиковый стаканчик - снятый обычным сканирующим офтальмоскопом Spectralis.

2. Затем эти парные снимки скормил ИИ, обучая его узнавать где мутно и плохо, а где четко и прекрасно. ИИ запомнил разницу и теперь умеет "дорисовывать" четкость на любых обычных снимках, снятых в клинике.

В итоге: вместо покупки адского оборудования за стоимость яхты обычная клиника получает клеточное изображение буквально за пару минут и цену чашки кофе (сарказм конечно, где вы такое видели, в офтальме чашка кофе продается за стоимость крыла самолета).

Технология особенно перспективна для раннего выявления заболеваний, при которых страдают клетки РПЭ, например:
🫥 ВМД
🫥 Вителлиформная макулярная дистрофия
🫥 Синдром Штаргардта
🫥Пигментный ретинит

Короче потенциально можно ловить болезни, пока пациент еще видит свои тапки, а не только белый туман.

Код доступен на Zenodo (если кто-то решит построить свою маленькую революцию). Планов по коммерциализации пока официально нет, но при таком результате, скорее всего, стартапы уже подогревают моторы:

1. CellSee AI
Суть: платформа для внедрения AI-модуля в стандартные офтальмоскопы любой клиники.
Целевая аудитория: офтальмологи, диагностические центры, сетевые клиники.
Объем рынка: $2,3 млрд к 2030 году, CAGR 6,1% (по данным Grand View Research).
Специалисты: специалисты по глубокому обучению для модели ИИ, клинические испытатели для тестирования на пациентах и маркетологи для выхода на рынок.

2. EasyRPE Diagnostics
Суть: сервис быстрой диагностики RPE-клеток в ранней фазе заболеваний с помощью офтальмоскопов + AI-софта.
Целевая аудитория: центры скрининга возрастных заболеваний глаз, страховые компании, телемедицина.
Объем рынка: ожидаемый рост рынка скрининга заболеваний сетчатки — $5,7 млрд к 2032 году (по данным Allied Market Research).
Специалисты: разработчики ИИ, менеджеры по лицензированию медицинских технологий и продуктологи для кастомизации софта под разные клиники.

#ИИ #Сетчатка #Наука #ВМД #Демчинский

📣 Наконец-то нормальная сектантская картинка 👍

Внимание офтальмологам и другим докторам, которых занесло в мой неглубокоуважаемый канал, сейчас будет интересная инфа и просьба 💻

Aspectum, как ассоциация для людей, которые хотят выйти за рамки своей привычной практики, которая богата экспертизой по части инноваций и которая знает что будет модным завтра (голова аж разболелась хвастаться), будет организовывать интересное и полезное событие - MedPrompt Summit.

Взрыв хлопушек 🎉

Зачем? Логика простая:
- мы давно ковыряемся в ИИ штуках и понимаем их.
- сейчас из разных труб постоянно что-то говорят про большие языковые модели типа ChatGPT, DeepSeek и тп.
- понимаю, сначала заставляли клавиатуре учиться, теперь это, но в этот раз не про хайп, а про мастхэв, без которого вас уделают те, кто в таких штуках шарит. Без шуток.
- в медицине эта сущность познается на практике, то есть надо знать как ей пользоваться и какие есть ограничения, делиться опытом, прям как обычно у нас.
- фух, чот зблс перечислять… но мы же про развитие медицины и прогресс в ней! 🙂🙂

Короче, организовываем капитальную конференцию, на которой свежачок и банки протеина для серого вещества, но для этого нужны волонтеры и спонсоры. Поэтому:

❤️ Если кто-то хочет стать частью оргкомитета, то пишите в комментах, соберем армию безумных умников-волонтеров.

❤️ Если вам надо потратить деньги на что-то прогрессивное и топовое, чтобы выстраивать свою репутацию в глазах современного поколения и с перспективой на будущее, то станьте спонсором.

Сам себе программист 💻

Что-то видите само пишется, само себя проверяет, даже рабочий вариант получился того, что я хотел уже несколько лет.

Очень интуитивно, хотя лукавлю, думаю все же помогает во многом накопленный опыт промптинжиниринга текстового и визуального, а также опыт написания подробных технических заданий для IT проектов.

Теперь осталось понять как результат вытащить и протестировать, потому что на это инструкции уже нет ☕️ типа в этом я должен как будто по умолчанию разбираться 🤔

Тема зрительного восприятия очень прикольная, кажется среди офтальмологов сложно найти равнодушного :) вы кстати знали, что пионером фосфенов был физиолог Иоган Пуркине, который наизучал дофига всякого? Он ток пропускал через голову, чтобы смотреть на картинки, которые отправлялись при этом от сетчатки к мозгу 🤪 И клетки Пуркине, и феномены Пуркине, и сосудистая тень сетчатки - все это тоже его дело :) А еще препараты всякие тестировал 😏

В 1993 году мир узнал: из комара в янтаре можно сделать тираннозавра 🦖 а в 2025, что ДНК помогает понять, почему кто-то видит мир иначе

Тогда мы смотрели Парк Юрского периода и думали: “Ух ты, наука творит чудеса!”. Спустя тридцать лет чудеса стали тише, но куда точнее: теперь мы не клонируем динозавров, мы расшифровываем гены пациентов, чтобы вовремя диагностировать, прогнозировать и, иногда, менять судьбу.

14 мая в Питере пройдет первая конференция по генетике в офтальмологии новой серии "Генетика глазных болезней".

Вся информация, которую обычно приходится собирать по кусочкам будет доступна в один день, в одном месте, мне кажется это уже делает мероприятие ценным помимо различных аспектов офтальмогенетики.

⏺Офтальмогенетика в чистом виде
⏺Сложные кейсы, мутации, редкие диагнозы
⏺Профессионалы, которые уже там, где большинство только догадывается, что есть «там»

Программку скину в комментарии 🍽

Амблиопия или сорян, мозг, пора заново учиться видеть, но теперь в AR 😎

У взрослых с амблиопией мозг давно «отключил» слабый глаз и старые методы почти не работают, они просто не достают до нужных зрительных каналов. Поэтому всем давно нужен способ, который реально сможет вернуть зрение ленивому глазу у взрослых, да ещё и так, чтобы не было мучительно скучно и неудобно.

Описание технологии

Авторы из Китайской академии наук, Фуданьского университета и других умных мест решили не устраивать пациентам пытку повязками, а зашли с хай-тек-задника - разработали AR-систему, которая... переучивает зрение.

Как работает:

⏺На голову надеваются стильные AR-очки (OLED, CUDA, всё как мы любим).

⏺Камера снимает мир в реальном времени, но изображение подаётся в мозг с «хитрым искажением»:
🫥Низкочастотные (размытые) элементы скрамблируются в мельтешащий шум.
🫥Высокочастотные (детали) сохраняются, но для ведущего глаза становятся хуже видимыми.

⏺Что получает мозг?
🫥Ленивый глаз (или, если по науке, parvocellular pathway) наконец-то получает возможность заявить о себе.
🫥Мозг такой: «Воу, неужели это я так могу?» — и реально начинает лучше видеть.

Ключевое: всё это происходит во время повседневной жизни, типа хоть зубы чисти, хоть кино смотри. Это не тренажёр из 90-х, это реальный перенос терапии в бытовую реальность.

Эффект

После недели тренировок у пациентов с амблиопией улучшилось зрение, стереоскопия и доминирование амблиопичного глаза. Уровень комплаенса — 102%. Не шутка. Люди, наконец, решили, что с такой штукой хотят лечиться.

Финансирование: проект поддержан STI2030 и фондами Китая. Деньги считать не будем, китайцы просто молча делают дело.

Стартапы(Ъ)

NeuroViewAR
Суть: Платформа для адаптивного зрительного обучения с API для настройки под различные визуальные дефициты (амблиопия, дислексия, последствия инсультов).
Целевая аудитория: клиники, НИИ, частные стартапы в телемедицине.
Рынок: рынок когнитивной нейрореабилитации — $3.8 млрд, CAGR 8.5% (Grand View Research, 2024)
Команда: нейропсихолог, AR-девелопер, специалист по клиническим испытаниям, биостатистик, маркетолог в сфере здравоохранения.

#AR/VR #Глаукома #Мозг #Фундаменталка #Наука #Демчинский

🔥 Когда технологии дают второй шанс увидеть

Так, пока мы не придумали как делать лазерную коррекцию мозга, возвращать зрение приходится старыми добрыми методами - электроника, провода, нейроны и немного магии инженерной мысли.

Недавно я заглянул в подкаст «Технологии в лицах». Поговорили не только про мои любимые нейроимпланты, но и вообще, как мы заставляем мозг «видеть» там, где глаза уже не справляются. Обсудили, как работает искусственное зрение и слух, можно ли обмануть природу (и при чём тут ИИ), и почему стартап в медицине — это когда одновременно интересно, страшно и очень хочется, чтобы всё заработало.

Этот выпуск шире, чем обычно — чуть больше философии, чуть больше технологий и немного про то, как мы смотрим в будущее (буквально).

Короче, если вам интересно, как мы приближаем sci-fi к реальности — включайте:

🔖YouTube
🔖VK
🔖Dzen

Буду рад обратной связи, мыслям, критике, да хоть мемам на тему мозга 🤤