Понравилась декабрьская статья про модель представленную Meta посвященную Моделям крупных концепций (Large Concept Models, LCMs). Хотя сейчас LLMs доминируют в области ИИ, их фокус на уровне токенов ограничивает возможности логического рассуждения, что тормозит в свою очередь появление продвинутого reasoning. LCMs предлагают новый подход, обеспечивая структурное иерархическое моделирование, которое позволяет ИИ рассуждать и организовывать информацию так, как это делают люди.

LLMs обрабатывают текст на уровне токенов, используя эмбеддинги слов для моделирования связей между отдельными словами или их частями. Этот детализированный подход отлично подходит для задач вроде ответов на вопросы или генерации подробного текста, но испытывает трудности с поддержанием связности в больших объемах текста или синтезом абстрактных идей высокого уровня. LCMs решают эту проблему, работая на основе эмбеддингов предложений, которые представляют целые идеи или концепции в высокоразмерном семантическом пространстве, независимом от языка, называемом SONAR. Это позволяет LCMs рассуждать иерархически, организовывая и интегрируя информацию концептуально, а не последовательно.

Если представить мозг ИИ как совокупность функциональных компонентов, то LLMs можно сравнить с сенсорной корой, которая обрабатывает мелкие детали и выявляет локальные закономерности. LCMs, напротив, функционируют как префронтальная кора, ответственная за организацию, рассуждение и планирование. Префронтальная кора не просто обрабатывает информацию, но и интегрирует её, расставляя приоритеты для решения сложных задач. Отсутствие этой «префронтальной» функциональности долгое время было серьёзным ограничением для систем ИИ. Добавление этого недостающего элемента позволяет системам рассуждать и действовать с большей глубиной и целеустремлённостью.

На мой взгляд, комбинация LLMs и LCMs может быть невероятно мощной. Этот подход напоминает мульти-масштабное моделирование, метод, используемый в математике для решения задач одновременно на уровне общей картины и деталей.

Например LCMs могут анализировать большие массивы медицинских данных, включая медицинские карты, результаты лабораторных исследований и научные публикации, чтобы выявлять общие паттерны и составлять структурированный план лечения а LLMs могут детализировать рекомендации для врачей и пациентов, например, разрабатывать инструкции по применению лекарств или разъяснять сложные медицинские термины.

Аналогично, LCMs работают с «общей картиной», организуя концепции и структурируя задачи, а LLMs сосредотачиваются на деталях, таких как генерация точного текста.

@mosunovc

Прекрасная таблица со сравнением доходности различных классов активов за последние 14 лет! Если добавить сюда для сравнения доходность венчурных фондов, то сразу станет ясно, куда точно не стоит инвестировать. 😊

@mosunovc

Понравилась визуализация))

Каждый год я делаю небольшую презентацию о том, как меняется инвестиционная стратегия для ангельского венчурного инвестора. В этом году работа оказалась более объемной, и я решил оформить её как отдельную презентацию.

Делюсь с вами ключевыми наблюдениями и выводами, которые, надеюсь, помогут вам принимать более обоснованные инвестиционные решения.

Главные акценты:
- Основа - это портфельный подход и глубокая экспертиза: Они позволяют найти баланс риск/доходность.

- Оценка экономической обстановки: Анализ текущих макроэкономических трендов и их влияния на инвестиции.

- Инвестиционный цикл: Развитие технологий, компаний, стран и мира в целом — всё это важно учитывать.

Будьте внимательны и осторожны, не поддавайтесь на советы блогеров-петрушек, которые предлагают быстрый путь к успеху😁. Инвестирование — это не только стратегия, но и очень долгое терпение.

Инвестируйте с умом!

@mosunovc

В 2024 году компании в сфере ИИ привлекли треть всего венчурного капитала, но большинство из них так и остались без маркет фита. Но те кто нашел свой маркет фит, похоже что во главн ставят не технологии и бизнес кейсы, потому что все их преимущества опираются на: уникальные данных, недоступные для других игроков, глубокую экспертизу в своей продуктовой нише и домене, и умение настроить процессы, после которых данные обогащаются и становятся лучше с каждым взаимодействием с клиентом.

Сегодня одной технологии уже недостаточно. Инвесторы ищут компании, которые не просто заявляют об уникальности своей технологии, а владеют данными своих пользователей, усиливая тем самым свое конкурентное преимущество и отгораживаясь от конкурентов.

Это новый этап в венчурных инвестициях наступил в начале 2023 года, но пока многие основатели так и не понимают, что игра сместилась в сторону контроля своих данных и их стратегического использования.

@mosunovc

Сегодня доехал еще один экзит в компании www.carbon6.io из нашего портфеля Гаража.

SPS Commerce (NASDAQ: SPSC), лидер в области облачных решений для цепочек поставок, объявила о приобретении Carbon6 Technologies, компании, предоставляющей аналитические инструменты для продавцов Amazon. Среди ключевых продуктов Carbon6 — ChargeGuard для автоматизации споров по списаниям у 1P-продавцов и Seller Investigators для восстановления потерянных доходов 3P-продавцов. Это приобретение расширяет возможности SPS Commerce в управлении списаниями и ускоряет решение споров, предотвращая ошибочные списания.

Эта сделка следует за покупкой SupplyPike и укрепляет позиции SPS Commerce как лидера в управлении списаниями и восстановлении доходов для поставщиков крупнейших ретейлеров, включая Amazon и Walmart. Руководители обеих компаний отметили, что их объединяют общие ценности, такие как инновации и ориентация на успех клиентов, что сделает решение SPS еще более мощным инструментом для продавцов и поставщиков.

Рад, что e-commerce активно развивается и приобретает перспективные стартапы. Приятно осознавать, что мне удалось внести свой вклад в развитие компании.

@mosunovc

​​🔎 AI Survey: Four Themes Emerging.

Bain провел любопытное исследование еще в начале 2024 года относительно того, как компании используют generative AI в разных кейсах.

Сами по себе опросы не очень интересны, дают только sentiment, но не конкретные цифры, однако тут хотелось бы обратить ваше внимание на следующее.

Bain опрашивал представителей разных департаментов в октябре 2023 и в феврале 2024, и мы можем отметить, в каких областях gen AI инструменты стали больше применяться в 2024 году. График показывает процент респондентов, которые отметили, что Gen AI отвечает их ожиданиям или превышает их. Можно предположить, что увеличение процента происходит за счет роста юз кейсов.

1/ Рассмотрим направления с изменениями.

Топ-3 с растущим сентиментом:
🟢 Sales and sales operations: +6%;
🟢 Software code development/Marketing/Customer Service: +4%
🟢 Customer Onboarding: +1%
🔹 Тут на втором месте сразу несколько функций, но стоит отметить, что это единственные области, которые в плюсе вообще – в остальных местах сентимент ухудшается.

Топ-3 с падающим сентиментом:
🔴 HR: -12%;
🔴 Operations: -16%;
🔴 Legal: -18%.
🔹 Любопытно, что operations и legal это два направления, где очень много рутины – скорее всего, точность gen AI tools пока оставляет желать лучшего, вот и сентимент сокращается.

2/ Еще более любопытно, что общий сентимент сократился на 4%, а областей с падающим сентиментом (10) в 2 раза больше, чем с растущим (5). Интересно, как ситуация изменилась к концу года, конечно = к началу 2025-го. Кто-то видел информацию?

👉 Подробнее результаты опроса от Bain вы можете найти по ссылке: https://www.bain.com/insights/ai-survey-four-themes-emerging/#

@proVenture

#ai #research #trends

Один из любимых каналов)

По воскресеньям я буду стараться делать посты о культуре и искусстве.

Сегодня, в честь 150-летия со дня рождения Николая Константиновича Рериха, хочется вспомнить одну из самых ярких картин, которую я увидел на аукционе Christie’s на прошлой неделе: «Легенда о невидимом граде Китеже и деве Февронии: Битва на Керженце». Эта работа была создана как задник к одноименной опере Николая Римского-Корсакова.

Картина написана в 1913 году, в период, когда Рерих еще не отправился в Индию и Гималаи, а также задолго до создания Пакта Рериха, провозгласившего защиту культурных ценностей во всем мире.

В те годы он был тесно связан с объединением «Мир искусства», которое ставило своей целью возрождение национальных традиций в культуре и живописи. Вдохновленный русской историей, эпосом и мифологией, Рерих обращался к темам Древней Руси, древних саг и былин, что стало центральной чертой его творчества.

Эта картина ярко иллюстрирует его стиль тех лет: насыщенные краски, четкость линий и символизм. Она переносит зрителя в мир легенды, в момент битвы, в котором ощущается эпическая масштабность и одновременно мистическая атмосфера. Битва на Керженце, изображенная на картине, символизирует не только исторический конфликт, но и борьбу духовных сил, что делает работу не просто декоративным элементом к опере, а полноценным самостоятельным произведением искусства.

1913 год был временем предчувствия глобальных изменений — вскоре начнется Первая мировая война, и в этой картине, посвященной бою, ощущается тревожное дыхание приближающихся катастроф. Можно сказать, что эта работа отразила дух времени, когда война уже витала в воздухе.

Картина не только раскрывает талант Рериха как художника, но и демонстрирует его умение соединить историю, миф и современность, создавая произведения, которые остаются актуальными спустя более века.

@mosunovc

Еще в августе NVIDIA представила интересную технологию Avatar Cloud Engine (ACE) для игровой индустрии, которая создает интеллектуальных персонажей в играх (NPC). Благодаря интеграции ИИ моделей NeMo, распознавания и синтеза речи Riva, а также технологии лицевой анимации Audio2Face, NPC теперь способны понимать речь, отвечать в контексте, взаимодействовать с окружением и даже развиваться в процессе игры. Такие персонажи уже находят применение в играх вроде PUBG: Battlegrounds, Naraka: Bladepoint и симуляторе inZOI, где NPC адаптируются, создавая уникальный опыт для каждого игрока.

Но главное что возможности ACE выходят далеко за пределы игровой индустрии. Эта технология создает базу для моделирования сложных социальных взаимодействий, позволяя симулировать целые общества с сотнями и тысячами виртуальных персонажей. Например, ее можно использовать для изучения стратегий поведения людей в условиях войны, кризисов или экономической нестабильности. Такие симуляции могут стать основой для обучения автономных систем или подготовки специалистов, создавая реалистичные сценарии, основанные на миллиардах взаимодействий.

Потенциал NVIDIA ACE можно сравнить с успехом шахматных ИИ, таких как AlphaZero, которые смогли освоить строго определенные правила и превзойти лучшие человеческие результаты. Однако в отличие от шахмат, где правила предельно четкие, ACE погружается в хаотичные, непредсказуемые миры, учась справляться с неопределенностью. Это не только улучшает взаимодействие игроков с NPC, но и открывает путь к созданию систем, способных решать реальные проблемы, от городской логистики до управления большими коллективами.

Будущее таких технологий — не только более глубокое погружение в игры, но и возможность создания реалистичных цифровых симуляций, способных имитировать человеческие действия и анализировать их последствия.

@mosunovc

Похоже что мы скоро увидим первое IPO компании, создающей крупные языковые модели^ и это значит что мы подошли к пику хайпа, либо технологии уперлись в непробиваемый барьер))

Французская Mistral AI, к слову основанная в 2023 году Артуром Меншем и бывшими исследователями Google DeepMind и Meta, готовится к выходу на биржу, заметьте снова голубая кровь технологического бизнеса, все выходны из крупных корпораций. Как заявил Артур: "Мы не продаёмся. Конечно, IPO — в наших планах."

Mistral позиционируется как европейский ответ гигантам вроде OpenAI. Компания активно расширяется, открывая офис в Сингапуре, а также растёт в Европе и США. Среди её продуктов — AI-модели и платформа Le Chat, аналог ChatGPT.

На сегодня Mistral привлекла около $1,14 млрд инвестиций от таких фондов, как Andreessen Horowitz, General Catalyst и Lightspeed Venture Partners ( для сравнения OpenAi привлекла $18 млрд ) . Последняя оценка компании составила около $6 млрд^ ну а OpenAi вы все и сами знаете, $157 млрд.

@mosunovc

Трамп объявил о создании новой компании Stargate и вкачивания через нее 500 миллиардов баксов (!) в инфраструктуру для ИИ в целом и для OpenAI в частности.

Вот, что написали сами OpenAI:

Объявление о запуске проекта The Stargate Project

The Stargate Project — это новая компания, которая планирует инвестировать 500 миллиардов долларов в течение следующих четырех лет в строительство новой инфраструктуры искусственного интеллекта для OpenAI в Соединенных Штатах. Мы начинаем немедленное распределение 100 миллиардов долларов. Эта инфраструктура обеспечит лидерство Америки в области ИИ, создаст сотни тысяч рабочих мест в США и принесет огромную экономическую выгоду всему миру. Этот проект не только поддержит реиндустриализацию Соединенных Штатов, но и предоставит стратегические возможности для защиты национальной безопасности Америки и ее союзников.

Изначальными инвесторами Stargate выступают SoftBank, OpenAI, Oracle и MGX. Ведущими партнерами проекта являются SoftBank и OpenAI: SoftBank несет финансовую ответственность, а OpenAI — операционную. Масайоси Сон станет председателем.

Ключевыми технологическими партнерами на начальном этапе выступают Arm, Microsoft, NVIDIA, Oracle и OpenAI. В настоящее время строительство уже начато в Техасе, и мы рассматриваем потенциальные площадки по всей стране для создания новых кампусов, завершая заключение окончательных соглашений.

В рамках Stargate компании Oracle, NVIDIA и OpenAI будут тесно сотрудничать для создания и эксплуатации этой вычислительной системы. Этот проект основан на глубоком сотрудничестве OpenAI и NVIDIA, начавшемся еще в 2016 году, а также на более новом партнерстве между OpenAI и Oracle.

Проект также укрепляет существующее партнерство OpenAI с Microsoft. OpenAI продолжит увеличивать использование Azure, чтобы с помощью дополнительной вычислительной мощности тренировать передовые модели и предоставлять высококачественные продукты и услуги.

Мы все с нетерпением ждем продолжения разработки и развития ИИ — и, в частности, AGI (Artificial General Intelligence) — на благо всего человечества. Мы убеждены, что этот новый шаг критически важен на этом пути и позволит творческим людям найти способы использовать ИИ для возвышения человечества.

🤯

Link

🚀 VentureGPT: Лидер в мире task-specific Co-Pilot’ов

Когда мы запускали VentureGPT в Wale.ai, мы стремились создать инструмент, который изменит представление о том, как ИИ может помогать ангельским инвесторам и фонда упростить сбор информаци по всему интернету о конкретной компании, а также помочь основателям найти лучшие фонды для них самих. И вот почти год спустя VentureGPT всё ещё занимает первое место среди специализированных AI Co-Pilot’ов.
Что удивительно — за это время в сегменте практически не появилось прорывных решений. Это либо говорит о сложности рынка, либо подтверждает, что наш продукт действительно опередил время.

Чтобы внести ясность:
AI Co-Pilot’ы помогают с конкретными задачами, усиливая вашу продуктивность.
AI Агенты — автономные системы, способные действовать самостоятельно.

Мы в Wale.ai уверены, что именно Co-Pilot’ы идеально подходят для работы c венчурным капиталом, где важна поддержка человека, а не замена его. Вообще таких отраслей довольно много, но венчурный рынок максимально человеконаправленный так как все решения партнеров и коммуникации между инвестором и фаундером невозможно автоматизировать, поэтому на нем будут развиваться именно модели с Co-pilot дополняющие различные части решений, обогащая его статистическими данными.

@mosunovc

Записал новый подкаст с Юлей Поповой, где мы довольно детально разобрали тему куда катится мир венчурного инвестирования )) по сути это превью к тому что я делал в начале года, когда описал изменения в инвестиционной стратегии на 2025 год.

В выпуске поговорили о:
• Текущем состоянии российского и мирового венчурных рынков,
• Направлениях и технологиях, которые сегодня привлекают внимание фондов,
• Характеристиках стартапов, которые можно считать венчурными,
• Роли бизнес-ангелов и критериях успешных инвестиций.

И, конечно, обсудили главный вопрос: когда закончится “венчурная зима”?

Надеюсь, что выпуск получился полезным и содержательным. Буду рад, если вы найдете в нем инсайты для себя.

Приятного прослушивания!

https://podcast.ru/e/2imr1cnZpBZ - ссылка на сам подкаст.

@mosunovc