Дизайн-система Plasma

Plasma — это дизайн-система для создания смартапов Canvas App, которые будут выглядеть как часть экосистемы виртуальных ассистентов. Plasma основывается на React и позволяет упростить разработку внешнего вида приложений. Все текущие приложения в экосистеме SberDevices реализованы с помощью Plasma.

Дизайн-система включает в себя следующие пакеты:

• plasma-tokens
содержит набор дизайн-токенов, типографических и цветовых констант. Токены представлены в виде JS-переменных и переменных CSS.

• ui
содержит набор готовых React-компонентов для создания Canvas App. Вы можете ознакомиться с доступными компонентами в документации и на демонстрационном стенде. Перед использованием компонентов рекомендуем изучить пакет plasma-tokens.

Подробную информацию об установке и использовании дизайн-системы Plasma вы найдете в открытом репозитории на GitHub.

Бонус: видеорассказ о шаблоне Plasma Temple, помогающем ускорить разработку смартапов.

​​SmartApp Framework

Широкий набор инструментов для разработки смартапов предоставляет новые возможности по созданию вашего приложения для SmartMarket. Например, для профессиональных разработчиков мы приготовили Python-фреймворк, который позволяет создавать смартапы для виртуальных ассистентов Салют. Он упрощает и стандартизирует процесс разработки за счёт единого API и готовых функций.

Мы активно используем этот фреймворк внутри Сбера, большое число наших собственных смартапов построено на нем. Это такие диалоговые приложения, как погода, текущее время, многие банковские навыки, диалоговая часть Canvas App. Наш самый любимый и вкусный пример Canvas App — это заказ попкорна, а также app каталога.

Возможности:

• Расширяемый язык DSL для создания диалоговых сценариев;
• Система слот-филлинга для извлечения сущностей из текста;
• Встроенный модуль предобработки текста;
• Поддержка Jaeger и Prometheus для мониторинга работы смартапа;
• Инструменты для ручного и автоматизированного тестирования.

Этапы работы с фреймворком:

1. Установка и запуск;
2. Создание сценария;
3. Тестирование сценария.

Фреймворк опубликован на GitHub и доступен без ограничений.

​​Практическое применение ML-технологий 🤖

Машинное обучение уже применяется во всех сферах деятельности человека. В предыдущих постах мы рассказали вам про историю машинного обучения, а также цели, которые оно преследует. Но рассказ был бы неполным без обзора достижений настоящего времени и перспектив. Ещё в 2017 году под управлением Стэнфордского университета был запущен новый индекс AI100 для отслеживания динамики в сфере искусственного интеллекта. Согласно его отчёту за 2021 год, наблюдается существенный прогресс в областях:

• Распознавание речи
Эти технологии совершили большой скачок в последние пять лет, что привело к развитию архитектур с расширенными возможностями обучения. Особого внимания заслуживают языковые модели нейронных сетей ELMo, GPT, mT5 и BERT.

• Компьютерное зрение и обработка изображений
В настоящее время технология обработки изображений получила широкое распространение и используется как для целей создания фона видеоконференций, так и для генерации фотореалистичных изображений, известных как «дипфейки».

• Робототехника
В последние пять лет наблюдается устойчивый прогресс в интеллектуальной робототехнике, управляемой машинным обучением. Двуногие и четвероногие роботы, промышленные роботы, распознающие предметы и хватающие выборочно их на впечатляющей скорости, продолжают своё наступление. На улицах Москвы уже курсируют беспилотные автомобили Sber Automotive Technologies, сейчас они проходят проверку высокой влажностью, отрицательной температурой, плохой обзорностью и тяжёлой дорожной обстановкой.

• Беспилотный транспорт
Создание таких машин требует интеграции ряда технологических областей, включая данные с датчиков, планирование, прогнозирование динамики автомобиля и принятие решений искусственным интеллектом. Тем не менее автономные транспортные средства уже работают в некоторых местах, таких как Феникс, штат Аризона, где вождение и погодные условия особенно благоприятны (в России же программа беспилотного такси находится на финальной стадии согласования, а запуск программы ожидается в 2022 году).

Основная технология, стоящая за большинством наиболее заметных достижений, — это машинное обучение, особенно «глубокое обучение» (в том числе генеративно-состязательные сети или GAN).

Продолжение следует…

​​Уже вошли в рабочий ритм после праздников? Немного облегчить и упорядочить график помогут смартапы.

Помидорковый таймер
Рабочий инструмент, который помогает управлять временем. Приложение позволяет увеличить эффективность работы при меньших временных затратах. Отличительная черта этой простой и действенной техники — концентрация на одном деле, а не решение сразу нескольких задач.

Умный автоответчик
Ассистент Салют ответит за вас, если телефон вне зоны доступа, вы разговариваете по другой линии или заняты и не можете принять звонок. Приложение позволяет настроить сценарии ответов для любых абонентов, в том числе и незнакомых. Ещё один плюс смартапа — ассистент умеет определять мошенников и шутить над ними.

Подбор сериала
С этим приложением не придётся тратить весь вечер на поиск интересного фильма. Назовите сериал, который нравится, и система предложит вам целую похожую подборку.

Присмотритесь к нашей подборке: приложения помогут расходовать время продуктивно, грамотно распределяя его между работой и отдыхом.

​​В открытом доступе появились новые увеличенные версии модели ruCLIP для ранжирования изображений и подписей к ним на русском языке. Разработка Sber AI и SberDevices стала доступна на GitHub в дополнение к ранее опубликованной модели ruCLIP Small.

Промышленные версии с высочайшим качеством — ruCLIP Base exclusive и ruCLIP Large exclusive — доступны в хабе предобученных моделей, датасетов и контейнеров DataHub на платформе SberCloud ML Space.

Эти модели уже обошли версию оригинальной англоязычной модели CLIP и русско-английского переводчика. Они позволяют эффективно решать многие задачи компьютерного зрения в различных продуктах и сервисах в режиме zero-shot, то есть без необходимости дорогостоящего дообучения.

В релиз вошли шесть моделей ruCLIP, которые отличаются размером использованного патча и размерами входных изображений. Посмотреть детальное сравнение всех шести новых обученных моделей можно в репозитории на GitHub.

Узнать больше можно на Хабре, а получить грант на тест и дообучение моделей в 180 000 рублей — на сайте SberCloud!

​​Не так давно в каталоге SmartMarket появился стартап 12-летнего школьника, который прошёл образовательный курс SmartMarket for Everyone.

Обучение рассчитано на тех, кто хочет быстро освоить новые технологии и создавать приложения для виртуальных ассистентов Салют без навыков программирования.

Мы решили поговорить с юным разработчиком о прохождении курса, опыте в IT и других увлечениях школьника.

О разработке

— Меня зовут Альберт, я из Москвы. До прохождения этого обучения я уже учился на онлайн-курсах. Например, изучал JavaScript, Python и с#. Вместе с братом мы сделали игру на Unity по принципу «Крестики нолики». Она опубликованная в каталоге Google Play, - рассказывает Альберт.

Об обучении

— Про курс SmartMarket for everyone узнал от папы. Теорию прошел легко, а вот с практическим заданием возникли сложности. Я даже думал бросить проект, но помог папа. Вместе мы обратились в команду поддержки, и ребята из SmartMarket помогли со всем справиться. Так я опубликовал смартап Угадай человека по профессии.

Мне понравился курс, потому что в нем есть мемы. И интерфейс удобный, — заключил разработчик.

Мы благодарим Альберта и его папу за разговор и уверены, что у Альберта впереди много достижений, причем не только в IT: мальчик также увлекается танцами, бильярдом, шахматами и видеоиграми.

История Альберта — пример того, как можно заинтересовать детей технологиями. Расскажите им про успех сверстника и наш курс. Он простой, интересный и подходит для любого уровня подготовки.

​​Стартовали продажи SberBox Time — устройства, исполняющего функции сразу трёх девайсов: умной колонки, ТВ-приставки и часов. Это еще одно новое пространство для смартапов, в неё уже встроены ассистенты семейства Салют, которые всегда помогут:

— заказать доставку продуктов или готовой еды;
— порекомендовать и включить фильм, подкаст или музыку;
— подсказать, какая погода;
— управлять устройствами умного дома.

Заказать умную колонку можно здесь. Стоимость SberBox Time — 7990 рублей.

​​Начать карьеру в IT уже завтра

Настоящее время отличается большим динамизмом, жизнь ускоряется ежедневно и людям приходится соответствовать этому ритму. По открытым данным, ежегодно объем информации в мире возрастает на 30%. К примеру, за пять лет, предшествующих уже далекому 2002 году, человечеством было произведено информации больше, чем за всю историю!

А в конце 2000-х годов, на Всемирном экономическом форуме в Давосе большую аудиторию собрала лекция, где говорилось о том, что «времена одной профессии на всю жизнь — прошли», так как жизнь стала слишком динамичной.

Япония, как страна, которая рождает и внедряет множество инноваций, достаточно давно пришла к тому, что гораздо важнее «быстро внедрить», чем долго, много лет патентовать и разрабатывать. К моменту, когда конкуренты смогут освоить выпуск такого же продукта — изобретатели придумывают еще лучше. Скорость, скорость — вот что важно.

И поэтому, low-code инструменты здесь обладают непревзойденным преимуществом: позволяют за короткий срок, с минимальными затратами, — произвести «минимальный рабочий продукт» или MVP. И ответить на главный вопрос: «а оно вообще кому то нужно?».

Чтобы дать возможность ускорить процессы разработки, Сбер дополнил инструменты SmartMarket средством быстрого создания приложений SmartApp Graph — визуальным конструктором, не требующим от вас навыков программирования. Он позволяет разработчикам быстро проверять гипотезы и создавать MVP без написания кода, с минимумом рутинной работы.

Попробовать

​​Витрина игр SmartMarket — теперь и на sber.ru

Отличные новости — мы запустили на сайте sber.ru витрину игр из каталога SmartMarket!

Что это значит для пользователя

Теперь игры из каталога SmartMarket можно запускать прямо в браузере — на компьютере или мобильных устройствах.

Что это значит для разработчика

У разработчиков HTML5-игр появляется новый инструмент для привлечения аудитории Сбера — сайт sber.ru. К тому же веб — это привычная поверхность для игр, а значит портировать их на SmartMarket станет ещё приятнее.

Что сделать, чтобы игра попала в веб

Портировать HTML5-игру на SmartMarket и убедиться, что она работает на SberPortal или в приложении Салют. После публикации игра появится на sber.ru в течение пяти рабочих дней. Подробнее в документации.

Виртуальные ассистенты пока не поддерживаются на сайте, поэтому игры с голосом временно не отобразятся на витрине sber.ru. Но мы работаем над этим.

Какие у нас планы на витрину sber.ru

— Интегрируем ассистента, чтобы все игры с голосовым управлением могли запускаться и на сайте.
— Расширим витрину и добавим на нее не только игры.

Витрина игр уже доступна на sber.ru. Следите за нашими обновлениями, портируйте игры и находите новую аудиторию!

​​One Day Offer: ищем автоматизаторов тестирования

На этот раз мы ищем автоматизаторов тестирования уровня Middle/Senior, которые специализируются на UI-тестах для девайсов на Android и QA-инженеров по тестированию бэкенда виртуальных ассистентов Салют.

Что делать?

Предстоит работать с линейкой умных устройств Sber — SberBox, SberBox Top, SberBox Time, SberPortal, платформой для телевизоров Салют ТВ и мобильным приложением Салют.

Нужно проверять работу навыков, которыми владеют наши ассистенты: например, установка будильника, новости, погода и многое другое.

Как проходит отбор

5 февраля в 12:00 ровно на сутки мы откроем доступ к домашнему заданию. Оно будет состоять из двух частей:

— тест из 10 вопросов на знание теории Kotlin/Java в зависимости от вакансии (1 час);
— практическое задание: написать 1-2 теста для проверки UI мобильного приложения Салют или бэкенда виртуальных ассистентов Салют в зависимости от вакансии (4 часа).

Результаты присылайте в виде ссылки на открытый репозиторий на GitHub по адресу: 1dayoffer@sberdevices.ru

Мы проверим ответы и в течение недели вернёмся с обратной связью. Кто справится, получит приглашение на онлайн-собеседование. Оно пройдёт 12 февраля.

Успехов и до встречи!

​​Перспективы МL-технологий

Машинное обучение уже прямо сейчас оказывает существенное влияние на мир и в прошлой части рассказа вы узнали о наиболее заметных достижениях на данный момент, а также об индексе Стэнфордского университета AI100 для отслеживания динамики в сфере искусственного интеллекта. Согласно отчету за 2021 год существует ряд вопросов, для решения которых применение технологий машинного обучения, является весьма перспективным:

🧪 Химия
синтезирование новых веществ и разработка лекарств;

💊 Медицина
раннее предупреждение заболеваний и рекомендация методов лечения;

⚡️ Энергетика
достижение большей эффективности за счёт выявления закономерностей — изменение угла атаки лопастей ветрогенераторов, в зависимости от предполагаемой силы ветра; снижение/повышение генерации тепла и электричества в разное время суток и разной заполненности помещений людьми;

🏛 Управление компаниями и государством
— оптимизация бизнес-операций, помощь в принятии решений;
— устранение «узких мест» в функционировании систем — даже малочисленный персонал может обрабатывать и сортировать входящую информацию с применением методов ИИ;

На международной конференции по искусственному интеллекту и анализу данных Artificial Intelligence Journey (AI Journey) президент по глобальным продажам, маркетингу и операциям Microsoft Жан-Филипп Куртуа сообщил, что пандемия COVID-19 форсировала интерес к использованию машинного обучения: 80% компаний уже внедряют его в свою деятельность, а 56% планируют увеличить объем инвестиций в эту сферу.

В рамках SmartMarket вы можете также использовать всю мощь нашей платформы ML Space для создания и развёртывания моделей машинного обучения на высокопроизводительной инфраструктуре, на базе суперкомпьютеров Christofari и Christofari Neo.

​​Сбер открыл разработчикам бесплатный доступ к инструменту подготовки датасетов

Программная библиотека PyTorch-LifeStream, которая теперь открыта для разработчиков, содержит несколько алгоритмов построения эмбеддингов событийных данных.

Событийные данные могут быть разные: истории посещений сайтов, истории покупок, событий в онлайн-играх и так далее. При этом сгенерированный на основе алгоритмов библиотеки эмбеддинг не будет содержать каких-либо персональных данных.

В библиотеке реализован уникальный алгоритм применения нейросетевого контрастного обучения к событийным данным. Он создан и запатентован в Лаборатории по искусственному интеллекту Сбера.

Это уже не первый случай, когда Сбер делится результатами своих исследований в области искусственного интеллекта со всеми желающими. Ранее компания вывела в открытый доступ такие библиотеки, как ruGPT-3, LAMA, RePlay и ruDALL-E.

​​Перспективы low-code

Как мы писали ранее, концепция low-code позволяет существенно ускорить создание приложений за счёт сочетания графического способа построения программ путём перетаскивания логических блоков и программирования. Плюсом такого подхода является ускорение и удешевление разработки, а минусом — некоторая «стандартность» решений, трудность реализации действительно нетривиальных вещей. После знакомства с low-code встаёт естественный вопрос: а каковы же его перспективы?

Дело в том, что согласно IDC, в период с 2018 по 2023 годы компаниями будет разработано около 500 миллионов приложений, что эквивалентно по количеству всем приложениям, разработанным за последние 40 лет! Соответственно, ожидается взрывной рост потребности в IT-специалистах, который, согласно Ассоциации предприятий компьютерных и информационных технологий, составит порядка 300 тысяч человек в год.

Согласно анализу Министерства цифрового развития, связи и массовых коммуникаций, нехватка IT-специалистов составляет до 1 миллиона человек, причём это типично не только для России, но и для мировой ситуации на рынке труда.

Естественным следствием такого положения вещей становится существенный рост стоимости труда специалистов информационных технологий, чья нехватка и высокая стоимость на рынке труда начинает тормозить развитие цифровой сферы.

Именно поэтому low-code-платформы и инструменты сейчас переживают бурный рост. По мнению специалистов, это не является сиюминутным явлением, а представляет собой устойчивый тренд. Они полагают, что уже в ближайшем будущем low-code позволит разгрузить IT-специалистов от рутинной работы, позволив им сконцентрироваться на по-настоящему интересных вещах!

В Сбере мы тоже внимательно относимся к последним трендам и внедряем этот подход для ускорения разработки. Например, вы можете воспользоваться нашим продуктом SmartApp Graph, который не требует навыков программирования!

​​Играть за деньги будет можно?

Недавно основатель Reddit Алексис Оганян заявил, что уже в течение следующих пяти лет 90 % игрового рынка займут приложения, в которые можно будет играть, чтобы зарабатывать. По его мнению, через несколько лет люди начнут по-другому ценить своё время и не будут тратить его без материальной мотивации.

Своим мнением поделился руководитель сервиса SberPlay Юрий Бородин:

«Ранее такие попытки уже предпринимались. Например, Second Life. Однако всё упирается в прямые или косвенные запреты подобных заработков со стороны госорганов. Уже сейчас можно видеть реальные примеры запрета криптовалют в Китае и первые намёки на запреты в России. Полагаю, что ни одно государство не захочет допустить свободное неконтролируемое обращение неофициальной цифровой валюты. Telegram и Meta уже пытались, пока не вышло».

Как вы считаете, у кибервалюты и заработка внутри игры есть перспективы?

​​Делайте ставки, сколько смартапов опубликуем в 2022!

​​Машинное обучение: что дальше 🔮

В предыдущих частях мы рассказали о машинном обучении — замечательной технологии, которая, как мы надеемся, может наконец-то дать человечеству волшебную кнопку «сделать красиво», то есть компьютер выполнит поставленную задачу, научившись самостоятельно.

Говоря о перспективах этой технологии, можно отметить, что, например, разработчики из области искусственного интеллекта видят новые возможности в области нечётких нейронных сетей. Их логика известна достаточно давно, ещё с прошлого века, но именно к настоящему времени появились системы нужной производительности, способные строить предположения, основываясь на большом количестве исходных данных.

Нейросети такого рода могут дать большие возможности для области аналитики данных в разных областях. Такой подход может помочь предсказать потребности, анализируя массивы информации из разных источников, что позволит сегментировать рынок с точностью до отдельного клиента (что «на голову» превосходит современный таргетинг в маркетинге).

Подытоживая серию наших рассказов о ML-технологиях, хочется сказать ещё об одном интересном моменте: словосочетание «машинное обучение» зачастую ассоциируется с большой вычислительной мощью и серьёзными компьютерными кластерами. Но это не всегда верно. Например, в настоящее время весьма «горячей» темой является технология Tiny Machine Learning (TinyML) — настоящий прорыв в области ИИ — которая позволяет создавать интеллектуальные IoT-устройства с низкой ценой. По прогнозу ABI Research, уже к 2030 году 2,5 миллиарда устройств будут включать в себя интеллектуальные технологии TinyML.

TinyML позволяет делать больше, располагая меньшим. Это то же обучение, но с меньшими энергозатратами и без подключения к сети.

В следующем посте мы расскажем больше о Tiny ML.

​​Компания SberDevices присоединилась к международному альянсу разработки единого стандарта для умного дома Matter. Он позволяет совмещать разные системы друг с другом, делая их более удобными для пользователей.

Теперь и с помощью виртуальных ассистентов Салют можно будет управлять девайсами любых производителей, использующих Matter. Всего функционировать в единой сети могут уже более 4 тысяч устройств.

В альянс уже входит более 400 компаний по всему миру, среди них такие гиганты, как Google, Apple, Amazon. Единый стандарт призван упростить и удешевить разработку для производителей и сделать устройства доступнее и удобнее для пользователей за счёт их совместимости.

​​«Салют, покажи медальный зачет»: виртуальные ассистенты Салют помогут не пропустить главные новости большого спорта ⛷

Виртуальные ассистенты Салют стали еще лучше ориентироваться в новостях большого спорта благодаря проекту, реализованному в партнёрстве с «Чемпионатом». Теперь пользователям мобильных приложений СберБанк Онлайн и Салют, а также умных устройств Sber доступны ключевые новости главного спортивного первенства мира.

Ассистенты Салют помогут найти новости обо всех важных событиях: розыгрышах медалей, результатах спортсменов и сборных. В режиме реального времени можно будет следить за обновлениями таблицы медального зачёта стран-участниц — достаточно будет просто попросить ассистентов: «Салют, покажи медальный зачет». Кроме того, с помощью ассистентов будет удобно следить за календарем и запускать прямые трансляции соревнований.