Опубликовано более 350 Гб русских текстов для работы с задачами обработки естественного языка

Руководитель направления NLP в Sberbank Data Science Communtiy 👤Татьяна Шаврина у себя в Facebook сообщила о публикации библиотеки Corus, где собрано более 350 Гб русских текстов, отсортированных под разные задачи в области обработки естественного языка.

В библиотеку в том числе входит:
● датасет Taiga с новостями;
● дампы РИА Новостей и Lenta.ru;
● данные из 40 русскоязычных новостных ресурсов.

👉🏻 Узнать больше о библиотеке Corus

⬇️ Скачать данные с GitHub

Инвестиции в проекты в области искусственного интеллекта в России в 2019 году составили $226 млн.

Именно такие результаты я презентовал во вторник на очень интересном вебинаре от Mathshub и МФТИ на тему искусственного интеллекта.

Смотреть запись можно тут: https://youtu.be/jNjbrHf1OrE.

Это не первый выход в свет этих данных, но я тут еще про них не писал, поэтому остановлюсь подробнее. Дело в том, что в начале этого года я поучаствовал в подготовке версии #4 Альманаха в области ИИ, который делает Opentalks.ai с партнерами. Партнерами выступили Da Vinci Capital и небольшой, но гордый Telegram-канал @proVenture.

За данные большое спасибо компании Dsight.

Отчет качайте по ссылке: https://aireport.ru/ai_results_2019.

А я затизерю еще вот какой момент - разница в фондировании проектов в России и в мире (сравнение по миру на основе данных Stanford и их исследования AI Index 2019: https://hai.stanford.edu/research/ai-index-2019) составляет 18 раз. То есть, в России вы можете привлечь в 18 раз меньше денег.

Но это не мешает Российским проектам находиться достаточно высоко в рейтинге по количеству сделок. На каком месте? Смотрите презентацию с митапа или отчет.

@proVenture

#ai #research #events

Очень любопытная статья про простроение системы видеонаблюдения в Москве. Не столько про алгоритмы, сколько про анализ оборудования через призму “российское-китайское-американское”.

Главный тезис статьи - если вы думаете, что там все китайское - то вы ошибаетесь)) Там большая часть американской Cisco и HP, перемешанная с китайскими HikVision и Huawei. И пожалуй в сегодняшней геополитической ситуации это разумно)

Понятно, что российского оборудования там не много (хотя кстати, в отличие от автора статьи, мы знаем российских производителей видеооборудования, которые вполне конкурируют с китайцами). Но вот зато российское ПО является основным.

Вообщем, любопытно почитать: https://carnegie.ru/2020/08/05/ru-pub-82419

Очень странно.

Похоже книгу Ника Бострома «Искусственный интеллект. Этапы. Угрозы. Стратегии» на русском языке изъяли из продажи. На Озоне, Лабиринте и Литресе она «временно закончилась».

Неужели там написано что-то такое важное, что теперь это стало classified?)))

Ну и, кстати, вопрос - а осталась ли она в продаже на китайском языке? ))))

Берегитесь, интернет-тролли: скоро вас будут выявлять новейшими научными методами. Филолог из Йенского университета Сергей Монахов разработал алгоритм социолингвистического анализа, который с высокой точностью сможет отличить тролля от лидера мнений. Ученый обратил внимание на специфическое речевое поведение твиттерских троллей, выявил характерные черты и заложил их в алгоритм. Тестирование показало его эффективность: алгоритму понадобилось всего 50 твитов, чтобы безошибочно определить тролля. Подробнее об этом можно почитать в статье, которую ученый опубликовал научном журнале PLOS ONE.

Сергей Монахов подчеркивает, что алгоритм еще сыроват и нуждается в доработке. Не исключаю, что этим исследованием уже заинтересовались соцсети. Помните же, недавно Twitter в прямом смысле начал навешивать ярлыки – отмечать специальным значком аккаунты государственных СМИ и их сотрудников? А Facebook уже полгода маркирует фейковые новости – для этого у соцсети задействован гигантский человеческий ресурс. А если фейки и тролли будут выявляться алгоритмически, издержки на "поддержание чистоты информации" значительно сократятся. А заодно на бездушного робота можно будет и ответственность переложить за неизбежные ошибки автомаркировки.

Вчера все вспоминали знаменитый ролик Apple про 1984 год – после того, как Epic Games гениально обыграла его на старте открытого конфликта с корпорацией. Тема борьбы с тоталитаризмом снова популярна – и упорные попытки соцсетей регулировать свободу мнений уже воспринимаются как репрессивные. Поэтому, надеюсь, что научные изыскания Сергея Монахова пройдут успешно, ученый получит признание – но в машину по автоматической маркировке "свой-чужой" они не превратятся.

ИИ в мире венчура

В компании NGP Capital (инвестиционная “рука” Nokia) создали за 18 месяцев ИИ-систему под названием Q, которая ищет перспективные стартапы по всему миру. NGP Capital обычно инвестирует на стадии B, когда стартапы уже начинают масштабироваться и расширяться, то есть, появляются данные в публичном доступе, по которым можно их анализировать.

Система NGP Capital ищет новости, выкачивает данные с сайтов и баз данных по венчуру, ищет твиты, данные по росту числа сотрудников, отзывы в Glassdoor и так далее. Учитывает около 300 параметров. В разработке в системе 700 000 компаний по всему миру.

Внутри самой NGP Capital уже 30% всех стартапов на рассмотрении под инвестиции проходят через эту ИИ-систему и ребята планируют довести этот показатель до 90%. Цель – как можно быстрее выявлять перспективные стартапы без участия человека в этом процессе на начальном этапе и делать это, анализируя результаты, а не полагаясь только на предвзятый человеческий нетворкинг и личные связи в среде венчура.

Также ИИ-система показывает такие стартапы в областях, куда ранее та или иная венчурная компания не привыкла инвестировать — дает неожиданный свежий взгляд. Безусловно — это лишь первичный инструмент анализа, по составленному рейтингу проходятся уже люди.

https://fastsalttimes.com/

Очень любопытная статья про взаимодействие людей и роботов.

Профессор социальных и естественных наук Николас Христакис из университета Йеля приводит множество примеров с голосовыми помощниками, ботами в Фейсбуке и даже секс-роботами. И делает вывод, что
это взаимодействие уже сегодня незаметно меняет нашу социальную среду. Причем есть примеры как позитивного, так и негативного воздействия.

“В одном из экспериментов мы направили небольшие группы людей работать с человекоподобными роботами — прокладывать железнодорожные пути в виртуальном мире. Каждая группа состояла из трех человек и маленького сине-белого робота, сидящего за квадратным столом и работающего на планшетах. Робот был запрограммирован на случайные ошибки — и признание их. «Извините, ребята, я допустил ошибку в этом раунде, — говорил он с энтузиазмом. — Я знаю, в это трудно поверить, но роботы тоже допускают ошибки».

Как оказалось, благодаря этому неуклюжему, откровенному роботу группы работали лучше — он улучшал общение между людьми. Они становились более расслабленными и общительными и чаще смеялись вместе. По сравнению с контрольными группами, где робот просто давал вежливые отчеты, группы с откровенным роботом были лучше способны к сотрудничеству.”

Повлияют ли роботы и автономные машины на наши социальные взаимодействия? Безусловно да. Читайте здесь: https://ideanomics.ru/articles/21616

Пару дней назад утверждена Концепция регулирования ИИ и робототехники в РФ - по сути первый нормативный документ в области ИИ. В приложении полный текст, но если честно - читать там практически нечего((

Концепция “за все хорошее и против всего плохого”, она вполне толково констатирует существующие проблемные точки - чего не хватает и где есть необходимость для дальнейшего совершенствования законодательства для развития ИИ. Но пока ничего конкретного не предлагает. Что и понятно - область ИИ пока сильно нечеткая и для законодателей практически неконкретизируемая.

Посмотрим, что последует дальше, а пока - вот сам документ:

Друзья!

Мы объявляем новую конференцию OpenTalks.AI в феврале 2021 года! Точной даты пока нет, уточним в течение пары недель)

А сегодня - объявляем открытым call на доклады! Подробности и ссылка на форму подачи докладов на https://opentalks.ai/

Также в ближайшее время объявим начало регистрации!

Хорошего вечера и выходных!

Друзья!


Мы выпустили новый Альманах "Искусственный интеллект” №5 - "Предиктивная аналитика и системы поддержки принятия решений".

Работая над этим выпуском, мы столкнулись с неожиданными трудностями. Казалось бы, темы предсказательной аналитики, рекомендательных систем и систем поддержки принятия решений существуют уже достаточно давно, по ним можно найти большое количество информации, есть много экспертов в этой отрасли. Однако оказалось, что предсказательная аналитика является сильно более закрытой областью ИИ, чем, например, CV или NLP.

Забегая вперед, в нескольких словах: предсказательная аналитика стала настолько важной составляющей бизнеса лидирующих компаний, что все работы в этой области ведутся в закрытом режиме.

В отличие от NLP и CV, предсказательная аналитика уже давно перестала быть «разработкой», которую не знают как применить и смотрят на опыт других. ПА стала работающей корневой частью бизнеса, неотъемлемым элементом принятия бизнес-решений. Если Вы еще не используете ПА – этот выпуск для Вас!

Получить отчет: https://aireport.ru/pa

Вообщем давно было понятно, кто с кем и против кого. Но тем не менее - офиц договор в такой чувствительной сфере...

США и Великобритания подписали договор о совместных разработках в области ИИ:
https://www.reuters.com/article/uk-usa-britain-ai-idUKKCN26G33H

Друзья,
осталось 3 дня чтобы подать заявку на доклад на открытую конференцию по искусственному интеллекту OpenTalks.AI-2021! Первый раунд конкурса заявок на доклады заканчивается 30.09.2020.
Лучшие доклады отбираются Программным комитетом и из них формируется программа конференции. Докладчики участвуют в конференции бесплатно + получают специальные подарки от оргкомитета.
Подать заявку на доклад: https://opentalks.ai/ru/callforproposals

Очень интересное и глубокое интервью Константина Круглова, который проектировал голосового ассистента - Яндекс.Станцию в Яндексе, а теперь ушёл в Сбербанк и сделал голосовую колонку там.

Видно, что Сбер серьезно подошёл к вопросу голосовых ассистентов и из интервью становится понятно почему - они уверены, что текстовый поиск по интернету скоро закончится как use case и его вытеснит общение с помощниками.

Ex-Яндекс конкурирующий с Яндексом, вооруженный мощными финансовыми, вычислительными и ресурсами и хорошей командой - это прям начинает быть интересным!) Наконец то в России появляется реальная конкуренция, только она и может двигать нас вперёд!

Вообщем, это точно стоит прочитать: https://vc.ru/story/160830-pro-sravneniya-s-yandeksom-nuzhdy-lyudey-i-zahvat-rynka-assistentov-rasskazyvaet-konstruktor-tehniki-ot-sbera

Лучше поздно чем никогда!( Забыли заранее написать про отличную онлайн-конференцию трех российских ассоциаций, занимающихся искусственным интеллектом и когнитивными науками. Очень разные доклады про исследование мышления и мозга с разных сторон. Конференция идет всю неделю с 12 по 16 октября. Смотреть обязательно!

https://caics.ru/program#13_october

А Вы знаете, что беспилотники активно применяются в военном конфликте в Нагорном Карабахе? Более того, именно БПЛА становятся определяющим фактором в некоторых типах боевых действий!

Вот очень любопытная статья об этом: https://colonelcassad.livejournal.com/6240026.html

Вот они, новые реалии жизни с технологиями ИИ…

Игорь Пивоваров, организатор конференции OpenTalks.AI, рассказывает об актуальных задачах в области ИИ, о том, сможет ли человек контролировать развитие ИИ в будущем, и о сильном ИИ.

https://habr.com/ru/company/leader-id/blog/523448/

По старой доброй традиции, в пятницу вечером мы объявляем о регистрации на новую конференцию OpenTalks.AI-2021 !)))

Для самых быстрых и активных - специальная стоимость регистрации Early-birds!

Команда «Сбера» выложила в открытый доступ русскоязычную версию языковой модели GPT-3 с 760 млн параметров

Разработчики представили языковую модель GPT-3, обученную более чем на 600 Гб текстов. Для обучения модели использовались ресурсы суперкомпьютера «Кристофари». Как пишет руководитель проекта 👤Сергей Марков, модель способна генерировать тексты, исправлять грамматические ошибки, вести диалоги и даже писать программный код.

👉🏻 Подробности и примеры изложены в статье, а протестировать работу модели можно с помощью Telegram-бота

🗄 Исходный код на GitHub

Хорошее интервью с Игорем Ашмановым. Готов подписаться под 99% его утверждений)
https://www.business-gazeta.ru/article/485833

Друзья!

Мы объявляем второй call на доклады, который продлится до 15 ноября.
Кто не успел подать заявку в первую волну, welcome!)

Подробности здесь: https://opentalks.ai/ru/callforproposals

Сбой искусственного интеллекта может быть очень даже занятным!))
https://www.bfm.ru/news/456927