Одна из первых задач, в которую я сильно вкладывался при разработке - это саммаризация.
В чём состоит задача?
Это краткое изложение какого-то текста. Может быть выдержка наиболее значимых фрагментов текста (экстрактивная саммаризация) или генерация этого же текста более коротко (абстрактивная).
Очень интересная, и в тоже время сложная задача, потому что формировать или извлекать ключевую мысль непросто. Даже не каждый человек это делает легко.
Так или иначе, предлагаю почитать статью, чтобы повысить грамотность в этом вопросе.
Всем мир!
В чём состоит задача?
Это краткое изложение какого-то текста. Может быть выдержка наиболее значимых фрагментов текста (экстрактивная саммаризация) или генерация этого же текста более коротко (абстрактивная).
Очень интересная, и в тоже время сложная задача, потому что формировать или извлекать ключевую мысль непросто. Даже не каждый человек это делает легко.
Так или иначе, предлагаю почитать статью, чтобы повысить грамотность в этом вопросе.
Всем мир!
Хабр
Суммаризация текста: подходы, алгоритмы, рекомендации и перспективы
Ежедневно каждый из нас сталкивается с огромным информационным потоком. Нам часто необходимо изучить множество объемных текстов (статей, документов) в ограниченное время. Поэтому в области машинного...
👍8❤🔥3🔥2❤1
Ну, что же, для тех кто уже познакомился с миром нейронных сетей известно такое понятие, как loss-function.
Хотя эти функции используются для оценки качества обучения не только в нейронках, обычно многообразие lossов видим именно в этом контексте.
Для тех, кто ещё не успел познакомиться с этим понятием, и какие функции бывают, рекомендую прочитать вот эту и эту статью на простую, но важную тему.
Хотя эти функции используются для оценки качества обучения не только в нейронках, обычно многообразие lossов видим именно в этом контексте.
Для тех, кто ещё не успел познакомиться с этим понятием, и какие функции бывают, рекомендую прочитать вот эту и эту статью на простую, но важную тему.
Хабр
Настройка функции потерь для нейронной сети на данных сейсморазведки
В прошлой статье мы описали эксперимент по определению минимального объема вручную размеченных срезов для обучения нейронной сети на данных сейсморазведки. Сегодня мы продолжаем эту тему, выбирая...
👍5
Друзья, кто из Москвы, есть возможность встретиться лично на конференции Moscow Python Conf++ 2023 уже в эту субботу 🙂
Forwarded from MoscowPython Conf Channel
⠀
📋 https://bit.ly/3W7gEiN
⠀
Применение эмбеддингов языковых моделей на всём тексте не всегда дает четкое разделение для качественного обучения под другие задачи. Периодически возникают задачи, где нужно сократить лексикон для повышения точности классификации или кластеризации текста, а постоянное дообучение fasttext не всегда возможно, тем более он не работает со словосочетаниями.
⠀
Артур хочет поделиться иным способом кодирования слов и словосочетаний с помощью больших языковых моделей и словарных описаний слов и фразеологизмов, благодаря которым схожесть слов учитывается не по контексту применения, а по смыслу содержания.
⠀
Встречаемся 19 и 20 мая на Moscow Python Conf++ 2023 🙌
⠀
Участие в конференции бесплатное. Вход возможен только при предъявлении именного билета.
⠀
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥3
Для тех, кому ещё сложно понимать, насколько хороша/плоха ситуация со скоростью вычисления алгоритма, то вот красивый график сравнения.
А ещё есть красивое и понятное видео, где рассказывают про Big O.
А ещё есть красивое и понятное видео, где рассказывают про Big O.
👍12🔥7🥰1
This media is not supported in your browser
VIEW IN TELEGRAM
Прогонка прошла успешно, готов в субботу вещать 🧑🏼🚀🌍
🔥9👍3
Чудесная и очень полная статья про то, как используются и обучаются сверточные нейронные сети.
Много теории, но зато в голове порядок будет в использовании нейронных сетей.
С этой статьи открываю цикл #теориянейронныхсетей , где будут статьи с максимально подробным описанием работы нейронок.
Во имя познания 😎🙏🏼☀️
Много теории, но зато в голове порядок будет в использовании нейронных сетей.
С этой статьи открываю цикл #теориянейронныхсетей , где будут статьи с максимально подробным описанием работы нейронок.
Во имя познания 😎🙏🏼☀️
Medium
Convolutions and Backpropagations
Ever since AlexNet won the ImageNet competition in 2012, Convolutional Neural Networks (CNNs) have become ubiquitous. Starting from the…
👍9🤔1
Ребята, а у меня ещё анонс! Вообще, май полон публичных выступлений
27 и 28 на фестивале GeekPicnic в Москве снова соберутся московские стартапы и учёные, музыканты и дизайнеры, студенты IT направлений и фрилансеры, чтобы стать частью главной технологической сети страны!
Но что важно сообщить - 28 мая я буду вещать совместно с сотрудниками Нетологии про нейросети и ИИ.
Сразу скажу, что мероприятие больше научпоп формата, но от этого не менее интересное.
Весь таймлайн на изображениях.
Приходите, вживую пообщаеся. Буду рад всем 🤗
Место: Москва, Остров Мечты (Южный Ландшафтный Парк), лекторий «Путь в IT».
27 и 28 на фестивале GeekPicnic в Москве снова соберутся московские стартапы и учёные, музыканты и дизайнеры, студенты IT направлений и фрилансеры, чтобы стать частью главной технологической сети страны!
Но что важно сообщить - 28 мая я буду вещать совместно с сотрудниками Нетологии про нейросети и ИИ.
Сразу скажу, что мероприятие больше научпоп формата, но от этого не менее интересное.
Весь таймлайн на изображениях.
Приходите, вживую пообщаеся. Буду рад всем 🤗
Место: Москва, Остров Мечты (Южный Ландшафтный Парк), лекторий «Путь в IT».
❤6🤔2👎1🔥1
Классная статья по разработке системы геоаналитики.
Обязательно изучите, чтобы понимать этапы разработки, и расширить понимание в анализе данных и построении моделей
Обязательно изучите, чтобы понимать этапы разработки, и расширить понимание в анализе данных и построении моделей
Forwarded from DATApedia | Data science
Как построить систему геоаналитики с применением ML
В этой статье рассмотриавются примеры работы сервисов геоаналитики VK Predict. Выясняется, какие модели машинного обучения используются при построении таких систем и из каких этапов состоит разработка продукта с возможностями геоаналитики.
Перейти к статье | DATApedia
В этой статье рассмотриавются примеры работы сервисов геоаналитики VK Predict. Выясняется, какие модели машинного обучения используются при построении таких систем и из каких этапов состоит разработка продукта с возможностями геоаналитики.
Перейти к статье | DATApedia
🔥2
Когда обучаете модель регрессии, и вдруг обнаруживаете, что коэффициент детерминации R2 на тесте выше 0.99.
Какие первые мысли у вас появляются? 🤔
Какие первые мысли у вас появляются? 🤔
Наткнулся в сети на очень познавательную статью, где автор реализовывал на Python конечный автомат для бизнес-процессов с Jira.
Мне лично понравилось, особенно учитывая мою любовь к конечным автоматам.
К сожалению, теории мало, но практика очень показательна.
Изучайте 😉
Мне лично понравилось, особенно учитывая мою любовь к конечным автоматам.
К сожалению, теории мало, но практика очень показательна.
Изучайте 😉
Хабр
Сага о моделировании бизнес-процессов на базе конечного автомата (fsm)
Про конечные автоматы ( finite state machine, fsm ) много кто слышал, но используют их явно в реальных проектах редко. Чаще встречаются конструкции, которые поведением напоминают КА, но ими не...
👍4🔥3❤1
Хочу поделиться статьёй про синтаксические парсеры с теми, кто начал свой путь в NLP.
Это направление сейчас слабо развивается из-за популярности и успеха моделей на трансформерах, но ведь при правильном подходе никто не помешает объединить всё 😉
Статья хоть и не новая, но и прорывов, как таковых, не произошло, кроме библиотеки spacy, которая на основе нейронок достаточно хорошо проводит синтаксический анализ.
Стоит обратить внимание, что статья содержит немало мыслей, которые расширят ваше восприятие работы с текстами.
Наслаждайтесь и просвещайтесь☀️
Это направление сейчас слабо развивается из-за популярности и успеха моделей на трансформерах, но ведь при правильном подходе никто не помешает объединить всё 😉
Статья хоть и не новая, но и прорывов, как таковых, не произошло, кроме библиотеки spacy, которая на основе нейронок достаточно хорошо проводит синтаксический анализ.
Стоит обратить внимание, что статья содержит немало мыслей, которые расширят ваше восприятие работы с текстами.
Наслаждайтесь и просвещайтесь
Please open Telegram to view this post
VIEW IN TELEGRAM
Хабр
Изучаем синтаксические парсеры для русского языка
Привет! Меня зовут Денис Кирьянов, я работаю в Сбербанке и занимаюсь проблемами обработки естественного языка (NLP). Однажды нам понадобилось выбрать синтаксический парсер для работы с русским языком....
👍3🙏1
Выложили в видео в ютуб с моим докладом на конференции Moscow Python Conf++ 2023.
Тема была "Большие языковые модели + словарные описания слов" 😎
Тем, кто пропустил - посмотрите и ставьте лайки!
Было классно и интересно🔥
Тема была "Большие языковые модели + словарные описания слов" 😎
Тем, кто пропустил - посмотрите и ставьте лайки!
Было классно и интересно
Please open Telegram to view this post
VIEW IN TELEGRAM
YouTube
Большие языковые модели. Cловарные описания как способ кодирования слов и фразеологизмов
🔥10❤9
Хочу рекомендовать статью с достаточно подробным списоком функций активаций.
Чтобы столько в одном месте мне не приходилось встречать.
Поэтому оставлю это тут.
Из плюсов - много функций активаций и их производные (всё в одном месте)
Минус - нет объяснений, зачем может пригодиться та или иная функция, что важно новичкам.
Дополнительно оставлю код на Python с реализованными функциями активации (для закрепления материала)
Чтобы столько в одном месте мне не приходилось встречать.
Поэтому оставлю это тут.
Из плюсов - много функций активаций и их производные (всё в одном месте)
Минус - нет объяснений, зачем может пригодиться та или иная функция, что важно новичкам.
Дополнительно оставлю код на Python с реализованными функциями активации (для закрепления материала)
Machine Learning Explained
Activation Functions
Articles focused on Machine Learning, Artificial Intelligence and Data Science