#timeseries #vorontsov #holt #winters #trigg #leach #adaptiveselection #lawr
https://www.youtube.com/watch?v=Rmh6b96u6UU
https://www.youtube.com/watch?v=Rmh6b96u6UU
YouTube
Машинное обучение. Прогнозирование временных рядов. К.В. Воронцов, Школа анализа данных, Яндекс.
Прогнозирование временных рядов – это специальный случай задачи регрессии, в которой объекты выборки линейно упорядочены по времени. Обучающая выборка находится в прошлом, тестовая – в будущем. В простых задачах из области эконометрики поведение временного…
👍1
#math #education #agi #vorontsov
Воронцов классно выступил.
Очень понравилась его идея, что в школе все предметы нужно сделать более связанными с реальностью, практикой. На уроках литературы меньше учить классику, больше международную, литературу других религий. Жить сцуко где собираетесь, в 18 веке, в Российской империи? По химии, физике, биологии больше опытов. Математику и геометрию дополнять чисметодами и моделированием. По географии, наверное, путешествий? ) Было бы круто жить в такой стране мечты. "5-й А, собирайтесь, мы завтра летим вертолётами смотреть вулканы на Камчатке". Если управляет страной не питекантроп, это всё кажется возможным.
Ещё интересна его аргументация, что с появлением сильного ИИ не наступит сингулярности по Курцвейлу и ничего в нашем быте критически не изменится.
https://www.youtube.com/watch?v=_P2N5W-c9rQ
Воронцов классно выступил.
Очень понравилась его идея, что в школе все предметы нужно сделать более связанными с реальностью, практикой. На уроках литературы меньше учить классику, больше международную, литературу других религий. Жить сцуко где собираетесь, в 18 веке, в Российской империи? По химии, физике, биологии больше опытов. Математику и геометрию дополнять чисметодами и моделированием. По географии, наверное, путешествий? ) Было бы круто жить в такой стране мечты. "5-й А, собирайтесь, мы завтра летим вертолётами смотреть вулканы на Камчатке". Если управляет страной не питекантроп, это всё кажется возможным.
Ещё интересна его аргументация, что с появлением сильного ИИ не наступит сингулярности по Курцвейлу и ничего в нашем быте критически не изменится.
https://www.youtube.com/watch?v=_P2N5W-c9rQ
YouTube
Константин Воронцов — о математике, ИИ, фейковых новостях и демократии
🎯 Поддержать популяризацию математики на Патреоне: https://patreon.com/savvateev
+ «Карфаген должен быть разрушен». Катон Цензор после поездки в Карфаген в конце 150-х годов (по разным сведениям состоявшейся в 153 или 152 году до н. э.) заканчивал этим высказыванием…
+ «Карфаген должен быть разрушен». Катон Цензор после поездки в Карфаген в конце 150-х годов (по разным сведениям состоявшейся в 153 или 152 году до н. э.) заканчивал этим высказыванием…
А Вы как считаете, с появлением сильного ИИ наступит ли "сингулярность" по Курцвейлу (эпоха экспоненциального развития человечества, непредставимых пока открытий и достижений)?
Anonymous Poll
48%
Нет. Если экскаватору дать разум, он не перевернёт мир. Будет постепенное улучшение.
52%
Наступит! Разумный экскаватор изобретёт лучший способ копать и сам построит подземный мегаполис!
#translations
Постоянно сталкиваюсь с тем, что переведённые книги оставляют впечатление, будто автор - косноязычный даун. Вроде уже прошли 90-е с системой перевода Промпт, но, видно, прромпт живёт у нас в сердцах. Так называемые "переводчики"! Ну нельзя переводить тексты с английского пословно, НЕЛЬЗЯ. Дайте вы немного больше свободы, отклонитесь от грамматической структуры оригинала, но сделайте текст хорошо звучащим на целевом языке. Ну неужели не видите, что у вас получается говно?
Постоянно сталкиваюсь с тем, что переведённые книги оставляют впечатление, будто автор - косноязычный даун. Вроде уже прошли 90-е с системой перевода Промпт, но, видно, прромпт живёт у нас в сердцах. Так называемые "переводчики"! Ну нельзя переводить тексты с английского пословно, НЕЛЬЗЯ. Дайте вы немного больше свободы, отклонитесь от грамматической структуры оригинала, но сделайте текст хорошо звучащим на целевом языке. Ну неужели не видите, что у вас получается говно?
#chan #featureselection
Прочитал научную статью Эрни Чана о выборе признаков, разочаровался.
"Feature selection in machine learning is subject to the intrinsic randomness of the feature selection algorithms (e.g. random permutations during MDA). Stability of selected features with respect to such randomness is essential to the human interpretability of a machine learning algorithm. We proposes a rank-based stability metric called ‘instability index’ to compare the stabilities of three feature selection algorithms MDA, LIME, and SHAP as applied to random forests. Typically, features are selected by averaging many random iterations of a selection algorithm. Though we find that the variability of the selected features does decrease as the number of iterations increases, it does not go to zero, and the features selected by the three algorithms do not necessarily converge to the same set. We find LIME and SHAP to be more stable than MDA, and LIME is at least as stable as SHAP for the top ranked features. Hence overall LIME is best suited for human interpretability. However, the selected set of features from all three algorithms significantly improves various predictive metrics out-of-sample, and their predictive performances do not differ significantly. Experiments were conducted on synthetic datasets, two public benchmark datasets, and on proprietary data from an active investment strategy."
https://arxiv.org/ftp/arxiv/papers/2005/2005.12483.pdf
Прочитал научную статью Эрни Чана о выборе признаков, разочаровался.
"Feature selection in machine learning is subject to the intrinsic randomness of the feature selection algorithms (e.g. random permutations during MDA). Stability of selected features with respect to such randomness is essential to the human interpretability of a machine learning algorithm. We proposes a rank-based stability metric called ‘instability index’ to compare the stabilities of three feature selection algorithms MDA, LIME, and SHAP as applied to random forests. Typically, features are selected by averaging many random iterations of a selection algorithm. Though we find that the variability of the selected features does decrease as the number of iterations increases, it does not go to zero, and the features selected by the three algorithms do not necessarily converge to the same set. We find LIME and SHAP to be more stable than MDA, and LIME is at least as stable as SHAP for the top ranked features. Hence overall LIME is best suited for human interpretability. However, the selected set of features from all three algorithms significantly improves various predictive metrics out-of-sample, and their predictive performances do not differ significantly. Experiments were conducted on synthetic datasets, two public benchmark datasets, and on proprietary data from an active investment strategy."
https://arxiv.org/ftp/arxiv/papers/2005/2005.12483.pdf
#vorontsov
https://www.youtube.com/watch?v=SZkrxWhI5qM&list=PLJOzdkh8T5krxc4HsHbB8g8f0hu7973fK&index=5
Вообще отличный курс в виде плейлиста на ютубе. Советую.
https://www.youtube.com/watch?v=SZkrxWhI5qM&list=PLJOzdkh8T5krxc4HsHbB8g8f0hu7973fK&index=5
Вообще отличный курс в виде плейлиста на ютубе. Советую.
YouTube
Машинное обучение. Вводная лекция. К.В. Воронцов, Школа анализа данных, Яндекс.
Вводная лекция. В первой половине лекции вводятся обозначения и понятия, которые будут использоваться на протяжении всего курса: объекты, признаки, функция потерь, предсказательная модель, минимизация эмпирического риска, обучающая выборка, тестовая выборка…
👍1
#google #law
Основные тезисы соглашения Google и генпрокуроров штатов в рамках антимонопольного разбирательства.
Google выплатит $700 млн — это операционная прибыль от «Play Маркета» примерно за 21 день.
Из этой суммы $629 млн будут перечислены потребителям, которые, вероятно, переплатили при покупке приложений и проведении микротранзакций в «Play Маркете» в связи с уплатой налогов, гонораров адвокатов и прочими расходами.
Кроме того, $70 млн будут направлены властям штатов на расходы по усмотрению генпрокуроров.
И ещё $1 млн уйдёт на обслуживание этих расчётов.
В течение 7 лет Google «сохранит на Android техническую возможность установки сторонних приложений на мобильные устройства с помощью средств, отличных от Google Play».
В течение 5 лет Google будет позволять разработчикам предлагать альтернативную систему оплаты параллельно с Google Play (User Choice Billing — расчёты по выбору пользователя).
В течение 5 лет Google не будет вынуждать разработчиков предлагать более выгодные цены потребителям, выбирающим Google Play и Google Play Billing.
В течение 4 лет Google не будет вынуждать разработчиков выпускать игры в Google Play одновременно с другими магазинами приложений с равной функциональностью.
В течение 5 лет Google не будет заставлять производителей эксклюзивно устанавливать Google Play на телефон или выводить его на домашний экран.
В течение 4 лет Google не будет запрещать OEM-производителям предоставлять права установщиков для предустановленных приложений.
В течение 5 лет Google не будет требовать своего согласия на предустановку OEM-производителем альтернативного магазина приложений.
В течение 4 лет Google будет позволять сторонним магазинам обновлять приложения без необходимости разрешения от пользователя.
В течение 4 лет Google будет позволять сторонним магазинам приложений использовать свои API и «разделение функций» для облегчения установки приложений.
В течение 5 лет Google превратит два своих «экрана страха» при загрузке сторонних приложений в единое пользовательское соглашение, которое будет читаться как эквивалент согласованного высказывания: «Ваш телефон на текущий момент не настроен на установку приложений из этого источника. Выдача этому источнику разрешения устанавливать приложения может подвергнуть риску ваши телефон и данные».
В течение 5 лет Google будет позволять участвующим в программе User Choice Billing разработчикам сообщать своим пользователям о более выгодных ценах на других площадках и «проводить транзакции, используя существующее веб-решение разработчика для выставления счетов во встроенном веб-интерфейсе в своём приложении».
В течение 6 лет Google сохранит разработчикам возможность использовать контактную информацию, полученную вне приложения или в приложении (с согласия пользователя) для общения с пользователями вне приложения.
В течение 6 лет Google будет позволять приложениям, предназначенным только для потребления (например, Netflix, который не позволяет платить на устройстве через сторонние системы), сообщать пользователям о более выгодных ценах на других площадках без ссылок на внешние сайты — например, с надписями вроде «Доступно на нашем сайте за $9,99».
В течение 6 лет Google не будет запрещать разработчикам раскрывать пользователям любые услуги или иные сборы, связанные с Google Play или платёжной системой Google Play.
https://3dnews.ru/1097696/google-viplatit-700-millionov-i-izmenit-magazin-prilogeniy-chtobi-snyat-pretenzii-amerikanskih-vlastey
Основные тезисы соглашения Google и генпрокуроров штатов в рамках антимонопольного разбирательства.
Google выплатит $700 млн — это операционная прибыль от «Play Маркета» примерно за 21 день.
Из этой суммы $629 млн будут перечислены потребителям, которые, вероятно, переплатили при покупке приложений и проведении микротранзакций в «Play Маркете» в связи с уплатой налогов, гонораров адвокатов и прочими расходами.
Кроме того, $70 млн будут направлены властям штатов на расходы по усмотрению генпрокуроров.
И ещё $1 млн уйдёт на обслуживание этих расчётов.
В течение 7 лет Google «сохранит на Android техническую возможность установки сторонних приложений на мобильные устройства с помощью средств, отличных от Google Play».
В течение 5 лет Google будет позволять разработчикам предлагать альтернативную систему оплаты параллельно с Google Play (User Choice Billing — расчёты по выбору пользователя).
В течение 5 лет Google не будет вынуждать разработчиков предлагать более выгодные цены потребителям, выбирающим Google Play и Google Play Billing.
В течение 4 лет Google не будет вынуждать разработчиков выпускать игры в Google Play одновременно с другими магазинами приложений с равной функциональностью.
В течение 5 лет Google не будет заставлять производителей эксклюзивно устанавливать Google Play на телефон или выводить его на домашний экран.
В течение 4 лет Google не будет запрещать OEM-производителям предоставлять права установщиков для предустановленных приложений.
В течение 5 лет Google не будет требовать своего согласия на предустановку OEM-производителем альтернативного магазина приложений.
В течение 4 лет Google будет позволять сторонним магазинам обновлять приложения без необходимости разрешения от пользователя.
В течение 4 лет Google будет позволять сторонним магазинам приложений использовать свои API и «разделение функций» для облегчения установки приложений.
В течение 5 лет Google превратит два своих «экрана страха» при загрузке сторонних приложений в единое пользовательское соглашение, которое будет читаться как эквивалент согласованного высказывания: «Ваш телефон на текущий момент не настроен на установку приложений из этого источника. Выдача этому источнику разрешения устанавливать приложения может подвергнуть риску ваши телефон и данные».
В течение 5 лет Google будет позволять участвующим в программе User Choice Billing разработчикам сообщать своим пользователям о более выгодных ценах на других площадках и «проводить транзакции, используя существующее веб-решение разработчика для выставления счетов во встроенном веб-интерфейсе в своём приложении».
В течение 6 лет Google сохранит разработчикам возможность использовать контактную информацию, полученную вне приложения или в приложении (с согласия пользователя) для общения с пользователями вне приложения.
В течение 6 лет Google будет позволять приложениям, предназначенным только для потребления (например, Netflix, который не позволяет платить на устройстве через сторонние системы), сообщать пользователям о более выгодных ценах на других площадках без ссылок на внешние сайты — например, с надписями вроде «Доступно на нашем сайте за $9,99».
В течение 6 лет Google не будет запрещать разработчикам раскрывать пользователям любые услуги или иные сборы, связанные с Google Play или платёжной системой Google Play.
https://3dnews.ru/1097696/google-viplatit-700-millionov-i-izmenit-magazin-prilogeniy-chtobi-snyat-pretenzii-amerikanskih-vlastey
3DNews - Daily Digital Digest
Google разрешит сторонние платёжные системы в приложениях из «Play Маркета» и заплатит $700 млн штрафа в США
На минувшей неделе присяжные вынесли вердикт, что Google установила незаконную монополию со своим магазином приложений «Play Маркет», что принесло победу Epic Games.
#hpo #hpt #raytune
Как я понял, raytune распараллеливает базовые библиотеки HPT, сам новых алгоритмов не добавляет.
https://www.youtube.com/watch?v=10uz5U3Gy6E
Как я понял, raytune распараллеливает базовые библиотеки HPT, сам новых алгоритмов не добавляет.
https://www.youtube.com/watch?v=10uz5U3Gy6E
YouTube
Richard Liaw: A Guide to Modern Hyperparameters Turning Algorithms | PyData LA 2019
www.pydata.org
PyData is an educational program of NumFOCUS, a 501(c)3 non-profit organization in the United States. PyData provides a forum for the international community of users and developers of data analysis tools to share ideas and learn from each…
PyData is an educational program of NumFOCUS, a 501(c)3 non-profit organization in the United States. PyData provides a forum for the international community of users and developers of data analysis tools to share ideas and learn from each…
#food
"В американском городе Пасадена скоро откроется точка быстрого питания CaliExpress by Flippy, в которой будут работать исключительно роботы: клиент сможет сделать заказ на терминале, а затем ему останется наблюдать, как еда готовится машинами. Роботы Flippy будут самостоятельно перемещаться по направляющим на кухне от одной точки к другой, готовя картошку фри и бургеры — на булочке с необходимыми овощами и соусами. Полностью роботизированная закусочная разместится по соседству с традиционной бургерной, где работают живые люди."
https://3dnews.ru/1097767/v-amerikanskoy-pasadene-otkroetsya-polnostyu-robotizirovannaya-burgernaya
"В американском городе Пасадена скоро откроется точка быстрого питания CaliExpress by Flippy, в которой будут работать исключительно роботы: клиент сможет сделать заказ на терминале, а затем ему останется наблюдать, как еда готовится машинами. Роботы Flippy будут самостоятельно перемещаться по направляющим на кухне от одной точки к другой, готовя картошку фри и бургеры — на булочке с необходимыми овощами и соусами. Полностью роботизированная закусочная разместится по соседству с традиционной бургерной, где работают живые люди."
https://3dnews.ru/1097767/v-amerikanskoy-pasadene-otkroetsya-polnostyu-robotizirovannaya-burgernaya
3DNews - Daily Digital Digest
Все самое интересное из мира IT-индустрии
Самые интересные и оперативные новости из мира высоких технологий. На нашем портале - все о компьютерном железе, гаджетах, ноутбуках и других цифровых устройствах. А также обзоры новых игр, достижения современной науки и самые любопытные онлайн-проекты.
Forwarded from Alor School
Что Уоррен Баффет думает о техническом анализе?
Регистрируйтесь на бесплатный мастер-класс
Теория эффективного vs теория НЕэффективного рынка
+Опционы без высшей математики
📅 20-21 декабря | 20:00 (мск) | Юрий Красноруцкий
ЗАРЕГИСТРИРОВАТЬСЯ БЕСПЛАТНО по ссылке https://alorschool.ru/effect_vs_neeffect
За 2 дня вы узнаете:
✅ Основные стратегии на линейных рынках
✅ Если индикаторы есть, то кому на самом деле они нужны?
✅ Кто популяризирует технический анализ и для чего?
✅ Искусственный интеллект на службе у частного трейдера
✅ Алгоритмический трейдинг для частных трейдеров
✅ Сеточные роботы-торговцы волатильностью
✅ Стратегии пассивного дохода на бирже
✅ Как начать зарабатывать с первого дня на опционах
✅ Что читать. Кого слушать. Где смотреть.
И МНОГОЕ ДРУГОЕ 🔥
РЕГИСТРИРУЙТЕСЬ БЕСПЛАТНО по ссылке https://alorschool.ru/effect_vs_neeffect
Реклама. ООО "АЛОР +". ИНН: 7709221010, erid: 2SDnjewddya
Регистрируйтесь на бесплатный мастер-класс
Теория эффективного vs теория НЕэффективного рынка
+Опционы без высшей математики
📅 20-21 декабря | 20:00 (мск) | Юрий Красноруцкий
ЗАРЕГИСТРИРОВАТЬСЯ БЕСПЛАТНО по ссылке https://alorschool.ru/effect_vs_neeffect
За 2 дня вы узнаете:
✅ Основные стратегии на линейных рынках
✅ Если индикаторы есть, то кому на самом деле они нужны?
✅ Кто популяризирует технический анализ и для чего?
✅ Искусственный интеллект на службе у частного трейдера
✅ Алгоритмический трейдинг для частных трейдеров
✅ Сеточные роботы-торговцы волатильностью
✅ Стратегии пассивного дохода на бирже
✅ Как начать зарабатывать с первого дня на опционах
✅ Что читать. Кого слушать. Где смотреть.
И МНОГОЕ ДРУГОЕ 🔥
РЕГИСТРИРУЙТЕСЬ БЕСПЛАТНО по ссылке https://alorschool.ru/effect_vs_neeffect
Реклама. ООО "АЛОР +". ИНН: 7709221010, erid: 2SDnjewddya
alorschool.ru
Теория эффективного vs Теория НЕэффективного рынка +Опционы без высшей математики
Что думает У. Баффетт об ТА?
#health #ml
"Данные для обучения модели life2vec взяты из информации о рынке труда и данных Национального регистра пациентов (LPR) и Статистического управления Дании. Набор данных включает в себя информацию обо всех 6 млн датчан и содержит сведения о доходах, заработной плате, стипендии, типе работы, отрасли, социальных пособиях и т.д. Набор медицинских данных включает записи о посещениях медицинских работников или больниц, диагнозе, типе пациента и насколько внезапным или срочным было обращение за медицинской помощью. Данные для модели представлены за период с 2008 по 2020 годы, хотя по ограниченной возрастной группе данные брались за период с 2008 по 2016 годы.
Авторы исследования отмечают, что для полномасштабного использования подобной модели в социальных целях необходимо ответить на множество этических вопросов. В то же время они подчёркивают, что широко распространённые механизмы по оценке целевой аудитории для рекламы позволяют узнавать о людях не намного меньше и это уже используется. Так что не будет ничего плохого, если модель сможет предсказать какое-нибудь негативное событие в жизни конкретного человека, которое можно будет избежать тем или иным образом. Дату смерти, кстати, модель предсказывает с точностью в пределах четырёх лет."
https://3dnews.ru/1097785/iskusstvenniy-intellekt-nauchili-predskazivat-sudbu-i-vremya-smerti-lyudey
"Данные для обучения модели life2vec взяты из информации о рынке труда и данных Национального регистра пациентов (LPR) и Статистического управления Дании. Набор данных включает в себя информацию обо всех 6 млн датчан и содержит сведения о доходах, заработной плате, стипендии, типе работы, отрасли, социальных пособиях и т.д. Набор медицинских данных включает записи о посещениях медицинских работников или больниц, диагнозе, типе пациента и насколько внезапным или срочным было обращение за медицинской помощью. Данные для модели представлены за период с 2008 по 2020 годы, хотя по ограниченной возрастной группе данные брались за период с 2008 по 2016 годы.
Авторы исследования отмечают, что для полномасштабного использования подобной модели в социальных целях необходимо ответить на множество этических вопросов. В то же время они подчёркивают, что широко распространённые механизмы по оценке целевой аудитории для рекламы позволяют узнавать о людях не намного меньше и это уже используется. Так что не будет ничего плохого, если модель сможет предсказать какое-нибудь негативное событие в жизни конкретного человека, которое можно будет избежать тем или иным образом. Дату смерти, кстати, модель предсказывает с точностью в пределах четырёх лет."
https://3dnews.ru/1097785/iskusstvenniy-intellekt-nauchili-predskazivat-sudbu-i-vremya-smerti-lyudey
3DNews - Daily Digital Digest
Искусственный интеллект научили предсказывать судьбу и время смерти людей
Обученная на данных многолетних наблюдений за 6 млн датчан модель искусственного интеллекта смогла с высокой точностью прогнозировать важные события в жизни людей вплоть до указания даты их смерти. Точность предсказаний можно повысить ещё сильнее, если добавить…
Forwarded from Лекторий
This media is not supported in your browser
VIEW IN TELEGRAM
Если ты фрилансер — это далеко не повод отказывать себе в шикарном корпоративе.
Forwarded from Small Data Science for Russian Adventurers
#визуализация
Лучше решить одну задачу ста способами, чем сто задач одним. Тут то же самое, но с картинками... как 6 чисел визуализировать 100 разными способами.
https://100.datavizproject.com/
Лучше решить одну задачу ста способами, чем сто задач одним. Тут то же самое, но с картинками... как 6 чисел визуализировать 100 разными способами.
https://100.datavizproject.com/
#outlierdetection #anomalydetection #otus #dbscan #oneclasssvm #isolationforest
понравился отсев аномалий с помощью dbscan
https://www.youtube.com/watch?v=NWOSVklohlI
понравился отсев аномалий с помощью dbscan
https://www.youtube.com/watch?v=NWOSVklohlI
YouTube
Поиск аномалий в данных // Демо-занятие курса «Machine Learning. Professional»
Рассматриваем способы очистки данных от мусора. Учимся настраивать систему для поиска аномалий.
Обсуждаем, что делать, если разметку не завезли, а валидировать хочется. А также изучаем статистические методы, One-class SVM, Isolation Forest, DBSCAN и других…
Обсуждаем, что делать, если разметку не завезли, а валидировать хочется. А также изучаем статистические методы, One-class SVM, Isolation Forest, DBSCAN и других…