#stats #distributions #lognormal
Введение в подгонку распределений. Почему выбросы логнормального распределения так сильно удалены друг от друга?
youtube.com/watch?v=44D1bd7tQ4w
Введение в подгонку распределений. Почему выбросы логнормального распределения так сильно удалены друг от друга?
youtube.com/watch?v=44D1bd7tQ4w
YouTube
Allen Downey - Extremes, outliers, and GOATS: on life in a lognormal world | PyData Global 2023
www.pydata.org
The fastest runners are much faster than we expect from a Gaussian distribution, and the best chess players are much better. In almost every field of human endeavor, there are outliers who stand out even among the most talented people in the…
The fastest runners are much faster than we expect from a Gaussian distribution, and the best chess players are much better. In almost every field of human endeavor, there are outliers who stand out even among the most talented people in the…
Forwarded from asisakov
Статзначимость коэффициентов при регрессии
Вчера спорили с ребятами на работе по поводу статзначимости и как ее считать. После вопроса про оценку значимости коэффициента я ожидал услышать что-то типа бутстрапирования выборки.
Однако, ребята вспомнили интересную формулу из книжки по эконометрике (Jeffrey M. Wooldridge. Introductory Econometrics. A modern approach). Вот та самая формула ниже:
При помощи нее мы оениваем дисперсию, и затем можем поглядеть, попадает ли 0 в доверительный интервал, и насколько узок или широк этот самый доверительный интервал.
Но самое интересное еще впереди. Что меня уже зацепило, так это формулировка одной из переменных данной формулы: оценка R^2 от оценки регрессии этого признака j на остальных. Что-то напоминает?
Действительно, это оказался тот самый VIF. Если мы спустимся от этой формулы (в книжке это формула 3.51 на странице 94) ниже на 4 страницы, мы реально увидим переход к этой формулировке:
К чему это я: За счет отбора признаков по VIF перед обучением регрессии на них, мы можем добиться повышенной вероятности того, что все наши признаки будут статзначимы для модели. Вот такое небольшое наблюдение.
#ml #statistics
Вчера спорили с ребятами на работе по поводу статзначимости и как ее считать. После вопроса про оценку значимости коэффициента я ожидал услышать что-то типа бутстрапирования выборки.
Однако, ребята вспомнили интересную формулу из книжки по эконометрике (Jeffrey M. Wooldridge. Introductory Econometrics. A modern approach). Вот та самая формула ниже:
Var(beta_j) = sigma^2 / (SST_j * (1 - R_j^2 )) - уравнение для оценки дисперсии признака j
sigma^2 - дисперсия ошибки
SST_j = sum((x_ij - mean(x_j))^2) - суммарная дисперсия выборки по признаку j
R_j^2 - оценка R^2 от оценки регрессии этого признака j на остальных
При помощи нее мы оениваем дисперсию, и затем можем поглядеть, попадает ли 0 в доверительный интервал, и насколько узок или широк этот самый доверительный интервал.
Но самое интересное еще впереди. Что меня уже зацепило, так это формулировка одной из переменных данной формулы: оценка R^2 от оценки регрессии этого признака j на остальных. Что-то напоминает?
Действительно, это оказался тот самый VIF. Если мы спустимся от этой формулы (в книжке это формула 3.51 на странице 94) ниже на 4 страницы, мы реально увидим переход к этой формулировке:
Var(beta_j) = (sigma^2 / SST_j) * VIF_j
К чему это я: За счет отбора признаков по VIF перед обучением регрессии на них, мы можем добиться повышенной вероятности того, что все наши признаки будут статзначимы для модели. Вот такое небольшое наблюдение.
#ml #statistics
👍1
#gpt #physics
Так и модель 4о не так плоха в решении задач, оказывается.
https://www.youtube.com/watch?v=m6nZ9h7S7nw
Так и модель 4о не так плоха в решении задач, оказывается.
https://www.youtube.com/watch?v=m6nZ9h7S7nw
#skipthis
Пополнился мой список вещей, которые не должны существовать:
1) благодарности в книге
2) сноски в книге или статье
3) фраза "withouth further ado"
Пополнился мой список вещей, которые не должны существовать:
1) благодарности в книге
2) сноски в книге или статье
3) фраза "withouth further ado"
😁3
#intel
Sic transit gloria mundi.
https://3dnews.ru/1111319/the-wall-street-journal-qualcomm-obratilas-k-intel-s-predlogeniem-eyo-kupit
Sic transit gloria mundi.
https://3dnews.ru/1111319/the-wall-street-journal-qualcomm-obratilas-k-intel-s-predlogeniem-eyo-kupit
3DNews - Daily Digital Digest
Qualcomm предложила купить Intel целиком, но состоится ли «сделка века», пока неизвестно
Компания Qualcomm на днях обратилась к Intel с предложением её купить, пишет издание The Wall Street Journal, ссылаясь на источники, близкие к этому вопросу. В начале этого месяца сообщалось, что Qualcomm рассматривает возможность покупки части бизнеса Intel…
#astronomy
Маск подгадил астрономам.
https://3dnews.ru/1111269/sputnikovaya-set-starlink-ilona-maska-blokiruet-obzor-vselennoy-zayavili-uchyonie
Маск подгадил астрономам.
https://3dnews.ru/1111269/sputnikovaya-set-starlink-ilona-maska-blokiruet-obzor-vselennoy-zayavili-uchyonie
3DNews - Daily Digital Digest
Астрономы в панике: свежие спутники Starlink создают в 32 раза больше помех радиотелескопам, чем старые
Этим летом астрономы из Нидерландского института радиоастрономии (ASTRON) на сутки запустили один из лучших в мире радиотелескопов LOFAR и были шокированы. Новые версии спутников интернет-связи Starlink буквально ослепили сверхчувствительное оборудование.…
Forwarded from Пездуза
⚡️У Медведева взорвался электрический штопор
#harware #ti #gpt
"Энтузиаст модифицировал популярный среди учащихся графический калькулятор Texas Instruments TI-84, встроив в него Wi-Fi-модуль для доступа к интернету и ChatGPT.
Сначала энтузиаст изучил порт связи калькулятора, который обычно используется для передачи образовательных программ между устройствами. Затем он спроектировал собственную печатную плату, названную TI-32. Ключевым компонентом платы стал миниатюрный Wi-Fi-контроллер Seed Studio ESP32-C3 стоимостью около $5. Также он установил дополнительные электронные компоненты для взаимодействия с системами калькулятора.
Для воспроизведения работы ChromaLock потребуется приобрести калькулятор TI-84, микроконтроллер Seed Studio ESP32-C3 и ряд электронных компонентов. Кроме того, придётся изготовить печатную плату по схеме ChromaLock, которая доступна в интернете. Сложность процесса делает его малодоступным для обычных пользователей, но открывает возможности для энтузиастов.
В ходе разработки ChromaLock столкнулся с рядом инженерных проблем, включая несовместимость напряжений и нарушения целостности сигнала. После создания нескольких прототипов ему удалось успешно интегрировать модифицированную плату в корпус калькулятора без видимых внешних изменений, что делает модификацию незаметной при визуальном осмотре."
https://youtu.be/Bicjxl4EcJg
"Энтузиаст модифицировал популярный среди учащихся графический калькулятор Texas Instruments TI-84, встроив в него Wi-Fi-модуль для доступа к интернету и ChatGPT.
Сначала энтузиаст изучил порт связи калькулятора, который обычно используется для передачи образовательных программ между устройствами. Затем он спроектировал собственную печатную плату, названную TI-32. Ключевым компонентом платы стал миниатюрный Wi-Fi-контроллер Seed Studio ESP32-C3 стоимостью около $5. Также он установил дополнительные электронные компоненты для взаимодействия с системами калькулятора.
Для воспроизведения работы ChromaLock потребуется приобрести калькулятор TI-84, микроконтроллер Seed Studio ESP32-C3 и ряд электронных компонентов. Кроме того, придётся изготовить печатную плату по схеме ChromaLock, которая доступна в интернете. Сложность процесса делает его малодоступным для обычных пользователей, но открывает возможности для энтузиастов.
В ходе разработки ChromaLock столкнулся с рядом инженерных проблем, включая несовместимость напряжений и нарушения целостности сигнала. После создания нескольких прототипов ему удалось успешно интегрировать модифицированную плату в корпус калькулятора без видимых внешних изменений, что делает модификацию незаметной при визуальном осмотре."
https://youtu.be/Bicjxl4EcJg
YouTube
I Made The Ultimate Cheating Device
don't let any of your teachers see this.
==== SPONSORSHIP AND BUSINESS INQUIRIES ====
chromalock@intheblackmedia.com
Keith Sachs: @KeithSachs
patreon: https://patreon.com/ChromaLock
:)
==== SPONSORSHIP AND BUSINESS INQUIRIES ====
chromalock@intheblackmedia.com
Keith Sachs: @KeithSachs
patreon: https://patreon.com/ChromaLock
:)
#ecology #law
"Изначально AT&T согласилась изъять кабели со дна в 2021 году, но практически сразу приостановила процесс и наняла девять экспертов, которые в один голос заявили, что никакой угрозы нет. Но в итоге AT&T решила не связываться с защитниками природы. Её представители заявили, что хотя компания уверены в безопасности кабелей, она всё же намерена придерживаться изначальных обещаний, касающихся озера Тахо.
В прошлом году издание The Wall Street Journal провело расследование, выявившее, что AT&T, Verizon и другие американские телеком-компании загрязняют воды и земли США — их кабели со свинцовыми оболочками оставлены без присмотра как на суше, так и под водой. Всего исследователи собрали около 130 образцов с мест пролегания кабелей по всей стране. Оценка состояния почв и воды проводилась несколькими независимыми лабораториями — образцы были признаны токсичными. Всего было выявлено около 2 тыс. кабелей.
Сами операторы утверждали, что многие кабели до сих пор используются, в том числе экстренными службами, и их эксплуатация не противоречит местным законам. Впоследствии против Verizon и AT&T были поданы коллективные иски, где операторов обвинили в сокрытии данных о принадлежащих им токсичных кабелях. А уже в 2024 года проблемой заинтересовалось Агентство по охране окружающей среды США (EPA)"
https://servernews.ru/1111354
"Изначально AT&T согласилась изъять кабели со дна в 2021 году, но практически сразу приостановила процесс и наняла девять экспертов, которые в один голос заявили, что никакой угрозы нет. Но в итоге AT&T решила не связываться с защитниками природы. Её представители заявили, что хотя компания уверены в безопасности кабелей, она всё же намерена придерживаться изначальных обещаний, касающихся озера Тахо.
В прошлом году издание The Wall Street Journal провело расследование, выявившее, что AT&T, Verizon и другие американские телеком-компании загрязняют воды и земли США — их кабели со свинцовыми оболочками оставлены без присмотра как на суше, так и под водой. Всего исследователи собрали около 130 образцов с мест пролегания кабелей по всей стране. Оценка состояния почв и воды проводилась несколькими независимыми лабораториями — образцы были признаны токсичными. Всего было выявлено около 2 тыс. кабелей.
Сами операторы утверждали, что многие кабели до сих пор используются, в том числе экстренными службами, и их эксплуатация не противоречит местным законам. Впоследствии против Verizon и AT&T были поданы коллективные иски, где операторов обвинили в сокрытии данных о принадлежащих им токсичных кабелях. А уже в 2024 года проблемой заинтересовалось Агентство по охране окружающей среды США (EPA)"
https://servernews.ru/1111354
ServerNews - все из мира больших мощностей
AT&T с неохотой согласилась извлечь десятки тонн свинца со дна озера Тахо
Американский телеком-оператор AT&T согласился изъять заброшенные кабели в свинцовой оболочке, приведшие к токсичному загрязнению озера Тахо (Tahoe). По данным Datacenter Dynamics, компания достигла судебного соглашения с природоохранной группой California…
Forwarded from rafanalytics
Лайфхак: как поменять отношение к нелюбимой работе при помощи долгосрочной пользы ❤️
Пару недель назад мой руководитель сказал мне, что нужно «думать на несколько шагов вперёд». Хоть это и было в другом контексте, тем не менее я задумался о том, насколько сильно это помогло мне преуспеть в работе))
Поясняю на примере:
Когда я работал куратором в онлайн-школе и преподавал информатику, то заметил как сильно отличается отношение к своей работе у разных кураторов. Особенно запомнилось, что часть из кураторов жаловалась на штрафы, маленькую ЗП и сложных учеников 😭
Я конечно понимал, что сильного карьерного роста мне тут ничего не пророчит, но тем не менее видел в такой ситуации возможность обрести опыт работы с клиентами, научиться объяснять "сложное" простым языком и менторить людей самых разных темпераментов. Проще говоря, я нашёл в таком деле другие "корыстные" для себя бенефиты помимо обычной ЗП, которые очень сильно драйвили меня в процессе работы и помогли добиться нереальных результатов с учениками. Вследствие этого я проработал там целых два года (и в том числе полгода совмещая с работой в Яндексе), забрал оттуда лучшие практики и полезные навыки, а потом и вовсе создал этот замечательный канал😇
И вот что получается глобально при таком подходе: пока кто-то грустит и бездушно меняет своё время на деньги, ты с огнём в глазах красиво шагаешь к своей цели и получаешь кучу других бенефитов даже на самой обычной работе 🥷
Мои знакомые знают, что я и по сей день часто вписываюсь работать/заниматься чем-то за "бесплатно", а это в свою очередь вызывает большое удивление. Так вот и делаю я это потому, что вижу в чём-то пользу/опыт для себя, о чём и тебе советую задуматься.
И вот частый пример, с которым ко мне обращаются: даже если ты обычный студент и думаешь, что работаешь/занимаешься какой-то хернёй, то стоит задуматься о долгосрочной пользе этого дела для тебя, и скорее всего твоё отношение к нему сильно поменяется в лучшую сторону😍
Я не очень хочу, чтобы пост напоминал умную цитату про то, что "надо искать возможности повсюду", но блин, это ведь действительно так получается и работает))
Пару недель назад мой руководитель сказал мне, что нужно «думать на несколько шагов вперёд». Хоть это и было в другом контексте, тем не менее я задумался о том, насколько сильно это помогло мне преуспеть в работе))
Поясняю на примере:
Когда я работал куратором в онлайн-школе и преподавал информатику, то заметил как сильно отличается отношение к своей работе у разных кураторов. Особенно запомнилось, что часть из кураторов жаловалась на штрафы, маленькую ЗП и сложных учеников 😭
Я конечно понимал, что сильного карьерного роста мне тут ничего не пророчит, но тем не менее видел в такой ситуации возможность обрести опыт работы с клиентами, научиться объяснять "сложное" простым языком и менторить людей самых разных темпераментов. Проще говоря, я нашёл в таком деле другие "корыстные" для себя бенефиты помимо обычной ЗП, которые очень сильно драйвили меня в процессе работы и помогли добиться нереальных результатов с учениками. Вследствие этого я проработал там целых два года (и в том числе полгода совмещая с работой в Яндексе), забрал оттуда лучшие практики и полезные навыки, а потом и вовсе создал этот замечательный канал
И вот что получается глобально при таком подходе: пока кто-то грустит и бездушно меняет своё время на деньги, ты с огнём в глазах красиво шагаешь к своей цели и получаешь кучу других бенефитов даже на самой обычной работе 🥷
Мои знакомые знают, что я и по сей день часто вписываюсь работать/заниматься чем-то за "бесплатно", а это в свою очередь вызывает большое удивление. Так вот и делаю я это потому, что вижу в чём-то пользу/опыт для себя, о чём и тебе советую задуматься.
И вот частый пример, с которым ко мне обращаются: даже если ты обычный студент и думаешь, что работаешь/занимаешься какой-то хернёй, то стоит задуматься о долгосрочной пользе этого дела для тебя, и скорее всего твоё отношение к нему сильно поменяется в лучшую сторону
Я не очень хочу, чтобы пост напоминал умную цитату про то, что "надо искать возможности повсюду", но блин, это ведь действительно так получается и работает))
Please open Telegram to view this post
VIEW IN TELEGRAM
👍1