Forwarded from asisakov
Статзначимость коэффициентов при регрессии
Вчера спорили с ребятами на работе по поводу статзначимости и как ее считать. После вопроса про оценку значимости коэффициента я ожидал услышать что-то типа бутстрапирования выборки.
Однако, ребята вспомнили интересную формулу из книжки по эконометрике (Jeffrey M. Wooldridge. Introductory Econometrics. A modern approach). Вот та самая формула ниже:
При помощи нее мы оениваем дисперсию, и затем можем поглядеть, попадает ли 0 в доверительный интервал, и насколько узок или широк этот самый доверительный интервал.
Но самое интересное еще впереди. Что меня уже зацепило, так это формулировка одной из переменных данной формулы: оценка R^2 от оценки регрессии этого признака j на остальных. Что-то напоминает?
Действительно, это оказался тот самый VIF. Если мы спустимся от этой формулы (в книжке это формула 3.51 на странице 94) ниже на 4 страницы, мы реально увидим переход к этой формулировке:
К чему это я: За счет отбора признаков по VIF перед обучением регрессии на них, мы можем добиться повышенной вероятности того, что все наши признаки будут статзначимы для модели. Вот такое небольшое наблюдение.
#ml #statistics
Вчера спорили с ребятами на работе по поводу статзначимости и как ее считать. После вопроса про оценку значимости коэффициента я ожидал услышать что-то типа бутстрапирования выборки.
Однако, ребята вспомнили интересную формулу из книжки по эконометрике (Jeffrey M. Wooldridge. Introductory Econometrics. A modern approach). Вот та самая формула ниже:
Var(beta_j) = sigma^2 / (SST_j * (1 - R_j^2 )) - уравнение для оценки дисперсии признака j
sigma^2 - дисперсия ошибки
SST_j = sum((x_ij - mean(x_j))^2) - суммарная дисперсия выборки по признаку j
R_j^2 - оценка R^2 от оценки регрессии этого признака j на остальных
При помощи нее мы оениваем дисперсию, и затем можем поглядеть, попадает ли 0 в доверительный интервал, и насколько узок или широк этот самый доверительный интервал.
Но самое интересное еще впереди. Что меня уже зацепило, так это формулировка одной из переменных данной формулы: оценка R^2 от оценки регрессии этого признака j на остальных. Что-то напоминает?
Действительно, это оказался тот самый VIF. Если мы спустимся от этой формулы (в книжке это формула 3.51 на странице 94) ниже на 4 страницы, мы реально увидим переход к этой формулировке:
Var(beta_j) = (sigma^2 / SST_j) * VIF_j
К чему это я: За счет отбора признаков по VIF перед обучением регрессии на них, мы можем добиться повышенной вероятности того, что все наши признаки будут статзначимы для модели. Вот такое небольшое наблюдение.
#ml #statistics
👍1
#gpt #physics
Так и модель 4о не так плоха в решении задач, оказывается.
https://www.youtube.com/watch?v=m6nZ9h7S7nw
Так и модель 4о не так плоха в решении задач, оказывается.
https://www.youtube.com/watch?v=m6nZ9h7S7nw
#skipthis
Пополнился мой список вещей, которые не должны существовать:
1) благодарности в книге
2) сноски в книге или статье
3) фраза "withouth further ado"
Пополнился мой список вещей, которые не должны существовать:
1) благодарности в книге
2) сноски в книге или статье
3) фраза "withouth further ado"
😁3
#intel
Sic transit gloria mundi.
https://3dnews.ru/1111319/the-wall-street-journal-qualcomm-obratilas-k-intel-s-predlogeniem-eyo-kupit
Sic transit gloria mundi.
https://3dnews.ru/1111319/the-wall-street-journal-qualcomm-obratilas-k-intel-s-predlogeniem-eyo-kupit
3DNews - Daily Digital Digest
Qualcomm предложила купить Intel целиком, но состоится ли «сделка века», пока неизвестно
Компания Qualcomm на днях обратилась к Intel с предложением её купить, пишет издание The Wall Street Journal, ссылаясь на источники, близкие к этому вопросу. В начале этого месяца сообщалось, что Qualcomm рассматривает возможность покупки части бизнеса Intel…
#astronomy
Маск подгадил астрономам.
https://3dnews.ru/1111269/sputnikovaya-set-starlink-ilona-maska-blokiruet-obzor-vselennoy-zayavili-uchyonie
Маск подгадил астрономам.
https://3dnews.ru/1111269/sputnikovaya-set-starlink-ilona-maska-blokiruet-obzor-vselennoy-zayavili-uchyonie
3DNews - Daily Digital Digest
Астрономы в панике: свежие спутники Starlink создают в 32 раза больше помех радиотелескопам, чем старые
Этим летом астрономы из Нидерландского института радиоастрономии (ASTRON) на сутки запустили один из лучших в мире радиотелескопов LOFAR и были шокированы. Новые версии спутников интернет-связи Starlink буквально ослепили сверхчувствительное оборудование.…
Forwarded from Пездуза
⚡️У Медведева взорвался электрический штопор
#harware #ti #gpt
"Энтузиаст модифицировал популярный среди учащихся графический калькулятор Texas Instruments TI-84, встроив в него Wi-Fi-модуль для доступа к интернету и ChatGPT.
Сначала энтузиаст изучил порт связи калькулятора, который обычно используется для передачи образовательных программ между устройствами. Затем он спроектировал собственную печатную плату, названную TI-32. Ключевым компонентом платы стал миниатюрный Wi-Fi-контроллер Seed Studio ESP32-C3 стоимостью около $5. Также он установил дополнительные электронные компоненты для взаимодействия с системами калькулятора.
Для воспроизведения работы ChromaLock потребуется приобрести калькулятор TI-84, микроконтроллер Seed Studio ESP32-C3 и ряд электронных компонентов. Кроме того, придётся изготовить печатную плату по схеме ChromaLock, которая доступна в интернете. Сложность процесса делает его малодоступным для обычных пользователей, но открывает возможности для энтузиастов.
В ходе разработки ChromaLock столкнулся с рядом инженерных проблем, включая несовместимость напряжений и нарушения целостности сигнала. После создания нескольких прототипов ему удалось успешно интегрировать модифицированную плату в корпус калькулятора без видимых внешних изменений, что делает модификацию незаметной при визуальном осмотре."
https://youtu.be/Bicjxl4EcJg
"Энтузиаст модифицировал популярный среди учащихся графический калькулятор Texas Instruments TI-84, встроив в него Wi-Fi-модуль для доступа к интернету и ChatGPT.
Сначала энтузиаст изучил порт связи калькулятора, который обычно используется для передачи образовательных программ между устройствами. Затем он спроектировал собственную печатную плату, названную TI-32. Ключевым компонентом платы стал миниатюрный Wi-Fi-контроллер Seed Studio ESP32-C3 стоимостью около $5. Также он установил дополнительные электронные компоненты для взаимодействия с системами калькулятора.
Для воспроизведения работы ChromaLock потребуется приобрести калькулятор TI-84, микроконтроллер Seed Studio ESP32-C3 и ряд электронных компонентов. Кроме того, придётся изготовить печатную плату по схеме ChromaLock, которая доступна в интернете. Сложность процесса делает его малодоступным для обычных пользователей, но открывает возможности для энтузиастов.
В ходе разработки ChromaLock столкнулся с рядом инженерных проблем, включая несовместимость напряжений и нарушения целостности сигнала. После создания нескольких прототипов ему удалось успешно интегрировать модифицированную плату в корпус калькулятора без видимых внешних изменений, что делает модификацию незаметной при визуальном осмотре."
https://youtu.be/Bicjxl4EcJg
YouTube
I Made The Ultimate Cheating Device
don't let any of your teachers see this.
==== SPONSORSHIP AND BUSINESS INQUIRIES ====
chromalock@intheblackmedia.com
Keith Sachs: @KeithSachs
patreon: https://patreon.com/ChromaLock
:)
==== SPONSORSHIP AND BUSINESS INQUIRIES ====
chromalock@intheblackmedia.com
Keith Sachs: @KeithSachs
patreon: https://patreon.com/ChromaLock
:)
#ecology #law
"Изначально AT&T согласилась изъять кабели со дна в 2021 году, но практически сразу приостановила процесс и наняла девять экспертов, которые в один голос заявили, что никакой угрозы нет. Но в итоге AT&T решила не связываться с защитниками природы. Её представители заявили, что хотя компания уверены в безопасности кабелей, она всё же намерена придерживаться изначальных обещаний, касающихся озера Тахо.
В прошлом году издание The Wall Street Journal провело расследование, выявившее, что AT&T, Verizon и другие американские телеком-компании загрязняют воды и земли США — их кабели со свинцовыми оболочками оставлены без присмотра как на суше, так и под водой. Всего исследователи собрали около 130 образцов с мест пролегания кабелей по всей стране. Оценка состояния почв и воды проводилась несколькими независимыми лабораториями — образцы были признаны токсичными. Всего было выявлено около 2 тыс. кабелей.
Сами операторы утверждали, что многие кабели до сих пор используются, в том числе экстренными службами, и их эксплуатация не противоречит местным законам. Впоследствии против Verizon и AT&T были поданы коллективные иски, где операторов обвинили в сокрытии данных о принадлежащих им токсичных кабелях. А уже в 2024 года проблемой заинтересовалось Агентство по охране окружающей среды США (EPA)"
https://servernews.ru/1111354
"Изначально AT&T согласилась изъять кабели со дна в 2021 году, но практически сразу приостановила процесс и наняла девять экспертов, которые в один голос заявили, что никакой угрозы нет. Но в итоге AT&T решила не связываться с защитниками природы. Её представители заявили, что хотя компания уверены в безопасности кабелей, она всё же намерена придерживаться изначальных обещаний, касающихся озера Тахо.
В прошлом году издание The Wall Street Journal провело расследование, выявившее, что AT&T, Verizon и другие американские телеком-компании загрязняют воды и земли США — их кабели со свинцовыми оболочками оставлены без присмотра как на суше, так и под водой. Всего исследователи собрали около 130 образцов с мест пролегания кабелей по всей стране. Оценка состояния почв и воды проводилась несколькими независимыми лабораториями — образцы были признаны токсичными. Всего было выявлено около 2 тыс. кабелей.
Сами операторы утверждали, что многие кабели до сих пор используются, в том числе экстренными службами, и их эксплуатация не противоречит местным законам. Впоследствии против Verizon и AT&T были поданы коллективные иски, где операторов обвинили в сокрытии данных о принадлежащих им токсичных кабелях. А уже в 2024 года проблемой заинтересовалось Агентство по охране окружающей среды США (EPA)"
https://servernews.ru/1111354
ServerNews - все из мира больших мощностей
AT&T с неохотой согласилась извлечь десятки тонн свинца со дна озера Тахо
Американский телеком-оператор AT&T согласился изъять заброшенные кабели в свинцовой оболочке, приведшие к токсичному загрязнению озера Тахо (Tahoe). По данным Datacenter Dynamics, компания достигла судебного соглашения с природоохранной группой California…
Forwarded from rafanalytics
Лайфхак: как поменять отношение к нелюбимой работе при помощи долгосрочной пользы ❤️
Пару недель назад мой руководитель сказал мне, что нужно «думать на несколько шагов вперёд». Хоть это и было в другом контексте, тем не менее я задумался о том, насколько сильно это помогло мне преуспеть в работе))
Поясняю на примере:
Когда я работал куратором в онлайн-школе и преподавал информатику, то заметил как сильно отличается отношение к своей работе у разных кураторов. Особенно запомнилось, что часть из кураторов жаловалась на штрафы, маленькую ЗП и сложных учеников 😭
Я конечно понимал, что сильного карьерного роста мне тут ничего не пророчит, но тем не менее видел в такой ситуации возможность обрести опыт работы с клиентами, научиться объяснять "сложное" простым языком и менторить людей самых разных темпераментов. Проще говоря, я нашёл в таком деле другие "корыстные" для себя бенефиты помимо обычной ЗП, которые очень сильно драйвили меня в процессе работы и помогли добиться нереальных результатов с учениками. Вследствие этого я проработал там целых два года (и в том числе полгода совмещая с работой в Яндексе), забрал оттуда лучшие практики и полезные навыки, а потом и вовсе создал этот замечательный канал😇
И вот что получается глобально при таком подходе: пока кто-то грустит и бездушно меняет своё время на деньги, ты с огнём в глазах красиво шагаешь к своей цели и получаешь кучу других бенефитов даже на самой обычной работе 🥷
Мои знакомые знают, что я и по сей день часто вписываюсь работать/заниматься чем-то за "бесплатно", а это в свою очередь вызывает большое удивление. Так вот и делаю я это потому, что вижу в чём-то пользу/опыт для себя, о чём и тебе советую задуматься.
И вот частый пример, с которым ко мне обращаются: даже если ты обычный студент и думаешь, что работаешь/занимаешься какой-то хернёй, то стоит задуматься о долгосрочной пользе этого дела для тебя, и скорее всего твоё отношение к нему сильно поменяется в лучшую сторону😍
Я не очень хочу, чтобы пост напоминал умную цитату про то, что "надо искать возможности повсюду", но блин, это ведь действительно так получается и работает))
Пару недель назад мой руководитель сказал мне, что нужно «думать на несколько шагов вперёд». Хоть это и было в другом контексте, тем не менее я задумался о том, насколько сильно это помогло мне преуспеть в работе))
Поясняю на примере:
Когда я работал куратором в онлайн-школе и преподавал информатику, то заметил как сильно отличается отношение к своей работе у разных кураторов. Особенно запомнилось, что часть из кураторов жаловалась на штрафы, маленькую ЗП и сложных учеников 😭
Я конечно понимал, что сильного карьерного роста мне тут ничего не пророчит, но тем не менее видел в такой ситуации возможность обрести опыт работы с клиентами, научиться объяснять "сложное" простым языком и менторить людей самых разных темпераментов. Проще говоря, я нашёл в таком деле другие "корыстные" для себя бенефиты помимо обычной ЗП, которые очень сильно драйвили меня в процессе работы и помогли добиться нереальных результатов с учениками. Вследствие этого я проработал там целых два года (и в том числе полгода совмещая с работой в Яндексе), забрал оттуда лучшие практики и полезные навыки, а потом и вовсе создал этот замечательный канал
И вот что получается глобально при таком подходе: пока кто-то грустит и бездушно меняет своё время на деньги, ты с огнём в глазах красиво шагаешь к своей цели и получаешь кучу других бенефитов даже на самой обычной работе 🥷
Мои знакомые знают, что я и по сей день часто вписываюсь работать/заниматься чем-то за "бесплатно", а это в свою очередь вызывает большое удивление. Так вот и делаю я это потому, что вижу в чём-то пользу/опыт для себя, о чём и тебе советую задуматься.
И вот частый пример, с которым ко мне обращаются: даже если ты обычный студент и думаешь, что работаешь/занимаешься какой-то хернёй, то стоит задуматься о долгосрочной пользе этого дела для тебя, и скорее всего твоё отношение к нему сильно поменяется в лучшую сторону
Я не очень хочу, чтобы пост напоминал умную цитату про то, что "надо искать возможности повсюду", но блин, это ведь действительно так получается и работает))
Please open Telegram to view this post
VIEW IN TELEGRAM
👍1
#fun #fantasy #math
"- Сэр царь, - обратился Принц к Соломону, - может быть, ваш знаменитый суд определит между мной и сэром Джихаром сильнейшего? Хотелось бы выяснить это до того, как мы окажемся снова среди людей, чтобы каждый из нас мог вести себя соответственно своему рангу.
- Извольте, - сказал царь Соломон, словно век ждал этого вопроса. - Я так думаю, тот из вас сильнее, кто сможет дольше пронести меня по дороге.
Китоврас тут заржал по-лошадиному.
- Но почему именно вас, сэр царь?
- А что, вы предпочитаете нести Китовраса?
Метнули жребий. Первому выпало Принцу, меч его и арбалет переложили на кентавроса. Шлем царь Соломон потребовал оставить, потому что за рога ему будет удобно держаться. Жихарь вызвался считать шаги и пошел сбоку.
***
Из смотровой щели в шлеме Принца повалил пар. Пар был горячий, и венценосный седок подобрал ноги. Уже и богатырь налегке притомился, а Яр-Тур все топал и топал. Пыхтел он так громко, что других звуков словно бы и не существовало. Но даже и птицы в лесу стихли, наблюдая состязание.
Наконец, к удовольствию Жихаря, шаги Принца стали реже, а царь на его плечах подозрительно закачался. Яр-Тур остановился, медленно опустился на колени и ткнулся рогами в пыль.
Царь перешагнул через его голову, отошел к обочине и вопросительно поглядел на Жихаря.
- Сколько вы насчитали, молодой человек?
Жихарь разинул рот. Вразумительного ответа он не мог дать по двум причинам: во-первых, путал всегда пятьдесят и шестьдесят, а во-вторых, все равно сбился, отвлекаемый размышлениями о своей неизбежной победе. Богатырь покраснел, замычал и стал что-то объяснять исключительно на пальцах.
Принц Яр-Тур лежал без памяти и не мог дать дельного совета.
Наконец Жихаря осенило:
- Раз так, я тебя назад потащу, тогда и считать ничего не надо будет! Не ошибемся!
Царь попробовал было возражать, но Китоврас закивал согласно головой, да и очнувшийся Принц простонал, что не к лицу благородному воителю знать какие-то там числа, а дорога не обманет."
М. Успенский. Там, где нас нет
"- Сэр царь, - обратился Принц к Соломону, - может быть, ваш знаменитый суд определит между мной и сэром Джихаром сильнейшего? Хотелось бы выяснить это до того, как мы окажемся снова среди людей, чтобы каждый из нас мог вести себя соответственно своему рангу.
- Извольте, - сказал царь Соломон, словно век ждал этого вопроса. - Я так думаю, тот из вас сильнее, кто сможет дольше пронести меня по дороге.
Китоврас тут заржал по-лошадиному.
- Но почему именно вас, сэр царь?
- А что, вы предпочитаете нести Китовраса?
Метнули жребий. Первому выпало Принцу, меч его и арбалет переложили на кентавроса. Шлем царь Соломон потребовал оставить, потому что за рога ему будет удобно держаться. Жихарь вызвался считать шаги и пошел сбоку.
***
Из смотровой щели в шлеме Принца повалил пар. Пар был горячий, и венценосный седок подобрал ноги. Уже и богатырь налегке притомился, а Яр-Тур все топал и топал. Пыхтел он так громко, что других звуков словно бы и не существовало. Но даже и птицы в лесу стихли, наблюдая состязание.
Наконец, к удовольствию Жихаря, шаги Принца стали реже, а царь на его плечах подозрительно закачался. Яр-Тур остановился, медленно опустился на колени и ткнулся рогами в пыль.
Царь перешагнул через его голову, отошел к обочине и вопросительно поглядел на Жихаря.
- Сколько вы насчитали, молодой человек?
Жихарь разинул рот. Вразумительного ответа он не мог дать по двум причинам: во-первых, путал всегда пятьдесят и шестьдесят, а во-вторых, все равно сбился, отвлекаемый размышлениями о своей неизбежной победе. Богатырь покраснел, замычал и стал что-то объяснять исключительно на пальцах.
Принц Яр-Тур лежал без памяти и не мог дать дельного совета.
Наконец Жихаря осенило:
- Раз так, я тебя назад потащу, тогда и считать ничего не надо будет! Не ошибемся!
Царь попробовал было возражать, но Китоврас закивал согласно головой, да и очнувшийся Принц простонал, что не к лицу благородному воителю знать какие-то там числа, а дорога не обманет."
М. Успенский. Там, где нас нет