Aspiring Data Science – Telegram
Aspiring Data Science
385 subscribers
465 photos
12 videos
12 files
2.15K links
Заметки экономиста о программировании, прогнозировании и принятии решений, научном методе познания.
Контакт: @fingoldo

I call myself a data scientist because I know just enough math, economics & programming to be dangerous.
Download Telegram
#series #outerrange

Понравился сериальчик Внешние сферы.

"Сюжетная линия рассказывает о владельце ранчо, который борется за свою семью и землю. Помимо этого главный герой обнаружил непостижимую тайну на просторах Вайоминга. Владелец ранчо должен противостоять Великому Неизвестному, чтобы спасти семью."

https://seasonvar.one/6565-vneshnie-sfery.html
MLOps Guide by Arthur Olga, Gabriel Monteiro, Guilherme Leite and Vinicius Lima

This site is intended to be a MLOps Guide to help projects and companies to build more reliable MLOps environment. This guide should contemplate the theory behind MLOps and an implementation that should fit for most use cases.

What is MLOps?
MLOps is a methodology of operation that aims to facilitate the process of bringing an experimental Machine Learning model into production and maintaining it efficiently. MLOps focus on bringing the methodology of DevOps used in the software industry to the Machine Learning model lifecycle.

In that way we can define some of the main features of a MLOPs project:
- Data and Model Versioning
- Feature Management and Storing
- Automation of Pipelines and Processes
- CI/CD for Machine Learning
- Continuous Monitoring of Models

What does this guide cover?
- Introduction to MLOps Concepts
- Tutorial for Building a MLOps Environment

Link: Direct

Navigational hashtags: #armknowledgesharing #armguides
General hashtags: #mlops #ml #operations

@data_science_weekly
#cuda

"Cписок возможностей, которые предлагаются свежим драйвером Nvidia R555 для графических процессоров GeForce RTX и ПК с RTX:

поддержка метакоманды DQ-GEMM для обработки квантования INT4 только по весу для LLM;
новые методы нормализации RMSNorm для моделей Llama 2, Llama 3, Mistral и Phi-3;
механизмы группового и многозапросного внимания, а также внимания скользящего окна для поддержки Mistral;
обновления KV для улучшения внимания;
поддержка GEMM-тензоров, не кратных 8, для улучшения производительности контекстной фазы.

Благодаря методам оптимизации, добавленным в это обновление, производительность больших языковых моделей Phi-3, Llama 3, Gemma и Mistral увеличивается до трёх раз."

https://3dnews.ru/1105200/posledniy-drayver-nvidia-vtroe-povishaet-iiproizvoditelnost-geforce-rtx-a-takge-pk-i-rabochih-stantsiy-s-poddergkoy-rtx
#hardware #cloud #rocm

"В составе одной виртуальной машины объединены восемь ускорителей со 192 Гбайт памяти HBM3, соединённых между собой посредством Infinity Fabric 3.0, а с хостом — по PCIe 5.0. Таким образом, общий объём HBM3 достигает 1,5 Тбайт, а пропускная способность — 5,3 Тбайт/с..

Виртуальные машины ND MI300X v5 используют открытую программную платформу AMD ROCm, которая предоставляет полный набор инструментов и библиотек для разработки и развёртывания ИИ. Платформа ROCm поддерживает популярные фреймворки, такие как TensorFlow и PyTorch, а также ИИ-библиотеки Microsoft, включая ONNX Runtime, DeepSpeed ​​и MSCCL.

Компания Hugging Face портировала свои модели на ND MI300X v5 без какого-либо изменения кода. Это позволило увеличить производительность в 2–3 раза по сравнению с AMD Instinct MI250."

https://servernews.ru/1105188
#wisdom

Failure after long perseverance is much grander than never to
have a striving good enough to be called a failure.

—George Eliot
#wisdom

What’s important is that you have faith in people, that they’re
basically good and smart, and if you give them tools, they’ll do
wonderful things with them.

—Steve Jobs
#wisdom

Failures are fingerposts on the road to achievement.

—C. S. Lewis
#wisdom

Opportunity is missed by most people because it is dressed in
overalls and looks like work.

—Thomas Edison
Размышления о качестве признаков в ML, будет полезно новичкам.

https://towardsdatascience.com/characteristics-of-a-good-feature-4f1ac7a90a42
👍1
Aspiring Data Science
#trading #investing #deposit #buyandhold Посмотрел текущие ставки депозита. Если положить 1 млн в Сбербанк (под 10% годовых), через 4 года можно забрать примерно 1.5 млн, т.е. 0,5 млн прибыли. Отматываем 4 года назад, вкладываем этот лям поровну во все акции…
#trading

Написал более строгую симуляцию Buy&Hold ММВБ за посл 10 лет.

Здесь, если тикер исчезал, предполагалось что его позицию удалось закрыть по последней известной цене. Комиссии учтены (0,04% брокер и 0,03% биржа).

Среднегодовая доходность действительно >40%, если готовы терпеть просадки под 40% длиной в полтора года.

Уточню, что это портфель из всех российских акций на ММВБ в равных долях c ежедневной ребалансировкой: а что было бы, если б я вложил 1 миллион рублей в фондовый рынок в 2013-м году (и робот бы каждый день поддерживал равные веса по всем акциям портфеля).

Правда, для реалистичности надо бы учесть поправку на курс рубля к доллару.
🤯1
#astronomy #voyager

"Информацию передали два научных прибора — магнитометр и датчик плазмы. Для первого в истории человечества зонда за пределами гелиосферы — это бесценная информация. Вскоре команда миссии обещает запустить в работу ещё два инструмента на борту аппарата.

Сегодня «Вояджер-1» и «Вояджер-2» являются самыми дальними разведчиками земной цивилизации. Обоим им в конце этого года стукнет по 47 лет. Это два самых старых действующих аппарата NASA. Удивительно даже то, что они всё ещё продолжают собирать научные данные и, в принципе, сохраняют работоспособность."

https://3dnews.ru/1105291/voyadger1-perestal-bredit-i-vpervie-za-polgoda-prislal-na-zemlyu-nauchnie-dannie
🤯2
#energy

"Последние 45 суток штат ежедневно живёт с превышением выработки электрической энергии из возобновляемых источников над спросом. Излишки либо оседают в аккумуляторах, либо экспортируются в другие штаты. «Это не аномалия, — заявляют аналитики. — Это новая реальность!»"

https://3dnews.ru/1105341/kaliforniya-bolshe-mesyatsa-obhoditsya-odnoy-tolko-vozobnovlyaemoy-energiey-i-eshchyo-prodayot-izlishki
🔥3
#doge

"Знаменитая собака японской породы сиба-ину по кличке Кабосу, ставшая вирусным интернет-мемом «Доге» в начале 2010-х годов и впоследствии символом криптовалюты Dogecoin (DOGE), скончалась 24 мая в возрасте 18,5 лет. Сообщается, что Кабосу был самым пожилым представителем своей породы.

Об этом печальном известии сообщила в своем аккаунте в X команда разработчиков Dogecoin. По их словам, Кабосу мирно ушла из жизни на руках у своей хозяйки. Разработчики отметили огромное влияние этой собаки на весь мир, и то, что она знала в своей жизни только счастье и любовь.

«Ее улыбка, виляние хвостом и ее тепло всегда будут со мной», — написала владелица Кабосу, Ацуко Сато (Atsuko Sato), в своём блоге, и сообщила, что прощальная церемония состоится 29 мая с 13:00 до 16:00 по местному времени в цветочном магазине «Каори» в городе Нарита (Япония).

Ацуко Сато приютила Кабосу в 2008 году, забрав собаку из приюта, который владельцы собирались закрыть, а оставшимся питомцам грозило усыпление. Кабосу повезло найти хозяев, она стала жить дома с тремя кошками. Когда Сато узнала, что фото ее сиба-ину завирусилось в западных соцсетях, она начала чаще публиковать фото Кабосу в своём блоге. Также хозяйка рассказывала, что благодаря популярности её собаки люди стали чаще брать собак из приютов."

https://3dnews.ru/1105367/sobaka-po-klichke-kabosu-litso-mema-kriptovalyuti-dogecoin-doge-umerla
#music #gothic

Под эту музыку неплохо тренироваться )

I'm giving into the absence that has become my life,
Has become my state of mind.
I'm giving into the absence that has become my life,
Has become what I could find.

I went searching for something inside
I needed all of this time
I went searching for something inside
And I never returned


https://www.youtube.com/watch?v=1LAeiXH4k3c
#energy


"В часы пиковой выработки солнечной энергии, её производители вынуждены снижать цены в разы, чтобы хоть как-то реализовать избыток. Так, за последние 10 дней производители вынуждены были снижать цены на электроэнергию в пиковые часы на 87 %, то есть до 9,1 евро за 1 МВт·ч по сравнению с ценой в 70,6 евро в вечернее и ночное время.

По словам аналитика SEB Бьярне Шилдропа (Bjarne Schieldrop), такая ситуация возникла из-за рекордного ввода в эксплуатацию новых солнечных мощностей в 2023 году. К концу прошлого года общая мощность солнечной генерации в Германии достигла 81,7 ГВт, тогда как средняя нагрузка потребления составила 52,2 ГВт.
Вообще дисбаланс спроса и предложения не является новой проблемой для Германии, и не только этот регион сталкивается с этим. В прошлом году европейский рынок в целом активно устанавливал солнечные мощности из-за прекращения поставок ресурсов из России. Избыток зеленой энергии, усугубляемый активной установкой новых ветряных турбин и атомной энергетики, уже спровоцировал неоднократные случаи падения цен в разных регионах Европы."

https://3dnews.ru/1105389/izbitok-solnechnih-batarey-v-germanii-privyol-k-snigeniyu-tsen-na-elektroenergiyu-na-87-