DE – Telegram
523 subscribers
313 photos
81 videos
15 files
406 links
Data Engineering Technologies.
SQL, Python, Kafka, Spark, Pandas, Airflow, Clickhouse, Greenplum, Postgres, dbt, LLM agentic systems, AI, robots, drones etc.

Boost channel - https://news.1rj.ru/str/boost/data_engi
Download Telegram
Сиолошная
Лёд тронулся, господа — WIRED пишет, что Meta планирует позволить кандидатам использовать ИИ во время собеседований по программированию. — начать планируется не со всех должностей, требующих навыки программирования — компания также предлагает существующим…
ИИ на интервью — это не шорткат, а приближение к реальной среде: мы ведь с ИИ и работаем. Если ты не можешь дебажить, понимать чужой код и делать фичи в команде — ты и с GPT далеко не уедешь. Поэтому хорошо, что Meta двигает планку туда, где уже давно живут хорошие команды вне FAANG.

#ai #llm #interview
❤‍🔥6
Дорога жуков
Банк работает по принципу частичного резервирования. То есть, банк обязан в любой момент времени иметь денег для выдачи вкладчикам не менее ИКС процентов. Допустим, 10%. Клиент 1 положил в банк 100 рублей. Клиент 2 взял в кредит 90 рублей. 10 рублей осталось в банке - то самое частичное резервирование.

Далее оба клиента планируют свои покупки. 1й опирается на наличие у него резерва в 100 рублей. 2й - на наличие кредита в 90 рублей. То есть, они создают такой суммарный спрос, как будто у них на двоих есть 190 рублей. Количество товаров при этом не выросло от выдачи кредита. А спрос вырос. Это и есть инфляция.

На практике, все сложнее. Клиентов миллиарды. Банков тысячи. Деньги перемещаются по сложным маршрутам. Но если ваша интуиция подсказывает вам, что при масштабировании такого простого примера ничего доброго не выйдет, то ваша интуиция права. Финансовая грамотность не менее важна, чем техническая. Заработать ЗП это только полдела. Вторая половина - сохранить заработанное.
Если не будешь держать резерв мощностей и данных, нагрузка всегда догонит и перегонит твои ресурсы, а система "проинфлирует" точно так же, как деньги на примере банкинга.

#banking #de #se
❤‍🔥41
Про дедлайны. Узнал себя?)

#meme #dev
😁73
Forwarded from Not Boring Tech
🐇 Наткнулся на самую красивую книгу по Deep Learning — «Приключения Алисы в дифференцируемой стране чудес». Это лучшее введение в устройство нейронок, которое я видел.

281 страница отправляет в мир глубокого обучения не просто через текст, а через наглядные визуализации, иллюстрации, сторителлинг, теорию, исторические справки, формулы и примеры кода.

Кладём в сохраненки — тут.

P.S. Кто найдёт или сделает перевод книги на русский и пришлёт в комменты — отправлю подарок за 100 звёзд.

UPD. Читатель сделал перевод — PDF в комментах.

@notboring_tech
9
This media is not supported in your browser
VIEW IN TELEGRAM
🎯 Одна из самых красивых идей в математике — вычисление площади фигуры с помощью случайных точек

Не верится, что такое возможно?
Смотри на анимацию ниже: мы бросаем случайные точки в квадрат и считаем, сколько из них попали в круг.
Так можно приближённо вычислить площадь круга — а значит и значение π!

🔍 Как это работает:
1. Берём квадрат, в который вписан круг (например, единичный)
2. Бросаем N случайных точек в квадрат
3. Считаем, сколько из них попало внутрь круга
4. Отношение количества «внутренних» точек к общему числу даёт приближение площади круга

👉 Это называется метод Монте‑Карло — простой, но мощный инструмент для численных приближений.

@data_math

#math #geometry #montecarlo #visualmath
8❤‍🔥3
1😁10
Архитектор и три его джуна осматривают озеро данных, почти превращенное в болото.

Усадьба Кусково.
😁16👏2❤‍🔥11
This media is not supported in your browser
VIEW IN TELEGRAM
Полезное применение железных гуманоидов.

#ai #robotics
16❤‍🔥1👏1
4 столпа robust-моделирования данных

1️⃣ Масштабируемость - слоистая архитектура, чёткие границы.

2️⃣ Переиспользуемость - модульные модели и общие макросы.

3️⃣ Производительность - материализации, инкременты, партиции.

4️⃣ Качество - тесты, свежесть, наблюдаемость.

Делай данные как софт: маленькие блоки, общие стандарты, строгие контракты.

#de #data #dbt #analytics
Please open Telegram to view this post
VIEW IN TELEGRAM
16
1😁9
Мобильная версия сайта поликлиники. Навязчивый чат накрывает крестик закрытия меню - записаться к врачу невозможно.

Жена: "Смотри, у них CI сломан"
Я: "Не CI, а UX"

upd: семейная профдеформация 🙃

#dev #meme #life
Please open Telegram to view this post
VIEW IN TELEGRAM
😁81
This media is not supported in your browser
VIEW IN TELEGRAM
🔥 Unitree A2 Stellar Hunter - новая звезда среди четвероногих роботов.

⚡️ Вес — всего 37 кг
🚀 Запас хода без груза — до 20 км

Он стал ещё легче, прочнее и быстрее.
Создан для промышленных миссий, где критичны:
🔘автономность
🔘манёвренность
🔘надёжность

Машина, которая уверенно шагает в будущее.

#robotics
Please open Telegram to view this post
VIEW IN TELEGRAM
6
В закладки. Хорошая сводная статья о всех RFC, связанных с OAuth 2.0. Там прям много чего навертели. Я хоть и разрабатывал несколько раз провайдер для этой штуки, но о половине стандартов даже не слышал.

https://habr.com/ru/articles/899874/ #dev
👏6😁1
😁8