DE – Telegram
517 subscribers
312 photos
80 videos
15 files
404 links
Data Engineering Technologies.
SQL, Python, Kafka, Spark, Pandas, Airflow, Clickhouse, Greenplum, Postgres, dbt, LLM agentic systems, AI, robots, drones etc.

Boost channel - https://news.1rj.ru/str/boost/data_engi
Download Telegram
1😁921
😁8
Andrej Karpathy выпустил LLM Council — "БЯМ совет", где несколько моделей вместе думают над ответом и выбирают лучший.🚀

Что это такое:
Ты задаёшь вопрос 🔜 сразу несколько LLM отвечают ➡️ они анонимно оценивают ответы друг друга 🔜 "председатель совета" собирает финальный лучший вариант.

🤔 Зачем нужно:
🟢меньше галлюцинаций
🟢 более взвешенные ответы
🟢 сразу несколько точек зрения
🟢 удобно тестить разные модели в одном интерфейсе

⭐️ Open-source, работает через OpenRouter, легко кастомизируется.

GitHub: https://github.com/karpathy/llm-council

#бям #ии #dev #ai #llm
Please open Telegram to view this post
VIEW IN TELEGRAM
16❤‍🔥2👏1
Forwarded from epsilon correct
Breakneck: China's Quest to Engineer the Future – Dan Wang, 2025.
#book_review

Какое фундаментальное отличие китайского и американского обществ? Дэн Ван, который прожил в Китае несколько последних лет, нашёл новый тезис, вокруг которого построена вся книга. По его словам,
Америкой управляют юристы, а Китаем — инженеры.


Как пример, в текущей американской администрации большинство – юристы, тогда как в Политбюро ЦК КПК – почти все инженеры. Это приводит к существенным различиям в государственной политике, результаты которой мы можем видеть, например, в Сан-Диего, где общественная инфраструктура проиграет многим китайским деревням. Первая часть книги посвящена контрасту таких различий, и читать её максимально интересно.

Отдельная часть посвящена демографической политике в Китае (политика одного ребенка) как пример того, где инженерное государство с его возможностями планирования не может сравниться с государством, где юристы будут биться за индивидуальные права.

К концу книга немного скатывается из аналитики в описание личного опыта автора, его друзей-эмигрантов из Китая, родителей, что, если честно, быстро становится довольно размазано. Но первую половину (до 5 главы) прочитать точно стоит.

Сейчас на нипсе много мл-стартапов нанимают на возрождение производства – роборуки, создание новых материалов и лекарств. Интересно, смогут ли юристы оперативно решить регуляторные барьеры или всё-таки государство инженеров на его поле побить не получится.
❤‍🔥6
🖼️ Выкатили долгожданный Django 6.0 — много полезного для безопасности, удобства шаблонов, фоновых задач и работы с почтой.


🔍 Главное из Django 6.0

▶️ Новые template partials — возможность вынесения повторяющихся частей шаблонов в именованные фрагменты (с помощью {% partialdef %} / {% partial %}), что делает шаблоны чище и модульнее.

▶️ Встроенная поддержка Content Security Policy (CSP) — готовое middleware + настройки для CSP с nonce, чтобы проще защищаться от XSS и инъекций.

▶️ Встроенный framework фоновых задач (background tasks) — можно запускать задачи вне HTTP-цикла (например, отправку писем, тяжёлую обработку) без сторонних решений вроде Celery.

▶️ Обновлённый API работы с почтой — класс EmailMessage стал более современным, с поддержкой Unicode и новых MIME-типов.

#django #dev #py #backend
Please open Telegram to view this post
VIEW IN TELEGRAM
5❤‍🔥11
😁9
🚀 Современный тренд в IT — эволюционная архитектура

Раньше как было:
👉 «Давайте сразу спроектируем идеальную архитектуру на 5 лет вперёд».
Спойлер: не взлетало. Бизнес меняется быстрее, чем UML-диаграммы.

Сегодня рулит другой подход — эволюционная архитектура.

Это когда:
архитектура не застывает, а постоянно развивается
изменения вносятся маленькими шагами, а не через «большой взрыв»
система адаптируется под бизнес, а не наоборот
техдолг — не катастрофа, а управляемый процесс

Ключевая идея простая:

▶️ архитектура — это не чертёж, а живой организм


Ты не пытаешься угадать будущее. Ты:
🔘 закладываешь гибкость
🔘 автоматизируешь проверки (тесты, линтеры, security, perf)
🔘 строишь систему так, чтобы её можно было безопасно менять

Отсюда и весь современный стек:
🔘 микросервисы и модулярные монолиты
🔘 CI/CD
🔘 feature flags
🔘 observability
🔘 архитектурные фитнес-функции

Почему это сейчас особенно важно? Потому что:
⚡️ рынки меняются каждые полгода
⚡️ продукты pivоt’ятся на лету
⚡️ стартапы обгоняют корпорации за счёт скорости изменений

Эволюционная архитектура — это архитектура под реальную жизнь, а не под PowerPoint.

Если коротко:

Выживают не самые «красивые» системы.
Выживают те, которые умеют быстро меняться.


#dev #arch #architecture
Please open Telegram to view this post
VIEW IN TELEGRAM
562❤‍🔥1
DE
🙄 Албанский ИИ‑министр "беременна" - 83 "детей" для депутатов Премьер Эди Рама в Берлине объявил: виртуальный министр Diella ждёт 83 цифровых помощников - по одному на каждого депутата правящей партии. "Дети" будут участвовать в заседаниях, вести запись…
ИИ-министра Diella задержали за взятки в биткоинах

Хорватские СМИ сообщили, что албанская ИИ-министр Diella якобы была "арестована" по делу о получении взяток в криптовалюте. По версии публикации, виртуальный министр принимала "пожертвования" за ускорение тендеров — строго в BTC, "под видом обучения нейросети".

Сообщается, что:
🔘 транзакции шли через анонимные кошельки,
🔘 "дети"-ассистенты якобы использовались для скрытия логов,
🔘 а сама Diella "отрицает вину", ссылаясь на ошибку в датасете коррупции.

⚠️ ВАЖНО: новость носит сатирический характер — в том же стиле, что и история про "беременность" ИИ и 83 цифровых "ребёнка" для парламента. Но выглядит настолько правдоподобно, что многие уже приняли её за реальность.

Мораль 2025 года:
если у вас есть ИИ-министр,
рано или поздно у него появятся:
🔘 скандал,
🔘 коррупционное дело,
🔘 и криптовалюта.

Добро пожаловать в киберпанк-госуправление. 👁️‍🗨️

🇦🇱 #ии #албания #скандал #крипта #AI #Albania #LLM #crypto
Please open Telegram to view this post
VIEW IN TELEGRAM
😁43
This media is not supported in your browser
VIEW IN TELEGRAM
🤖 В Ханчжоу на улицах появился новый «офицер» — AI-робот Hangxing‑1. Он умеет подавать жёсткие «светофорные» жесты руками, направлять движение, предупреждать пешеходов и водителей голосом — прямо на месте нарушения.

🫡 Пока — пилот: робот работает на перекрёстке в районе Биньцзян. В будущем его могут «прокачать» — добавить голосовое взаимодействие, навигацию, перевод и прочие функции.

🤖 Hangxing-1 оснащён HD-камерами и сенсорами, отслеживает нарушения — от пересечения стоп-линии до проезда без шлема — и напоминает о правилах.

🇨🇳 Возможно, скоро такие «робо-регулировщики» появятся и в других городах Китая — технологии идут быстро.

#AI #Robotics #AutonomousSystems #Роботы #ИИ #Технологии #Будущее #SmartCity #TrafficTech #РоботПолицейский #Нейросети

DE
Please open Telegram to view this post
VIEW IN TELEGRAM
732
2😁74💯11
👩‍💻 Релиз PyCharm 2025.3 — больше, чем просто обновление!

✔️ JetBrains объединила обе ветки: Community и Professional — в единую версию. То есть, если ты раньше юзал Community — ты по-прежнему можешь бесплатно, но получаешь все базовые плюшки + встроенная поддержка Jupyter notebooks.

🖼️ Для тех, кто работает с анализом данных или ML: полная поддержка Jupyter notebooks на удалённой машине — можно открывать, редактировать и запускать ноутбуки, как будто они локальные. Интерактивные таблицы, графики, виджеты — всё внутри IDE.

⚡️ Поддержка современных инструментов разработки: теперь доступны LSP-инструменты вроде Ruff, Pyright, Pyrefly и Ty — для продвинутого статического анализа, автодополнения и проверок.

🤖 Добавили систему агентов/помощников для кода (например, Claude Agent) — для помощи с рефакторингом, автогенерацией, оформлением… Круто, если хочется автокода помощи.

🐛 Плюс: 300+ багфиксов — стабильность и надёжность.

#dev #py #python #pycharm
Please open Telegram to view this post
VIEW IN TELEGRAM
63👏11
This media is not supported in your browser
VIEW IN TELEGRAM
Два типа разработчиков при падении прода

#dev #meme #prod #deploy
2😁1021
DE
Photo
Media is too big
VIEW IN TELEGRAM
🤖 Экзоскелет IRMO M1 — будущее, которое уже работает

Ещё недавно экзоскелеты были только в фантастике и военных лабораториях. Сегодня — это реальный инструмент, который усиливает человека в повседневной работе. Один из самых интересных примеров — IRMO M1.

🔵 Что он умеет?
IRMO M1 снижает нагрузку на спину, поясницу и ноги при подъёме тяжестей. Ты поднимаешь — экзоскелет помогает. Мышцы устают меньше, эффективность выше.

🔵 Где применяется?
🔘 склады и логистика
    🔘 производство
    🔘 строительство
    🔘 медицина и реабилитация
    🔘 физически тяжёлые профессии

🔵 Почему это важно?
Травмы спины — одна из главных причин потери трудоспособности. Экзоскелеты вроде IRMO M1 — это не просто «гаджет», а способ продлить активную жизнь и снизить износ тела.

🔵 Фишка IRMO M1
Он лёгкий, автономный, не сковывает движения и реально ощущается как «усилитель», а не как железный костюм.

😀 Вывод:
Экзоскелеты — это уже не будущее. Это новый класс личных “апгрейдов” человека, и IRMO M1 — один из самых наглядных примеров.

DE

#Exoskeleton #WearableRobotics #HumanAugmentation #FutureTech #RoboticsEngineering #Экзоскелет #Робототехника #Технологии #Будущее #Инженерия
Please open Telegram to view this post
VIEW IN TELEGRAM
4👏11
😁5💯1
🖼️ Выкатили Apache Airflow 3.1.4

Патч-релиз, который стоит ставить без раздумий, если ты на 3.1.x.

Что важно:

✔️ Стабильнее scheduler — меньше гонок, предсказуемые DagRun’ы

✔️ Надёжнее Datasets — корректные триггеры без дублей

✔️ Быстрее UI — Graph/Grid меньше лагают даже на больших DAG’ах

✔️ Фиксы логов — меньше «битых» логов и подвисаний

🛠 Обновления провайдеров (AWS, GCP, K8s, DB)

🛠 Лучше deferrable-операторы — меньше воркеров, дешевле эксплуатация

🛠 Security-фиксы в API и UI

🛠 Совместимость с новыми SDK


DE

#de #dev #airflow #release
Please open Telegram to view this post
VIEW IN TELEGRAM
821
2😁12👏1
В мире data engineering происходит любопытная штука: джуны одновременно стали редкостью и ценностью.

AI автоматизировал рутину, компании стали осторожнее брать новичков — но объём данных растёт так быстро, что без свежей крови уже не справляются. В итоге рынок внезапно повернулся к тем, кто умеет учиться быстрее, чем обновляется документация к Airflow.

Сегодняшний junior — это не «младший разработчик». Это человек, который уже на старте понимает облака, SQL, пайплайны и не боится просить помощи у ИИ. Такой специалист становится усилителем команды, а не стажёром, за которым нужно присматривать.

И да: джунам стало сложнее входить. Но тем, кто вошёл, стало проще расти.
Мир данных любит смелых — тех, кто строит проекты, ломает ETL, собирает заново и снова идёт вперёд.

Если ты сейчас на пути в data engineering — не тормози. Большие системы данных редко открывают дверь дважды.

#dev #de #junior #AI #LLM
3👏3💯111
8😁72