Zero Disk Architecture — будущее хранения данных?
Автор блога предлагает отказаться от традиционных хранилищ на серверах в пользу облачных решений, таких как Amazon S3.
▪️ Что это значит?
Вместо привязки данных к конкретной машине (и её ограничениям), хранилище переносится в облако. Это позволяет:
Масштабировать ресурсы независимо.
Быстро восстанавливать системы после сбоев.
Использовать подход «безсерверных» баз данных.
▪️ Как это работает?
Данные записываются и читаются напрямую из облачных хранилищ. Такие решения, как Amazon S3, предоставляют низкие задержки и транзакционные возможности для эффективной работы.
▪️ Плюсы: Масштабируемость, эластичность и экономия на инфраструктуре.
▪️ Минусы: Необходимость учитывать размер данных и баланс между скоростью и надежностью.
Примеры успешного использования включают Snowflake и Clickhouse.
📌 Подробнее: https://avi.im/blag/2024/zero-disk-architecture/
MemOps🎄
Автор блога предлагает отказаться от традиционных хранилищ на серверах в пользу облачных решений, таких как Amazon S3.
▪️ Что это значит?
Вместо привязки данных к конкретной машине (и её ограничениям), хранилище переносится в облако. Это позволяет:
Масштабировать ресурсы независимо.
Быстро восстанавливать системы после сбоев.
Использовать подход «безсерверных» баз данных.
▪️ Как это работает?
Данные записываются и читаются напрямую из облачных хранилищ. Такие решения, как Amazon S3, предоставляют низкие задержки и транзакционные возможности для эффективной работы.
▪️ Плюсы: Масштабируемость, эластичность и экономия на инфраструктуре.
▪️ Минусы: Необходимость учитывать размер данных и баланс между скоростью и надежностью.
Примеры успешного использования включают Snowflake и Clickhouse.
📌 Подробнее: https://avi.im/blag/2024/zero-disk-architecture/
MemOps
Please open Telegram to view this post
VIEW IN TELEGRAM
avi.im
Zero Disk Architecture - blag
State is pain. The next generation of infrastructure tools will be built on diskless paradigm. In this short post I will explain what is Diskless / Zero Disk Architecture
😈4👍3
Умная кодогенерация: как AI-платформа помогает строить микросервисную архитектуру
Лид backend-разработки red_mad_robot создал инструмент Meroving, который помогает оптимизировать рутинные задачи, а иногда полностью их делает за разработчика. Например, монотонное написание однотипного кода или бесконечное перекладывание JSON-файлов. О том, как создавался и зачем нужен Meroving, рассказывается в статье.
📌 Подробнее: https://habr.com/ru/companies/redmadrobot/articles/867702/
MemOps🎄
Лид backend-разработки red_mad_robot создал инструмент Meroving, который помогает оптимизировать рутинные задачи, а иногда полностью их делает за разработчика. Например, монотонное написание однотипного кода или бесконечное перекладывание JSON-файлов. О том, как создавался и зачем нужен Meroving, рассказывается в статье.
📌 Подробнее: https://habr.com/ru/companies/redmadrobot/articles/867702/
MemOps
Please open Telegram to view this post
VIEW IN TELEGRAM
Хабр
Умная кодогенерация: как AI-платформа помогает строить микросервисную архитектуру
Привет! Я лид backend-разработки red_mad_robot, Илья Трусов , и я создал инструмент Meroving, который помогает оптимизировать рутинные задачи, а иногда полностью их делает за разработчика. Например,...
Переход на новую архитектуру проекта: как это влияет на надежность стриминга web-данных
Предположим, что перед вашей командой стоит задача по поиску надежного стриминга web и app данных, который бы соответствовал требованиям службы безопасности, ожиданиям отделов маркетинга и аналитики, а также был бы полезен для управляющей команды. Не менее важно удобство и прозрачность работы стриминга, а внесение изменений в ожидаемый результат, желательно, без привлечения дополнительного ресурса аналитиков и разработчиков.
📌 Подробнее: https://habr.com/ru/articles/868358/
MemOps🎄
Предположим, что перед вашей командой стоит задача по поиску надежного стриминга web и app данных, который бы соответствовал требованиям службы безопасности, ожиданиям отделов маркетинга и аналитики, а также был бы полезен для управляющей команды. Не менее важно удобство и прозрачность работы стриминга, а внесение изменений в ожидаемый результат, желательно, без привлечения дополнительного ресурса аналитиков и разработчиков.
📌 Подробнее: https://habr.com/ru/articles/868358/
MemOps
Please open Telegram to view this post
VIEW IN TELEGRAM
Хабр
Переход на новую архитектуру проекта: как это влияет на надежность стриминга web-данных
Предположим, что перед вашей командой стоит задача по поиску надежного стриминга web и app данных, который бы соответствовал требованиям службы безопасности, ожиданиям отделов маркетинга и аналитики,...
Идемпотентность: искусство не менять мир дважды
«Идемпотентность стала моей "любимой" темой после одного из первых собеседований, где меня попросили объяснить её так, чтобы понял кот. Тогда это было для меня вызовом, но спустя время я поняла, что вдохновение приходит из простых вещей и самый простой способ объяснить их — через примеры, которые мы видим каждый день.»
📌 Подробнее: https://habr.com/ru/articles/868382/
MemOps🎄
«Идемпотентность стала моей "любимой" темой после одного из первых собеседований, где меня попросили объяснить её так, чтобы понял кот. Тогда это было для меня вызовом, но спустя время я поняла, что вдохновение приходит из простых вещей и самый простой способ объяснить их — через примеры, которые мы видим каждый день.»
📌 Подробнее: https://habr.com/ru/articles/868382/
MemOps
Please open Telegram to view this post
VIEW IN TELEGRAM
Хабр
Идемпотентность: искусство не менять мир дважды
Привет! Эту статью я пишу для тех, кто хочет разобраться в сложных понятиях простыми словами. Идемпотентность стала моей "любимой" темой после одного из первых собеседований, где меня попросили...
👍6
Please open Telegram to view this post
VIEW IN TELEGRAM
😁13😢2
Анти-DevOps: почему от релизов один вред
В статье рассказывают, как им удалось сократить количество откатов релизов в три раза, при этом увеличив частоту этих релизов в два и уменьшив среднее время установки на 30%. И всё это — в географически распределённой инфраструктуре со множеством команд эксплуатации.
📌 Подробнее: https://habr.com/ru/companies/sibur_official/articles/868370/
MemOps🎄
В статье рассказывают, как им удалось сократить количество откатов релизов в три раза, при этом увеличив частоту этих релизов в два и уменьшив среднее время установки на 30%. И всё это — в географически распределённой инфраструктуре со множеством команд эксплуатации.
📌 Подробнее: https://habr.com/ru/companies/sibur_official/articles/868370/
MemOps
Please open Telegram to view this post
VIEW IN TELEGRAM
Хабр
Анти-DevOps: почему от релизов один вред
Привет, Хабр! Меня зовут Илья Олексив, я лидер компетенции направления DevOps в Цифровом СИБУРе. Вместе с моим коллегой Мишей Фуфаевым aka @Redemax , техлидом, в ноябре мы выступали на Industrial++ и...
Roadmap в DevOps 2025
DevOps — это стремительно развивающаяся область, объединяющая разработчиков и специалистов по эксплуатации для автоматизации, ускорения и улучшения процессов доставки программного обеспечения. DevOps-инженеры играют ключевую роль в современном ИТ-ландшафте, помогая компаниям быстро адаптироваться к меняющимся условиям и требованиям рынка. Их задачи охватывают широкий спектр областей: автоматизация инфраструктуры, управление жизненным циклом приложений, настройка мониторинга и обеспечение надёжности систем.
Основная концепция DevOps заключается в устранении барьеров между командами разработки (Dev) и эксплуатации (Ops), что позволяет внедрять изменения быстрее и с меньшими рисками. Это достигается за счёт использования инструментов и подходов, таких как CI/CD (непрерывная интеграция и доставка), Infrastructure as Code (IaC, инфраструктура как код), контейнеризация и мониторинг. Однако DevOps — это не только технологии, но и культура взаимодействия, прозрачности и ответственности в командах.
📌 Подробнее: https://habr.com/ru/articles/868332/
MemOps🎄
DevOps — это стремительно развивающаяся область, объединяющая разработчиков и специалистов по эксплуатации для автоматизации, ускорения и улучшения процессов доставки программного обеспечения. DevOps-инженеры играют ключевую роль в современном ИТ-ландшафте, помогая компаниям быстро адаптироваться к меняющимся условиям и требованиям рынка. Их задачи охватывают широкий спектр областей: автоматизация инфраструктуры, управление жизненным циклом приложений, настройка мониторинга и обеспечение надёжности систем.
Основная концепция DevOps заключается в устранении барьеров между командами разработки (Dev) и эксплуатации (Ops), что позволяет внедрять изменения быстрее и с меньшими рисками. Это достигается за счёт использования инструментов и подходов, таких как CI/CD (непрерывная интеграция и доставка), Infrastructure as Code (IaC, инфраструктура как код), контейнеризация и мониторинг. Однако DevOps — это не только технологии, но и культура взаимодействия, прозрачности и ответственности в командах.
📌 Подробнее: https://habr.com/ru/articles/868332/
MemOps
Please open Telegram to view this post
VIEW IN TELEGRAM
Хабр
Roadmap в DevOps 2025
DevOps — это стремительно развивающаяся область, объединяющая разработчиков и специалистов по эксплуатации для автоматизации, ускорения и улучшения процессов доставки программного обеспечения....
👍3
Please open Telegram to view this post
VIEW IN TELEGRAM
😁24🫡2❤1
Tg бот для IT + автоматизация ИПРО-2 используя MTS Exolve. Упаковка в Docker и автоматизация сборки с GitHub Actions
Статья написана с целью передачи проекта всем кто ищет информацию по написанию простых ботов, началу работы с docker и github Actions.
📌 Подробнее: https://habr.com/ru/articles/868678/
MemOps🎄
Статья написана с целью передачи проекта всем кто ищет информацию по написанию простых ботов, началу работы с docker и github Actions.
📌 Подробнее: https://habr.com/ru/articles/868678/
MemOps
Please open Telegram to view this post
VIEW IN TELEGRAM
Хабр
Tg бот для IT + автоматизация ИПРО-2 используя MTS Exolve. Упаковка в Docker и автоматизация сборки с GitHub Actions
Статья написана с целью передачи проекта всем кто ищет информацию по написанию простых ботов, началу работы с docker и github Actions. 1. Введение У нас Tg бот написан был года 2,5 назад, на тот...
Please open Telegram to view this post
VIEW IN TELEGRAM
😁23❤2
Технология контейнеризации Docker: ускоряем развертывание приложений
Идея Docker с самого начала заключалась в том, чтобы упростить процесс переноса и запуска приложений. Команда разработчиков из компании dotCloud (ныне Docker, Inc.) работала над созданием инструмента, который позволял бы упаковывать приложение и запускать его в любом месте.
Вскоре стало понятно, что с помощью Docker можно упаковывать практически все: от отдельных микросервисов до больших стеков с множеством компонентов. Это значительно упростило процесс переноса приложений, избавив от необходимости повторно настраивать зависимости и конфигурации на каждом новом сервере.
Развертывание приложений стало намного быстрее и проще, а запуск необходимых сервисов — более предсказуемым и контролируемым. Вы создаете контейнер один раз, запускаете его где угодно и он работает везде. Это особенно важно для развертывания приложений в облаке или на различных серверах.
📌 Подробнее: https://habr.com/ru/companies/dockhost/articles/868022/
MemOps🎄
Идея Docker с самого начала заключалась в том, чтобы упростить процесс переноса и запуска приложений. Команда разработчиков из компании dotCloud (ныне Docker, Inc.) работала над созданием инструмента, который позволял бы упаковывать приложение и запускать его в любом месте.
Вскоре стало понятно, что с помощью Docker можно упаковывать практически все: от отдельных микросервисов до больших стеков с множеством компонентов. Это значительно упростило процесс переноса приложений, избавив от необходимости повторно настраивать зависимости и конфигурации на каждом новом сервере.
Развертывание приложений стало намного быстрее и проще, а запуск необходимых сервисов — более предсказуемым и контролируемым. Вы создаете контейнер один раз, запускаете его где угодно и он работает везде. Это особенно важно для развертывания приложений в облаке или на различных серверах.
📌 Подробнее: https://habr.com/ru/companies/dockhost/articles/868022/
MemOps
Please open Telegram to view this post
VIEW IN TELEGRAM
Please open Telegram to view this post
VIEW IN TELEGRAM
💯20❤1
Станьте экспертом Kubernetes: подготовка CKS!
Экосистема Kubernetes продолжает расти в сложности и важности, и освоение ее аспектов безопасности стало важнейшим навыком. Сертификация Certified Kubernetes Security Specialist (CKS) предназначена для подтверждения этой компетентности. В этой записи блога рассматриваются основные элементы подготовительного курса CKS, предлагая как теоретические знания, так и практические задачи, которые помогут вам добиться успеха. Продолжительность: 11:06:39.
📌 Подробнее: https://www.youtube.com/watch?v=d9xfB5qaOfg
MemOps🎄
Экосистема Kubernetes продолжает расти в сложности и важности, и освоение ее аспектов безопасности стало важнейшим навыком. Сертификация Certified Kubernetes Security Specialist (CKS) предназначена для подтверждения этой компетентности. В этой записи блога рассматриваются основные элементы подготовительного курса CKS, предлагая как теоретические знания, так и практические задачи, которые помогут вам добиться успеха. Продолжительность: 11:06:39.
📌 Подробнее: https://www.youtube.com/watch?v=d9xfB5qaOfg
MemOps
Please open Telegram to view this post
VIEW IN TELEGRAM
YouTube
Kubernetes CKS Full Course Theory + Practice + Browser Scenarios
Certified Kubernetes Security Specialist (CKS) preparation!
!!! USE Ubuntu 24.04 instances instead of the 20.04 shown in the video !!!
This course does not include the 2024 changes and missing topics are: Cilium, PodSecurityStandards and SBOM. But these…
!!! USE Ubuntu 24.04 instances instead of the 20.04 shown in the video !!!
This course does not include the 2024 changes and missing topics are: Cilium, PodSecurityStandards and SBOM. But these…
👍3
DevOps: Писать или настраивать инструменты?
«DevOps. How to use?
Этот вопрос пришел ко мне после того, как я увидел пост в LinkedIn. Молодой девопс делился своим опытом: он написал скрипт, который фиксирует состояние виртуальных машин (CPU, MEM, DISK) на bash. Дальше я отвлекся на мем и не успел прочитать весь пост, но он задал мне интересные размышления.»
📌 Подробнее: https://habr.com/ru/articles/868878/
MemOps🎄
«DevOps. How to use?
Этот вопрос пришел ко мне после того, как я увидел пост в LinkedIn. Молодой девопс делился своим опытом: он написал скрипт, который фиксирует состояние виртуальных машин (CPU, MEM, DISK) на bash. Дальше я отвлекся на мем и не успел прочитать весь пост, но он задал мне интересные размышления.»
📌 Подробнее: https://habr.com/ru/articles/868878/
MemOps
Please open Telegram to view this post
VIEW IN TELEGRAM
Хабр
DevOps: Писать или настраивать инструменты?
Однако здравствуйте! Я все еще Владимир, меня все еще зовут голова жи есть разработка-операции Head of DevOps, внезапно евангелист DevOps и немного ambASS-a-door чего то там (привет, гачи!). Сегодня...
Please open Telegram to view this post
VIEW IN TELEGRAM
😁25❤1
Как ускорить CI/CD пайплайн в 5 раз: опыт оптимизации
CI/CD-пайплайн — ключевая часть разработки. Его медлительность снижает продуктивность команды и замедляет релизы. В статьe автор делится опытом, как он сократил время выполнения пайплайна с 45 минут до 10.
Что сделано:
▪️ Разделение задач на параллельные процессы
Ранее этапы выполнялись последовательно. Теперь тесты, сборка и другие задачи запускаются параллельно, что экономит общее время.
▪️ Использование кэширования зависимостей
Зависимости (например, npm-модули) теперь не переустанавливаются заново для каждого запуска. Это снизило время установки на 80%.
▪️ Оптимизация тестирования
Тесты разделены на группы для выполнения в несколько потоков.
Реализован механизм пропуска тестов для файлов, которые не изменились.
▪️ Улучшение Docker-сборки
Пайплайн использует многоэтапные сборки Docker-образов. Это уменьшило их размер и время создания.
▪️ Переход на облачные раннеры
Использование облачных серверов позволило масштабировать ресурсы и избежать узких мест на локальных машинах.
Результаты:
▪️ Время выполнения пайплайна сократилось с 45 до 10 минут.
▪️ Тестирование ускорилось на 70%, сборка Docker-образов — на 50%.
▪️ Команда начала получать обратную связь от системы почти мгновенно, что улучшило процесс разработки.
📌 Подробнее: https://medium.com/@ali_hamza/from-45-minutes-to-10-minutes-how-i-made-my-ci-cd-pipeline-5x-faster-9e8bbacc6f29
MemOps🎄
CI/CD-пайплайн — ключевая часть разработки. Его медлительность снижает продуктивность команды и замедляет релизы. В статьe автор делится опытом, как он сократил время выполнения пайплайна с 45 минут до 10.
Что сделано:
▪️ Разделение задач на параллельные процессы
Ранее этапы выполнялись последовательно. Теперь тесты, сборка и другие задачи запускаются параллельно, что экономит общее время.
▪️ Использование кэширования зависимостей
Зависимости (например, npm-модули) теперь не переустанавливаются заново для каждого запуска. Это снизило время установки на 80%.
▪️ Оптимизация тестирования
Тесты разделены на группы для выполнения в несколько потоков.
Реализован механизм пропуска тестов для файлов, которые не изменились.
▪️ Улучшение Docker-сборки
Пайплайн использует многоэтапные сборки Docker-образов. Это уменьшило их размер и время создания.
▪️ Переход на облачные раннеры
Использование облачных серверов позволило масштабировать ресурсы и избежать узких мест на локальных машинах.
Результаты:
▪️ Время выполнения пайплайна сократилось с 45 до 10 минут.
▪️ Тестирование ускорилось на 70%, сборка Docker-образов — на 50%.
▪️ Команда начала получать обратную связь от системы почти мгновенно, что улучшило процесс разработки.
📌 Подробнее: https://medium.com/@ali_hamza/from-45-minutes-to-10-minutes-how-i-made-my-ci-cd-pipeline-5x-faster-9e8bbacc6f29
MemOps
Please open Telegram to view this post
VIEW IN TELEGRAM
Medium
From 45 Minutes to 10 Minutes: How I Made My CI/CD Pipeline 5x Faster
Supercharge your CI/CD pipelines with actionable steps to minimize runtime and maximize productivity.
👍6