A look at the tradeoffs between testing in a pipeline and observability in production for data engineering.
https://medium.com/bigeye/testing-vs-observability-which-is-right-for-your-data-quality-needs-1ceb34a12867
#observability #testing #pipeline
https://medium.com/bigeye/testing-vs-observability-which-is-right-for-your-data-quality-needs-1ceb34a12867
#observability #testing #pipeline
Building a fault-tolerant event-driven architecture with Google Cloud, Pulumi and Debezium
https://daily.dev/blog/building-a-fault-tolerant-event-driven-architecture-with-google-cloud-pulumi-and-debezium
#pulumi #gce #cloud #debezium
https://daily.dev/blog/building-a-fault-tolerant-event-driven-architecture-with-google-cloud-pulumi-and-debezium
#pulumi #gce #cloud #debezium
Moco is a MySQL operator on Kubernetes using GTID-based semi-synchronous replication.
https://github.com/cybozu-go/moco
#k8s #kubernetes #mysql #sql
https://github.com/cybozu-go/moco
#k8s #kubernetes #mysql #sql
GitHub
GitHub - cybozu-go/moco: MySQL operator on Kubernetes using GTID-based semi-synchronous replication.
MySQL operator on Kubernetes using GTID-based semi-synchronous replication. - cybozu-go/moco
OpenTelemetry in client libraries
https://neskazu.medium.com/opentelemetry-in-client-libraries-96136d441f0b
#opentelemetry #observability #monitoring
https://neskazu.medium.com/opentelemetry-in-client-libraries-96136d441f0b
#opentelemetry #observability #monitoring
A deep dive on what’s happening under the hood of AWS Lambda
https://www.bschaatsbergen.com/behind-the-scenes-lambda
#aws #lambda
https://www.bschaatsbergen.com/behind-the-scenes-lambda
#aws #lambda
Troubleshooting DRBD9 in LINSTOR
https://dev.to/kvaps/troubleshooting-drbd9-in-linstor-40fn
How to resolve split-brain in DRBD9
https://dev.to/kvaps/how-to-solve-split-brain-in-drbd9-15no
#linstor #drbd
https://dev.to/kvaps/troubleshooting-drbd9-in-linstor-40fn
How to resolve split-brain in DRBD9
https://dev.to/kvaps/how-to-solve-split-brain-in-drbd9-15no
#linstor #drbd
Multicluster Traffic Mirroring with Istio and Kind
https://piotrminkowski.com/2021/07/12/multicluster-traffic-mirroring-with-istio-and-kind/
#istio #kind #kubernetes #k8s #servicemesh
https://piotrminkowski.com/2021/07/12/multicluster-traffic-mirroring-with-istio-and-kind/
#istio #kind #kubernetes #k8s #servicemesh
Piotr's TechBlog
Multicluster Traffic Mirroring with Istio and Kind - Piotr's TechBlog
This article shows how to configure Istio multiclaster traffic mirroring on Kubernetes clusters created locally with Kind.
Ansible Essentials: Simplicity in Automation Technical Overview
Бесплатный курс по Ansible
#ansible #course #redhat
Бесплатный курс по Ansible
#ansible #course #redhat
Redhat
Ansible Basics: Automation Technical Overview | DO007
Create, scale, and manage automation with Red Hat Ansible Automation Platform with Ansible Basics: Automation Technical Overview (DO007).
Forwarded from Евгений Потапов и ITSumma
На DevOpsConf меня попросили сделать "провокационный доклад".
Я посмотрел на программу и понял, что все доклады классные, но многие - рассказывают про идеальный мир где DevOps - это культура, а "девопс-инженеров не существует", и это правильный мир, но существует другой огромный пласт, где на хедхантере есть более 2000 вакансий, где ищут "devops-инженера" "писать пайплайны".
В 9 из 10 вакансий требуется примерно следующее:
- настройка и поддержка инфраструктуры на Kubernetes;
- развёртывание и мониторинг релизов;
- настройка пайплайнов сборки, тестирования и деплоя;
- автоматизация процессов и помощь команде разработки;
- сопровождение и администрирование стендов;
- траблшутинг и решение инфраструктурных инцидентов;
- обеспечение CI/CD-процессов и т.д.
Если утрировать, то админ как был обслуживающей профессией для разработки, так и девопс (в этом понимании) таким и остался. Классно устроиться в компанию с правильной культурой, но существует огромное количество компаний без нее. А зачем тогда продолжать быть девопсом? Даже джуны-разработчики на текущем рынке стоят диких денег, провокация в общем такая: зачем вообще продолжать этим заниматься, стоит ли и как жить, если заниматься этим хочется? (спойлер: есть зачем, стоит, и какие-то способы жить есть 🙂
Написал статью на хабре по итогам доклада.
https://habr.com/ru/company/itsumma/blog/568570/
P.S. "Зачем жить, если ты девопс" как название доклада не прошло 😉
P.P.S. Сделал комменты в канале, наконец-то :)
Я посмотрел на программу и понял, что все доклады классные, но многие - рассказывают про идеальный мир где DevOps - это культура, а "девопс-инженеров не существует", и это правильный мир, но существует другой огромный пласт, где на хедхантере есть более 2000 вакансий, где ищут "devops-инженера" "писать пайплайны".
В 9 из 10 вакансий требуется примерно следующее:
- настройка и поддержка инфраструктуры на Kubernetes;
- развёртывание и мониторинг релизов;
- настройка пайплайнов сборки, тестирования и деплоя;
- автоматизация процессов и помощь команде разработки;
- сопровождение и администрирование стендов;
- траблшутинг и решение инфраструктурных инцидентов;
- обеспечение CI/CD-процессов и т.д.
Если утрировать, то админ как был обслуживающей профессией для разработки, так и девопс (в этом понимании) таким и остался. Классно устроиться в компанию с правильной культурой, но существует огромное количество компаний без нее. А зачем тогда продолжать быть девопсом? Даже джуны-разработчики на текущем рынке стоят диких денег, провокация в общем такая: зачем вообще продолжать этим заниматься, стоит ли и как жить, если заниматься этим хочется? (спойлер: есть зачем, стоит, и какие-то способы жить есть 🙂
Написал статью на хабре по итогам доклада.
https://habr.com/ru/company/itsumma/blog/568570/
P.S. "Зачем жить, если ты девопс" как название доклада не прошло 😉
P.P.S. Сделал комменты в канале, наконец-то :)
Хабр
Как жить, если ты девопс?
Я уже лет 10 занимаюсь, в основном, менеджерской работой, но недавно решил освежить свои технические навыки и поближе познакомиться со стеком современных DevOps-инструментов. Я взял на себя...
SQLite 35% Faster Than The Filesystem
https://www.sqlite.org/fasterthanfs.html
#sqlite #sql #database
https://www.sqlite.org/fasterthanfs.html
#sqlite #sql #database
How to install Rancher on k3s
https://vmguru.com/2021/04/how-to-install-rancher-on-k3s/
#k3s #k8s #kubernetes #rancher #docker
https://vmguru.com/2021/04/how-to-install-rancher-on-k3s/
#k3s #k8s #kubernetes #rancher #docker
Forwarded from Data Egret
Всем привет, выложили запись нашего разговора про миниторинг с Владимиром Гурьяновым (okmeter.io), Алексеем Лесовским и Ильей Космодемьянским на нашем канале в YouTube. Подписывайтесь! https://www.youtube.com/watch?v=GT-bK-uWU-k
YouTube
Мониторинг PostgreSQL. Беседа с Владимиром Гурьяновым, Алексеем Лесовским и Ильей Космодемьянским.
(Таймкоды ниже в описании)
Запись разговора с Владимиром Гурьяновым (okmeter.io), Алексеем Лесовским (Data Egret) и Ильей Космодемьянским (Data Egret) о мониторинговых решениях, о том как выбрать подходящее и о типичных ошибках в настройке мониторинга.
Беседа…
Запись разговора с Владимиром Гурьяновым (okmeter.io), Алексеем Лесовским (Data Egret) и Ильей Космодемьянским (Data Egret) о мониторинговых решениях, о том как выбрать подходящее и о типичных ошибках в настройке мониторинга.
Беседа…
Forwarded from Флант | Специалисты по DevOps и Kubernetes
Делимся впечатлениями от облачной миграции одного из наших клиентов: https://habr.com/ru/company/flant/blog/568624/
Хабр
Опыт миграции инфраструктуры клиента из AWS в Яндекс.Облако
Задача по миграции из одного облака в другое, на самом деле, довольно распространенная в нашей практике. Происходит это по разным причинам: ценовая политика облачного провайдера, требования...
Kubernetes Operator to deploy Helm charts as-a-Service
https://github.com/cloud-ark/kubeplus
https://cloudark.io/
#k8s #kubernetes #crd #helm #operator
https://github.com/cloud-ark/kubeplus
https://cloudark.io/
#k8s #kubernetes #crd #helm #operator
GitHub
GitHub - cloud-ark/kubeplus: Kubernetes Operator for multi-instance multi-tenancy
Kubernetes Operator for multi-instance multi-tenancy - cloud-ark/kubeplus
Benchmark PostgreSQL: cross between native versus Docker
https://itnext.io/benchmark-postgresql-cross-between-native-versus-docker-a96df9a45014
#postgresql #docker
https://itnext.io/benchmark-postgresql-cross-between-native-versus-docker-a96df9a45014
#postgresql #docker
Medium
Benchmark PostgreSQL: cross between native versus Docker
Few months ago, I did two benchmarks. The first one tested three database engines and the second one only PostgreSQL.
Jenkins plugin to run dynamic agents in a Kubernetes/Docker environment
https://github.com/jenkinsci/kubernetes-plugin
#kubernetes #k8s #jenkins
https://github.com/jenkinsci/kubernetes-plugin
#kubernetes #k8s #jenkins
GitHub
GitHub - jenkinsci/kubernetes-plugin: Jenkins plugin to run dynamic agents in a Kubernetes/Docker environment
Jenkins plugin to run dynamic agents in a Kubernetes/Docker environment - jenkinsci/kubernetes-plugin