Karpenter: використання Disruption budgets

Disruption budgets з’явились в версії 0.36, і виглядає як дуже цікавий інструмент для того, аби обмежити Karpenter в перестворенні WorkerNodes. Наприклад в моєму випадку ми не хочемо, аби EC2 вбивались в робочі часи по США, бо там у нас клієнти, а тому зараз маємо consolidationPolicy=whenEmpty, аби запобігти “зайвому” видаленню серверів та Pods на них. Натомість…

https://rtfm.co.ua/karpenter-vikoristannya-disruption-budgets/

#333399 #AWS #karpenter #Kubernetes

VictoriaMetrics Cloud: інтеграція з AWS Data Firehose для CloudWatch метрик

Про саму VictoriaMetrics Cloud напишу окремо, а зараз хочу перевірити як можна писати CloudWatch Metrcis через AWS Firehose до VictoriaMetrics Cloud. Власне, сам сервіс AWS Data Firehose дозволяє передачу потокових даних з різних джерел до сервісів Amazon на кшталт AWS S3, Redshift, OpenSearch, або до зовнішніх – Datadog, New Relic, і т.д. Нещодавно VictoriaMetrics запустила…

https://rtfm.co.ua/victoriametrics-cloud-integraciya-z-aws-data-firehose-dlya-cloudwatch-metrik/

#333399 #AWS #AWS_CloudWatch #monitoring #VictoriaMetrics

GitHub Actions: запуск Actions Runner Controller в Kubernetes

Ми користуємось GitHub Actions для деплоїв, і врешті-решт прийшли до того, що хочеться запускати Runners на своїх серверах в Kubernetes, бо: - self-hosted GitHub Runners дешевші – фактично, платимо тільки за сервери, на яких запускаються джоби - нам потрібно запускати SQL migrations на AWS RDS в приватних сабнетах - перформанс – ми можемо використовувати будь-який…

https://rtfm.co.ua/github-actions-zapusk-actions-runner-controller-v-kubernetes/

#333399 #Docker #Github #Github_Actions #Kubernetes

24 жовтня ділитимемося практичними порадами щодо сучасних підходів до обробки даних, огляд інструментів та кейсів від провідних експертів у сфері Data Engineering.

Спікери розкажуть про рішення для архітектурних викликів даних у Redshift, уроки з впровадження Data Mesh з Kafka для 50+ команд, реалізацію фреймворку Data as a Product з AWS DataZone, відкриття даних у багатоаккаунтних середовищах AWS, помилки при плануванні архітектури даних та приховані недоліки AWS MWAA та багато іншого.

Що очікувати від нового розділу AWS Notes:

- 6 Tech Notes, де спікери поділяться своїм досвідом побудови та роботи із системами обробки та аналізу даних
- 2 короткі Snap Talks з концентрованими інсайтами про найсвіжіші технології та практики
- Формат: онлайн
- Час: 14:00 - 20:30 (GMT+3)
- Участь безкоштовна


З цієї нагоди ми збираємо разом провідних data експертів та сертифікованих AWS спеціалістів, серед яких: Юлія Шологонь з SoftServe, Тарас Сліпець з Flix, Alex DeBrie (AWS Data Hero), Joel Farvault з AWS, Ростислав Мироненко з Booking.com, Дмитро Сірант з OpsWorks та Максим Войтко з Honeycomb Software.

Для більш детальної інформації та реєстрації відвідайте сайт конференції: https://bit.ly/3YjdrzH

🎦 Онлайн вебінар “Solving AWS VPC CIDR overlaps”

Якщо вам доводилося працювати з однаковими CIDR блоками у AWS VPC, то ви точно знаєте як складно організувати комунікацію між ними. Це спричиняє численні складнощі для інженерів та адміністраторів мережі, включаючи конфлікти маршрутизації, ризики безпеки та операційні виклики.

На вебінарі ви отримаєте практичні рішення для усунення цих проблем та цінні інсайти щодо процесу впровадження надійної та безпечної мережевої архітектури🤓

Це чудова можливість для технічних фахівців поглибити знання та прокачати навички управління мережами!

👨‍💻 Спікер: Сергій Кайдалов — Solution Architect із 8 сертифікатами AWS та 6-річним досвідом у DevOps та хмарних рішеннях
📅 Дата та час: 20 листопада, 18:00
🌍 Мова: англійська

🔥Приєднуйтесь, реєстрація безкоштовна: https://bit.ly/3AlBe8Z

AWS: VPC Flow Logs – логи до S3 та Grafana dashboard з Loki

В продовження теми AWS: VPC Flow Logs, NAT Gateways, та Kubernetes Pods – детальний обзор. Там ми розбирали роботу з VPC Flow Logs в цілому, і дізнались, як ми можемо отримувати інформацію про трафік з/до Kubernetes Pods. Але при використанні Flow Logs з CloudWatch Logs є одна проблема – це вартість. Наприклад, коли ми включаємо…

https://rtfm.co.ua/aws-vpc-flow-logs-logiv-do-s3-ta-grafana-dashboard-z-loki/

#333399 #AWS #AWS_CloudWatch #Grafana #Kubernetes #Loki #monitoring #Networks #VictoriaLogs #VictoriaMetrics

О, прикольні фішки в моніторинг EKS Control Plane завезли:
https://aws.amazon.com/blogs/containers/amazon-eks-enhances-kubernetes-control-plane-observability/

Kubernetes: єдиний AWS Load Balancer для різних Kubernetes Ingress

Подивились ми на наші витрати на AWS Load Balancers, і подумали, що треба трохи це діло привести в порядок. Чого хочеться: мати один LoadBalancer, і через нього роутити запити на різні Kubernetes Ingresses та Services в різних Namespaces. Перше, що спало на думку – це або додавати в Kubernetes кластер якийсь Service Mesh типу Istio…

https://rtfm.co.ua/kubernetes-yedinij-aws-load-balancer-dlya-riznix-kubernetes-ingress/

#333399 #AWS #AWS_Cost_Optimization #Kubernetes #Networks

Підготовка до зими 2024-2025: частина 2 – готуємо оселю до блекаутів

Хотілося б написати про щось айтішне, тим більш є зараз цікава тема, і не одна – але захотілось написати про трохи більш актуальні речі. Отже, на сьогодні, 29 листопада, маємо таку картину по відключенням: Пєчалька, звісно, але я готувався заздалегіть, тому не все так погано. Про що буде мова сьогодні: - електроживлення квартири: як в…

https://rtfm.co.ua/pidgotovka-do-zimi-2024-2025-chastina-2-gotuyemo-oselyu-do-blekautiv/

#333399 #електрика

Як створити свого AI-асистента? Як розробити власний ChatGPT на відкритих моделях? Які існують етичні аспекти роботи з AI?

Поговоримо на мітапі про актуальні інструменти для розробки, аналізу даних, про інтеграції AI та як сучасні технології можуть посилити ваші проєкти.

🤖 Кейс: як в Levi9 створили свого AI career coach, — Ігор Козлов, Data та ML Engineer в Levi9

⚖️ Які основні принципи етики в роботі з ШІ? — Олександр Краковецький, CEO DevRain, CTO Donor UA та Ph.D. в IT

🤖 Інструкція: AI для кожного — cтворіть власну (безкоштовну) LLM, — Кодрін Балеану, Architect and Engineering Lead в Levi9

Також приєднаємось донатами для Donor UA, які в тому числі організовують транспортування крові на фронт.

📍Деталі та реєстрація: https://meetup.levi9.com.ua/ai-event

VictoriaLogs: дашборда в Grafana з AWS VPC Flow Logs – мігруємо з Grafana Loki

В попередньому пості – AWS: VPC Flow Logs – логи до S3 та Grafana dashboard з Loki ми створили дашборду в Grafana, яка відображає статистику використання NAT Gateway. Що саме нас там цікавило – це які Kubernetes Pods використовують найбільше байт, бо це напряму впливає на наші AWS Costs. І все наче добре з цією…

https://rtfm.co.ua/victorialogs-dashborda-v-grafana-z-aws-vpc-flow-logs-migruyemo-z-grafana-loki/

#333399 #AWS #AWS_CloudWatch #Grafana #Kubernetes #Loki #monitoring #Networks #VictoriaLogs #VictoriaMetrics

Як AWS допомагає бізнесу адаптуватися до змін і що ви втрачаєте, якщо ще не використовуєте AWS?

⚡️18 грудня зробимо ексклюзивний огляд ключових інсайтів головної події AWS — re:Invent (Лас-Вегас, 2024). Спікер — Ігор Іванюк, Principal Solution Architect в AWS.

А також три доповіді:
— Гібридне ІТ-середовище AWS/On-prem: проблеми з мережами, зміни процесів і парадигм та можливості AWS.

— Управління, безпека та комплаєнс: три фундаментальні основи для оптимізації витрат.

— Чому мультиклауд? Реальний кейс та як впровадити правильно.

Кому буде цікаво: лідерам бізнесу та технічному менеджменту, які вже працюють або планують працювати з хмарою AWS.

👉 Деталі та реєстрація: https://bit.ly/3VkpFpN

https://www.linkedin.com/posts/victoriametrics_victoriametrics-december-virtual-meet-up-activity-7272246434098262016-2PKE

Схоже, що цього разу на мітапі навіть буду я 🙈
Трохи розповім про Loki vs VictoriaLogs

Nexus: запуск в Kubernetes та налаштування PyPi caching repository

У нас в Kubernetes запускаються GitHub Runner для білда і деплоя нашого Backend API, див. GitHub Actions: запуск Actions Runner Controller в Kubernetes. Але з часом ми звернули увагу, що на NAT Gateway бігає якось забагато трафіку – див. VictoriaLogs: дашборда в Grafana з AWS VPC Flow Logs – мігруємо з Grafana Loki. Contents -…

https://rtfm.co.ua/nexus-zapusk-v-kubernetes-ta-nalashtuvannya-pypi-caching-repository/

#AWS #Kubernetes #Nexus #run

Як AWS допомагає бізнесу адаптуватися до змін і що ви втрачаєте, якщо ще не використовуєте AWS?

⚡️18 грудня зробимо ексклюзивний огляд ключових інсайтів головної події AWS — re:Invent (Лас-Вегас, 2024). Спікер — Ігор Іванюк, Principal Solution Architect в AWS.

А також три доповіді:
— Гібридне ІТ-середовище AWS/On-prem: проблеми з мережами, зміни процесів і парадигм та можливості AWS.

— Управління, безпека та комплаєнс: три фундаментальні основи для оптимізації витрат.

— Чому мультиклауд? Реальний кейс та як впровадити правильно.

Кому буде цікаво: лідерам бізнесу та технічному менеджменту, які вже працюють або планують працювати з хмарою AWS.

👉 Деталі та реєстрація: https://aws-user-group.com.ua/growth-conf

Панельна дискусія за підсумками AWS re:Invent 2024

AWS re:Invent 2024 представить нові сервіси та продукти, оновлення в хмарі та тренди на 2025 рік. Але як вибрати саме те, що дійсно покращить вашу роботу чи бізнес?

Експерти з OpsWorks Co. та UppLabs зібрали все найважливіше у двох панельних дискусіях, щоб ви могли швидко зрозуміти, які новинки заслуговують на вашу увагу та як їх застосувати!

📅 16 грудня, 15:00 – Технічний розбір AWS re:Invent
Сесія для DevOps-інженерів, архітекторів, розробників. Обговоримо:
→ Головні технічні анонси та оновлення AWS.
→ Нові інструменти для хмарної інфраструктури та їх переваги.
→ Як нові сервіси допоможуть масштабувати проєкти, оптимізувати витрати та покращити продуктивність.

📅 17 грудня, 15:00 – Бізнес-підсумки AWS re:Invent
Ідеально для технічних керівників, менеджерів, стратегів. Ви дізнаєтесь:
→ Як анонсовані AWS сервіси та продукти можуть можуть бути застосовані у вашому бізнесі.
→ Вплив оновлень на різні індустрії та можливості для зростання.
→ Тренди, які варто врахувати у 2025 році.

Чому вам це потрібно?
✅ Будете в курсі найважливіших оновлень AWS
✅ Отримаєте експертні думки від людей, які щодня працюють з AWS хмарою та інфраструктурою.
✅ Зрозумієте, як нові інструменти можуть допомогти вашому бізнесу чи команді
✅ Зможете стати учасником дискусії
✅ Отримаєте запис сесії

🎤 Своїм баченням та думками поділяться:
- Артем Долобанько, CEO в OpsWorks Group
- Богдан Хмельницький, CTO в UppLabs
- Дмитро Сірант, CTO в OpsWorks Co.
- Сергій Кайдалов, Solution Architect в OpsWorks Co.
- Анатолій Бугровий, Senior DevOps Engineer в OpsWorks Co.

🔗 Реєструйтеся, щоб дізнатися все найважливіше з AWS re:Invent 2024: https://bit.ly/3CJPoRS

🗣Мова проведення: англійська

Побачимось онлайн 👋

Vector.dev: знайомство, логи з AWS S3 та інтеграція з VictoriaLogs

Отже, знов повертаємось до теми AWS VPC Flow Logs, VictoriaLogs, та Grafana dashboard. В пості VictoriaLogs: дашборда в Grafana з AWS VPC Flow Logs – мігруємо з Grafana Loki ми створили прикольну дашборду для відображення різної статистики по трафіку AWS NAT Gateway. Але там є маленький недолік – всі дані будуються з raw logs, які…

https://rtfm.co.ua/vector-dev-znajomstvo-logi-z-aws-s3-ta-integraciya-z-victorialogs/

#AWS #Grafana #monitoring #Vector_dev #VictoriaLogs

AWS re:Invent 2024 recap, частина перша.

https://www.youtube.com/watch?v=AEm606KZP_o

#reInvent

AWS re:Invent 2024 recap, частина друга.

https://www.youtube.com/live/llvjtJJZF5U

#reInvent

VictoriaLogs: створення Recording Rules з VMAlert

Продовжуємо міграцію з Grafana Loki на VictoriaLogs, і наступна задача – це перенести Recording Rules з Loki до VictoriaLogs, і оновити алерти. Recording Rules та інтеграцію з VMAlert до VictoriaLogs завезли відносно недавно, і цю схему ще не тестував. Тому спершу все зробимо руками, подивимось як це працює, які є нюанси, а потім будемо оновлювати…

https://rtfm.co.ua/victorialogs-stvorennya-recording-rules-z-vmalert/

#Kubernetes #monitoring #VictoriaLogs #VictoriaMetrics