Phillip Shipley написал развернутую статью про принципы continuous integration (CI) и continuous delivery/deployment (CD) для блога CodeShip. Статья достаточно базовая, но может пригодиться тем, кто только начинает разбираться в принципах построения CI/CD систем.
http://amp.gs/8OIQ
http://amp.gs/8OIQ
CloudBees
Demystifying Continuous Integration, Delivery, and Deployment
Ease your way into CI/CD. Explore the definitions of the various terms and discover helpful strategies that will make CI/CD easier and more effective.
Новость дня. Microsoft открыла код PowerShell и портировала его на Linux и OS X.
Все перемешалось в этом мире: BASH доступен в Windows, а PowerShell - в Linux.
http://amp.gs/8rgD
Все перемешалось в этом мире: BASH доступен в Windows, а PowerShell - в Linux.
http://amp.gs/8rgD
GitHub
GitHub - PowerShell/PowerShell: PowerShell for every system!
PowerShell for every system! Contribute to PowerShell/PowerShell development by creating an account on GitHub.
Хороший разбор вариантов сборки конфига приложения с помощью ENV-переменных (12Factor-style) от Steve Adams.
http://amp.gs/8rVm
http://amp.gs/8rVm
steveadams.io
Environment Variable Templates
Inspiration
Valentin Ouvrard написал обзор интерфейса Rancher - системы управления Docker контейнерами, интегрирующейся с существующими кластерными решениями: Swarm, Kubernetes и Mesos.
http://amp.gs/8rRB
http://amp.gs/8rRB
OpsNotice
Overview of Rancher UI
Today, I'll introduce you to Rancher UI, a Docker cluster management system, allowing deploy containers across multiple Docker hosts. You can manage your own Docker servers, deploy VMs on the cloud or add your Swarm, Kubernetes or Mesos existent clusters.…
История о том, как Paypal перевели обработку своих транзакций с Erlang на Scala+Akka, и стало у них все так хорошо, что они уменьшили количество своих серверов с сотни до восьми штук.
http://amp.gs/8NM9
http://amp.gs/8NM9
Highscalability
How PayPal Scaled to Billions of Transactions Daily Using Just 8VMs - High Scalability -
How did Paypal take a billion hits a day system that might traditionally run on a 100s of VMs a...
Hashicorp закрывает Otto - проекта для развертывания dev- и prod-инфраструктуры, который позиционировался как наследник Vagrant.
http://amp.gs/8NQu
http://amp.gs/8NQu
Издательство O'Reilly выложило бесплатную подборку книг по DevOps и оптимизации производительности Web приложений.
http://amp.gs/8N6y
http://amp.gs/8N6y
Oreilly
O'Reilly Media - Technology and Business Training
Gain technology and business knowledge and hone your skills with learning resources created and curated by O'Reilly's experts: live online training, video, books, our platform has content from 200+ of the world's best publishers.
Вышел Apache CloudStack 4.9 - платформа для развертывания и обслуживания как приватных, так и гибридных или публичных облаков. CloudStack не привязан к какому-то определенному гипервизору и умеет работать с LXC, Hyper-V, KVM, XenServer, VMware и Oracle VM.
Основные новшества:
Добавлено централизованное управление питанием хостов через IPMI, iLO и DRAC.
Улучшения в сетевой модели, включающие в том числе глубокую интеграцию с Nuage VSP SDN;
Поддержка определяемых пользователем ролей безопасности.
http://amp.gs/8qCw
Основные новшества:
Добавлено централизованное управление питанием хостов через IPMI, iLO и DRAC.
Улучшения в сетевой модели, включающие в том числе глубокую интеграцию с Nuage VSP SDN;
Поддержка определяемых пользователем ролей безопасности.
http://amp.gs/8qCw
Инженеры из Platform9 продолжают сравнивать различные системы оркестрации контейнеров. На этот раз они опубликовали статью о сравнении Kubernetes и Docker Swarm.
http://amp.gs/8q7G
http://amp.gs/8q7G
Platform9
Compare Kubernetes vs Docker Swarm | Platform9
Compare Kubernetes vs Docker Swarm, two leading container services, on key aspects like scalability, availability, load-balancing, storage, and more.
Вышел GitLab 8.11.
Релиз богат на различные новшества:
Добавлены Issue Boards - эдакая помесь Trello и Issues, упрощающая работу с большим количеством issues;
Добавлена возможность мержить конфликты в коде прямо из веб-интерфейса;
Появилась возможность развернуть проект в облачной среде Koding;
Появилась возможность помечать различные обсуждения в merge requests как решенные;
Добавлена визуализация пайплайнов;
Добавлены шаблоны к Issues и Merge Requests;
Появились chatbot-like команды, позволяющие добавлять майлстоуны, due dates и прочее прямо через окно комментария;
Серьезно улучшена производительность.
http://amp.gs/8qh8
Релиз богат на различные новшества:
Добавлены Issue Boards - эдакая помесь Trello и Issues, упрощающая работу с большим количеством issues;
Добавлена возможность мержить конфликты в коде прямо из веб-интерфейса;
Появилась возможность развернуть проект в облачной среде Koding;
Появилась возможность помечать различные обсуждения в merge requests как решенные;
Добавлена визуализация пайплайнов;
Добавлены шаблоны к Issues и Merge Requests;
Появились chatbot-like команды, позволяющие добавлять майлстоуны, due dates и прочее прямо через окно комментария;
Серьезно улучшена производительность.
http://amp.gs/8qh8
Yelp открыли код Undebt - утилиты для автоматического рефакторинга больших объемов кода. Фактически, это умный парсер на Python, заточенный под грамматику языков программирования (тоже, в первую очередь, Python).
http://amp.gs/8sKE
http://amp.gs/8sKE
Yelp
Undebt: How We Refactored 3 Million Lines of Code
Undebt: How We Refactored 3 Million Lines of Code Evan H., Software Engineering Intern Aug 23, 2016 Peter Seibel wrote that to maximize engineering effectiveness, “Let a thousand flowers bloom....
DigitalOcean выложили в открытый доступ код Vulcan - системы мониторинга, совместимой с Prometheus на уровне API. Она сложнее Prometheus в эксплуатации, но рассчитана на длительное хранение метрик, высокую доступность и удобный скейлинг.
http://amp.gs/8sHy
http://amp.gs/8sHy
GitHub
GitHub - digitalocean/vulcan: Vulcan extends Prometheus adding horizontal scalability and long-term storage
Vulcan extends Prometheus adding horizontal scalability and long-term storage - GitHub - digitalocean/vulcan: Vulcan extends Prometheus adding horizontal scalability and long-term storage
В блоге Kubernetes опубликовали подробный рассказ о Kubernetes Namespaces: что это такое, зачем они нужны и для чего их не стоит использовать. Учитывая скупость и разрозненность документации, этот пост может сослужить хорошую службу тем, кто только начинает работать с этой системой.
http://amp.gs/8sws
http://amp.gs/8sws
Vinay Sahni собрал в одну статью кучу советов по проектированию микросервисной архитектуры.
http://amp.gs/8sXU
http://amp.gs/8sXU
Vinay Sahni
Best Practices for Building a Microservice Architecture
A curated a set of pragmatic practices for building a microservice architecture that fits well with modern web and cloud technologies.
Небольшой сборник советов по организации архитектуры вашего приложения на AWS Lambda.
http://amp.gs/8DZK
http://amp.gs/8DZK
Medium
Do’s and Don’ts of AWS Lambda
This post touches on some things I’ve learned using AWS Lambda to build the Apex Ping uptime monitoring tool, which is built almost…
Alexander Rubin написал в блоге Percona статью о том, как можно увеличить производительность обработки запросов MySQL более чем в 10 раз с помощью Apache Spark. Внутри много примеров кода и бенчмарков.
http://amp.gs/8DBj
http://amp.gs/8DBj
Percona Database Performance Blog
How Apache Spark makes your slow MySQL queries 10x faster - Percona Database Performance Blog
In this blog post, we'll discuss how to improve the performance of slow MySQL queries using Apache Spark.
Инженеры GitHub опубликовали заметку о балансировке нагрузки на реплики MySQL с помощью HAProxy.
http://amp.gs/8DG6
http://amp.gs/8DG6
GitHub Engineering
Context aware MySQL pools via HAProxy
At GitHub we use MySQL as our main datastore. While repository data lies in git, metadata is stored in MySQL. This includes Issues, Pull Requests, Comments etc. We also auth against MySQL via a custom git proxy (babeld). To be able to serve under the high…
Пост-мортем полуторачасового отключения Reddit в первой половине августа.
В процессе миграции в Amazon Cloud Zookeeper включился раньше времени с неконсистентными данными и их autoscaler повырубал половину серверов, которые в этих данных отсутствовали.
http://amp.gs/8usZ
В процессе миграции в Amazon Cloud Zookeeper включился раньше времени с неконсистентными данными и их autoscaler повырубал половину серверов, которые в этих данных отсутствовали.
http://amp.gs/8usZ
reddit
r/announcements - Why Reddit was down on Aug 11
26,373 votes and 3,333 comments so far on Reddit
Nathan McCauley опубликовал в блоге Docker заметку о механизмах безопасности контейнеров. Сама заметка небольшая, но содержит ценные ссылки на 100-страничное исследование от NCC Group, подробно рассматривающее безопасность как Docker, так и альтернативных систем контейнеризации.
http://amp.gs/8uDX
http://amp.gs/8uDX
Docker Blog
Your Software is Safer in Docker Containers
The Docker security philosophy is Secure by Default. Meaning security should be inherent in the platform for all applications and not a separate solution that needs to be deployed, configured and integrated. Today, Docker Engine supports all of the isolation…
MessageBird выложили в открытый доступ PushProm - прокси для Prometheus, позволяющую агрегировать метрики от приложений, которые не поддерживают polling.
http://amp.gs/8u0R
http://amp.gs/8u0R
MessageBird
Open-sourcing Pushprom: our solution to Prometheus data retrieval issues
We created a proxy to solve the data retrieval issues we encountered upon integrating Prometheus into our monitoring setup.
Антон Турецкий из Badoo написал классную статью по использованию MACVLAN в новом Docker'е.
http://amp.gs/8u3d
http://amp.gs/8u3d
Хабр
Docker: гибкая сеть без NAT на все случаи жизни
Время на месте не стоит, и у горячо любимого всеми Docker от версии к версии появляется новый функционал. Случается так, что когда читаешь Changelog для новой...