DevOps Deflope News – Telegram
DevOps Deflope News
5.75K subscribers
24 photos
1.52K links
DevOps Deflope News — выборка новостей и тулинга от инженеров «Фланта». Берём весь информационный поток и пропускаем через фильтр здравого смысла. Ещё пишем подкаст.

Рекламу не размещаем. Для связи @dvpsdflpfdbkbot.
Download Telegram
Когда ваших данных становится очень много, изменение их структуры становится вызовом для вас и вашего проекта. Stripe рассказал почему миграция данных это сложно, а также повествует о способах решения ряда проблем.
http://amp.gs/164X
За 8 летнюю историю проекта mongodb, вокруг него было множество споров и драм на различные темы связанные с надёжностью хранения данных.
И вот, судя по всему одна из важнейших проблем (по мнению ненавистников) решена.
http://amp.gs/16Nj
Короткая и интересная статья о том, как по разному можно интерпретировать и визуализировать изменения в time series данных. И о том, как же важно понимать чего вы хотите данных, и что означают изменения в них.
http://amp.gs/16u5
Ребята из Hashicorp, а в частности те что разрабатывают Nomad, подгоняют нам очередную флеймообразующую тему.
Вместо стандартного подхода с использованием воркеров для разбирания очередей заданий, они предлагают запускать задачи по запросу при помощи их механизма Nomad Dispatch.
Это решение на их взгляд даёт ряд преимуществ связанных с более оптимальной утилизацией ресурсов.
http://amp.gs/16we
Вышел Go 1.8. Основные новшества:

* Бэкенд компилятора SSA (Static Single Assignment) включен для всех архитектур, а не только для x86_64. Прирост производительности генерируемого кода при его использовании составляет 5-35%
* Сборщик мусора теперь работает более короткими циклами, которые не превышают 100 мкс и обычно длятся около 10 мкс
* В модуль с реализацией HTTP-сервера добавлена поддержка операций Push для HTTP/2
* В модуль sort добавлена новая функция Slice, упрощающая сортировку данных с типом slice
* Проведена оптимизация значительного числа модулей

http://amp.gs/YYYA
Пост-мортем аварии Instapaper. Ребята упали 9 февраля и окончательно смогли восстановиться только к 14 февраля. Причина — уперлись в лимит размера файла (2TB) на RDS-инстансе. Починить все получилось только полным дампом и восстановлением 2.5-терабайтной базы данных.

Вишенка на торте: по словам инженеров Instapaper, RDS не имеет никаких средств мониторинга/алертинга таких проблем.

http://amp.gs/YYlv
Docker сменил нумерацию версий. После 1.13 в марте выйдет 17.03.0. Release Candidat, кстати, уже доступен.

http://amp.gs/Yt76
Спецы из команды безопасности Google нашли серьезную уязвимость у провайдера CloudFlare, уязвимость похожа на Heartbleed, в определенной ситуации клиентам отдается часть содержимого оперативной памяти серверов CloudFlare. Проблема возникла из-за ошибки в коде сервера и была оперативно закрыта сотрудниками CloudFlare. Также появился отчет от CloudFlare, где они заверяют, что приватные ssl ключи не могли утечь, поскольку терминация ssl происходит на других машинах.

Отчет Google Project Zero http://amp.gs/YBSk

Отчет CloudFlare: http://amp.gs/YBSC
До главной DevOps коммьюнити-конференции этого года в России осталось чуть больше недели, напоминаем, что состоится она 11 марта. Самое время определяться тем, кто еще не определился, а тем, кто уже купил билет, самое время изучить программу.

Мы запустили локальный сайт конференции и там теперь можно купить билет и посмотреть доклады и докладчиков в более удобном виде — http://amp.gs/YPPF

А в программе есть много важного и полезного.

Николай Кныш и Роман Мурашкин из Райффайзенбанка расскажут про DevOps-трансформацию у себя в IT-департаменте. Это не будет рассказ про эффективные процессы и эффективных менеджеров, ребята из Райфа действительно круто подошли к вопросу и решили создать среду, где DevOps возможен, тезисы доклада тут — http://amp.gs/YPP2.

В Альфа-Лаборатории уже давно экспериментируют с Docker и Mesosphere, но считают, что культура и здравый смысл важнее всего, о здравом смысле в DevOps будет доклад Александра Тарасова и Юлии Викторовой http://amp.gs/YPP3

Костя Назаров из Tarantool расскажет, как он сделал свое собственное облако http://amp.gs/YPPH Думаю, это будет феерично, он обещал для своего доклада рисовать от руки!

Антон Иванов из HeadHunter поделиться своим опытом управления SRE-отделом http://amp.gs/YPPw.

Друзья ждем вас, билеты можно купить здесь — http://amp.gs/YPP0
Интересная статья от Adrian Cockcroft (VP Cloud Architecture Strategy at AWS), в которой он размышляет о том, как архитектуры современных приложений смещаются в сторону концепции function as a service и как это соотносится с уже популярными событийными моделями.
Также он рассмматривает как совмещение этих двух подходов радикально сокращает time to value.
http://amp.gs/Ygbj
Доклад от Josh Evans (Director of Operations Engineering at Netflix) с Qcon в котором он рассказывает о «живом» и «хаотичном» мире микросервисов который существует в Netflix.
Он начинает с базового описания анатомии микросверисов, вызовы которые приходится принимать при разработке распределенных архитектур, и преимущества которые они дают.
А затем, он повествует о том что фундаментом для овладения совершенным мастерством в разработке микросервисов является применение определенных и специфичных культурных, архитектурных и эксплуатационных подходов.
https://www.youtube.com/watch?v=CZ3wIuvmHeM
Daniil Baturin написал прекрасный cheatsheet по iproute2. Рекомендуем для беглого просмотра всем, кто хочет обозреть возможности iproute2.
http://amp.gs/YEGh
Все мы помним про старинные рекомендации по установке размера swap в linux системах равной 2х кратному размеру RAM.
Но ведь ядро, фс, шедулеры сильно изменились за последнее десятилетие. Актуальны ли рекомендации на данный момент ?
Прекрасная (и короткая) статья от инженера из RH рассказывает о том, как используется swap в современных системах и какие есть рекомендации по его тюнингу для повышения производительности на данный момент.
http://amp.gs/YE7h
Интересное решение!
Ребята рассказывают о решении, в котором используется Kafka в качестве транспорта реплики MySQL
http://amp.gs/YVBJ
Первая статья из серии о написании concurrent приложений.
В данной статье ребята рассматривают как операционная система управляет планированием IO операций наших приложений.
http://amp.gs/YVx6
Без правильных людей понимающих что DevOps это не тайтл, а изменение в культуре которые должны помагать как руководителям так и девелоперам, очень просто сделать что-то не так.
Чтобы понять, подходит ли вам кандидат вот вам 10 вопросов, на которые должен ответить любой сотрудник который претендует на место в компании с развитой devops культурой.
http://amp.gs/YVe2
Интересный анализ методик devops при помощи теории ограничений и попытка ответа на 4 вопроса Голдратта.
http://amp.gs/Y9vh
Facebook зарелизил проект Prophet — инструмент для предсказания временных рядов (имеющих достаточно большую историю).
На самом деле это чертовски сложная задача, и поэтому безумно приятно видеть такие инструменты в open source.
http://amp.gs/Y9Ro
Репозиторий на гитхабе с структурированной информацией о том, как проектировать большие масштабируемые системы.

http://amp.gs/YSgs