толи их неправильно распредилили и они оказались в одном рэке

толи просто неповезло

и на практике оказалось и то и то

В тот день в ДЦ проводились работы которые затронули несколько десятков серверов

но вернемся к проблеме

теперь нам нужно понять как починить расхождение

есть два пути

проиграть записи с B на X

руками или репликацией

второй - просто забить

но у нас был AUTO_INC

и убить оказалось проще (данные можно было позволить себе потерять)

Выводы )

Также еще можно немного поправить оркестратор

Вопросы-ответы

Челвоек задал вопрос - не стоит ли убить те сервера с которых переключение?

Но оркестратор не смог бы в той ситуации определить кого убивать

В упрощенном виде - сервера перезагрузили по питанию

Из-за ошибки скрипта - не очень понятно кого было убивать - A, X, B?

по хорошему должны были умереть A и B