Раздел 16 · Архитектура и решения

Обратимые и необратимые решения: сколько стоит откат

middle-senior~40 мин

без входаВойди, чтобы отмечать прогресс, вести заметки и решать задачи в редакторе. войти

Обратимые и необратимые решения: сколько стоит откат

Сцена · «откатим, если что»

Команда решает навести порядок с деньгами. В таблице заказов сумма лежит в колонке amount дробным числом рублей, а нужны копейки целым числом и отдельная валюта. Кто-то предлагает: давайте просто поменяем схему, одна миграция, а если что, откатим релиз.

Миграция добавляет amount_kop и currency, переносит данные и удаляет amount. Релиз уходит в пятницу вечером. Через два часа выясняется, что соседняя команда читает таблицу заказов напрямую для своей аналитики, и её ночная выгрузка упала. Команда делает git revert.

Откат не помогает. Старый код читает колонку amount, которой больше нет. Заказы за два часа существуют только в новом формате. Мобильное приложение, которое утром ушло в магазины, уже ждёт от API поле amount_kop, и отозвать его с телефонов нельзя. Письма с суммами заказов, отправленные за эти два часа, уже у клиентов.

План «откатим, если что» оказался планом отката только для кода. Всё остальное откатывать было некуда.

Карта урока · что заберёшь

  • Два типа решений по письму Безоса и главную мысль этого письма.
  • Из чего складывается цена отката: данные, простой, API, мобильные клиенты, другие команды, внешние эффекты.
  • Сколько тратить на исследование риска в зависимости от двери.
  • Как превратить одностворчатую дверь в двустворчатую: изоляция, адаптеры, флаги, двойная запись.
  • Почему двери закрываются со временем.
  • Какие действия агенту нельзя делать без подтверждения.

Две двери · Type 1 и Type 2

Метафора пришла из письма Джеффа Безоса акционерам Amazon за 2015 год, в разделе про «машину изобретений». Безос делит решения на два типа.

Type 1: решения с большими последствиями, необратимые или почти необратимые. Это одностворчатые двери: вошёл, и назад дороги нет. Такие решения принимают методично, медленно, с обсуждением.

Type 2: большинство решений. Их можно поменять, это двустворчатые двери: не понравилось за дверью, вышел обратно. Такие решения можно и нужно принимать быстро, силами людей с хорошим суждением или маленьких групп.

Классификация выглядит простой, но главное в письме другое. Безос пишет о ловушке роста: чем больше организация, тем чаще она гоняет тяжёлый процесс первого типа почти для всех решений, включая решения второго типа. Итог: медлительность, бездумное избегание риска, мало экспериментов и меньше изобретений. В сноске он замечает, что обратная ошибка, лёгкий процесс для решений первого типа, встречается реже, и тут работает ошибка выжившего: компании, которые так делают, вымирают, не успев вырасти.

В уроке про ADR двери отвечали на вопрос «писать ли запись». Этот урок отвечает на два других: как понять, какая дверь перед тобой, и как превратить одну в другую.

Цена отката · из чего она складывается

Откатить код почти всегда дёшево: git revert и новый деплой. Дорого всё, что код успел изменить за пределами репозитория:

  • Данные. Сконвертированные, удалённые, записанные в новом формате. Конвертация с потерей информации (округлили, обрезали, слили две записи в одну) необратима совсем: исходных значений больше нет нигде.
  • Простой. Если откат требует остановить сервис, у него есть цена в минутах и деньгах, и иногда она выше, чем цена жить с ошибкой.
  • Версии API. Опубликованный контракт начинает жить у клиентов. Убрать поле или поменять смысл значит сломать тех, кто на него опирается.
  • Мобильные клиенты. Старые версии приложения живут на телефонах месяцами, обновить их принудительно нельзя, а новая версия проходит проверку магазина. Сервер обязан понимать все живые версии клиента.
  • Зависимости других команд. Их код, их релизы, их планы. Откат у тебя означает срочную работу у них.
  • Внешние эффекты. Отправленные письма, списанные деньги, сообщения партнёрам. Их не откатить, их можно только компенсировать.

Отсюда один вопрос, который отличает двери на практике: что останется, если откатить код? Если ничего, перед тобой двустворчатая дверь, и решение можно принимать быстро. Если остаются данные, клиенты, чужой код или отправленные письма, дверь одностворчатая, даже если дифф выглядит простым.

В сцене миграция выглядела как техническая мелочь на двадцать строк, а задевала четыре источника цены сразу: данные, мобильный клиент, соседнюю команду и письма.

дальше после входа

Урок целиком открыт всем, кто вошёл. Войди по своему email, чтобы читать дальше.

Вход пока по приглашению. Если хочешь учиться, напиши Vassiliy.