Обратимые и необратимые решения: сколько стоит откат
Сцена · «откатим, если что»
Команда решает навести порядок с деньгами. В таблице заказов сумма лежит
в колонке amount дробным числом рублей, а нужны копейки целым числом и
отдельная валюта. Кто-то предлагает: давайте просто поменяем схему, одна
миграция, а если что, откатим релиз.
Миграция добавляет amount_kop и currency, переносит данные и удаляет
amount. Релиз уходит в пятницу вечером. Через два часа выясняется, что
соседняя команда читает таблицу заказов напрямую для своей аналитики, и её
ночная выгрузка упала. Команда делает git revert.
Откат не помогает. Старый код читает колонку amount, которой больше нет.
Заказы за два часа существуют только в новом формате. Мобильное приложение,
которое утром ушло в магазины, уже ждёт от API поле amount_kop, и
отозвать его с телефонов нельзя. Письма с суммами заказов, отправленные за
эти два часа, уже у клиентов.
План «откатим, если что» оказался планом отката только для кода. Всё остальное откатывать было некуда.
Карта урока · что заберёшь
- Два типа решений по письму Безоса и главную мысль этого письма.
- Из чего складывается цена отката: данные, простой, API, мобильные клиенты, другие команды, внешние эффекты.
- Сколько тратить на исследование риска в зависимости от двери.
- Как превратить одностворчатую дверь в двустворчатую: изоляция, адаптеры, флаги, двойная запись.
- Почему двери закрываются со временем.
- Какие действия агенту нельзя делать без подтверждения.
Две двери · Type 1 и Type 2
Метафора пришла из письма Джеффа Безоса акционерам Amazon за 2015 год, в разделе про «машину изобретений». Безос делит решения на два типа.
Type 1: решения с большими последствиями, необратимые или почти необратимые. Это одностворчатые двери: вошёл, и назад дороги нет. Такие решения принимают методично, медленно, с обсуждением.
Type 2: большинство решений. Их можно поменять, это двустворчатые двери: не понравилось за дверью, вышел обратно. Такие решения можно и нужно принимать быстро, силами людей с хорошим суждением или маленьких групп.
Классификация выглядит простой, но главное в письме другое. Безос пишет о ловушке роста: чем больше организация, тем чаще она гоняет тяжёлый процесс первого типа почти для всех решений, включая решения второго типа. Итог: медлительность, бездумное избегание риска, мало экспериментов и меньше изобретений. В сноске он замечает, что обратная ошибка, лёгкий процесс для решений первого типа, встречается реже, и тут работает ошибка выжившего: компании, которые так делают, вымирают, не успев вырасти.
В уроке про ADR двери отвечали на вопрос «писать ли запись». Этот урок отвечает на два других: как понять, какая дверь перед тобой, и как превратить одну в другую.
Цена отката · из чего она складывается
Откатить код почти всегда дёшево: git revert и новый деплой. Дорого всё,
что код успел изменить за пределами репозитория:
- Данные. Сконвертированные, удалённые, записанные в новом формате. Конвертация с потерей информации (округлили, обрезали, слили две записи в одну) необратима совсем: исходных значений больше нет нигде.
- Простой. Если откат требует остановить сервис, у него есть цена в минутах и деньгах, и иногда она выше, чем цена жить с ошибкой.
- Версии API. Опубликованный контракт начинает жить у клиентов. Убрать поле или поменять смысл значит сломать тех, кто на него опирается.
- Мобильные клиенты. Старые версии приложения живут на телефонах месяцами, обновить их принудительно нельзя, а новая версия проходит проверку магазина. Сервер обязан понимать все живые версии клиента.
- Зависимости других команд. Их код, их релизы, их планы. Откат у тебя означает срочную работу у них.
- Внешние эффекты. Отправленные письма, списанные деньги, сообщения партнёрам. Их не откатить, их можно только компенсировать.
Отсюда один вопрос, который отличает двери на практике: что останется, если откатить код? Если ничего, перед тобой двустворчатая дверь, и решение можно принимать быстро. Если остаются данные, клиенты, чужой код или отправленные письма, дверь одностворчатая, даже если дифф выглядит простым.
В сцене миграция выглядела как техническая мелочь на двадцать строк, а задевала четыре источника цены сразу: данные, мобильный клиент, соседнюю команду и письма.
дальше после входа
Урок целиком открыт всем, кто вошёл. Войди по своему email, чтобы читать дальше.
Вход пока по приглашению. Если хочешь учиться, напиши Vassiliy.