Обеспечение изменений
Обеспечение изменений существует для того, чтобы полезные изменения происходили безопасно и быстро, и свидетельства исследований поставки программного обеспечения таковы, что риском лучше управлять с помощью небольших изменений, коллегиального обзора и автоматических проверок, чем отправляя каждое изменение в комитет.
Почему это важно
Изменение это место, где непрерывная поставка и управление услугами сталкиваются чаще всего. Команды поставки хотят выпускать часто, потому что небольшие частые изменения легче понять и откатить. Эксплуатация и управление хотят избегать сбоев и вести записи, потому что прошлые изменения ломали услуги. Правы обе стороны. Разногласие обычно в том, как управлять риском: согласованием до изменения или качеством самого изменения и скоростью восстановления.
В ITIL 4 практика называется обеспечением изменений (change enablement). Новое название это заявление о цели. Цель дать возможность полезным изменениям происходить, а не предотвращать изменения. Более старые версии ITIL называли практику управлением изменениями (change management) и отводили ей сильную роль в согласованиях и графиках, что многие команды воспринимали как шлагбаум.
Эта тема использует лучшие из доступных свидетельств: руководство исследовательской программы DORA по согласованию изменений и ее метрики поставки программного обеспечения, прочитанные на страницах самой программы. Страницы DORA сообщают, что тяжелое внешнее согласование связано с худшими результатами поставки. Они также не дают размеров эффектов и статистических подробностей и ссылаются на отчет 2019 года для лежащего в основе исследования, поэтому считайте руководство сильным, но не окончательным и проверяйте его в собственном контексте. Словарь ITIL здесь происходит из широко публикуемых описаний, которые это руководство не смогло сверить с текстом владельца фреймворка (см. Тема 2.2 — ITIL).
Основные понятия
Что делает обеспечение изменений
Изменение это добавление, модификация или удаление чего-либо, что может повлиять на услугу. Обеспечение изменений это практика, следящая за тем, чтобы изменения оценивались, санкционировались и планировались так, чтобы управлять риском и давать полезным изменениям продвигаться. Практика также ведет запись того, что изменилось, что жизненно важно для реагирования на инциденты, поскольку многие инциденты начинаются с недавнего изменения (см. Тема 3.2 — Управление инцидентами).
Типы изменений
ITIL 4 широко описывают как признающий три типа изменений, у каждого свой путь:
| Тип | Что это | Типичный путь |
|---|---|---|
| Стандартное изменение | Низкорисковое, хорошо понятное изменение, следующее документированной процедуре | Заранее санкционировано; записывается, без согласования в каждом случае |
| Обычное изменение | Изменение, требующее оценки и санкционирования | Оценивается по риску и влиянию, затем санкционируется соответствующим лицом или группой |
| Экстренное изменение | Изменение, которое необходимо внести срочно, например чтобы восстановить услугу | Ускоренное санкционирование с более полным обзором потом |
Названия и точные определения нужно сверять с публикациями владельца. Принцип устойчив: соответствуйте уровень контроля риску.
Орган, санкционирующий изменения
Каждому типу изменений нужен тот, у кого есть полномочия его одобрить. В более старой практике это часто был консультативный совет по изменениям (change advisory board, CAB). Страница DORA не отменяет CAB; она предлагает «стратегическую» роль: координация между командами, поддержка улучшения процессов и принятие деловых компромиссных решений, таких как время выхода на рынок против риска. Для рутинных изменений, говорится в ней, согласование лучше всего реализовать коллегиальным обзором в ходе разработки, подкрепленным автоматизацией.
Что DORA сообщает о согласовании
Страница DORA об упрощении согласования изменений говорит:
- Тяжелое внешнее согласование, такое как CAB или подпись старшего руководителя, связано с худшими результатами поставки программного обеспечения.
- Страница не сообщает о свидетельствах того, что более формальный внешний обзор снижает долю неудачных изменений.
- Она утверждает, что тяжелое согласование замедляет поставку, приводя к более крупным и редким релизам с более высоким риском, и говорит, что ее данные поддержали эту гипотезу.
Страница называет ловушки: опора на центральный CAB для ловли ошибок, применение одного процесса согласования ко всем изменениям независимо от риска, отсутствие улучшения процесса по метрикам и добавление процесса и согласований в ответ на нестабильность промышленной среды, что, по ее словам, обычно делает хуже. «Свидетельств не найдено» означает, что свидетельств пользы не нашли; это не доказывает, что внешний обзор не имеет эффекта. Страница не дает критериев того, что считать изменением с высоким риском, руководства по конкретным регуляциям и плана перехода для регулируемых отраслей.
Альтернатива: контроль в конвейере
DORA предлагает выполнять разделение обязанностей через коллегиальный обзор, записываемый в платформе разработки, и использовать непрерывное тестирование, непрерывную интеграцию и мониторинг, чтобы рано обнаруживать, предотвращать и исправлять плохие изменения. Она также предлагает относиться к платформе как к продукту, дающему разработчикам быструю обратную связь о безопасности, производительности, стабильности и дефектах, помечать изменения с высоким риском для дополнительной проверки и делать обычный процесс изменений достаточно быстрым, чтобы справляться с экстренными случаями. Контроль заключается в свидетельствах, которые производит конвейер: кто рецензировал, какие тесты прошли, что было развернуто и как это можно отменить.
Измерение изменений
Страница DORA о метриках эффективности поставки программного обеспечения перечисляет пять измерений:
| Измерение | Что это | Группа |
|---|---|---|
| Время выполнения изменения | Время от фиксации изменения в системе контроля версий до развертывания в промышленной среде | Пропускная способность |
| Частота развертывания | Как часто происходят развертывания | Пропускная способность |
| Время восстановления после неудачного развертывания | Сколько времени уходит на восстановление после развертывания, которое не удалось и требует немедленного вмешательства | Пропускная способность |
| Доля неудачных изменений | Доля развертываний, требующих немедленного вмешательства, такого как откат или срочное исправление | Нестабильность |
| Доля доработок после развертывания | Доля развертываний, являющихся незапланированными и вызванных инцидентом в промышленной среде | Нестабильность |
Страница говорит, что скорость и стабильность не являются компромиссом: измерения коррелируют для большинства команд, а лучшие команды хороши по всем пяти. Она предостерегает от превращения измерений в цели (закон Гудхарта), опоры на одну метрику, сравнения очень разных приложений и соревнования с другими командами. Она предлагает командам улучшаться относительно собственных прошлых результатов. Страница не дает пороговых эталонов или формул, поэтому определяйте каждое измерение для вашего контекста, прежде чем его использовать (см. Тема 5.6 — Метрики и измерения).
Записи и конфигурационный взгляд
Запись изменения должна сказать, что изменилось, почему, кто одобрил и когда оно было внесено и в идеале ссылаться на затронутые услуги. Система контроля версий, сборки и инструменты развертывания могут автоматически производить многое из этого. Связь изменений с конфигурацией услуг поддерживает анализ влияния и реагирование на инциденты (см. Тема 4.4 — Управление конфигурациями).
Изменение и релиз
Обеспечение изменений решает, может ли изменение продвигаться. Управление релизами и развертыванием доводит его до промышленной среды (см. Тема 3.5 — Управление релизами и развертыванием). В непрерывной поставке эти два на практике сливаются, а согласования встраиваются в конвейер.
Лучшие практики
- Классифицируйте изменения по риску. Определите короткий перечень типов изменений с критериями и примерами. Сопоставьте путь с риском, чтобы рутинные изменения были быстрыми, а рискованные получали внимание.
- Заранее санкционируйте изменения с низким риском. Для изменений, которые хорошо понятны, протестированы и обратимы, согласуйте стандартную процедуру и позвольте им продвигаться без согласования в каждом случае. Записывайте их автоматически.
- Сделайте коллегиальный обзор согласованием по умолчанию. Требуйте, чтобы второй человек проверял изменения до слияния, и записывайте обзор в платформе разработки. Это обеспечивает разделение обязанностей для большинства изменений, как описывает страница DORA.
- Автоматизируйте проверки. Запускайте тесты, проверки безопасности и проверки политик при каждом изменении и делайте результаты частью записи. Согласование на основе свидетельств сильнее согласования на основе формы.
- Держите изменения небольшими. Небольшие изменения легче рецензировать, тестировать и откатывать. Если изменение кажется рискованным, спросите, нельзя ли его разделить.
- Сделайте откат легким и отрепетированным. Для каждого типа изменений знайте, как его отменить, и тренируйтесь. Способность быстро восстановиться снижает потребность предсказывать каждый отказ.
- Помечайте изменения с высоким риском. Определите сигналы, такие как изменения платежной логики или общей инфраструктуры, запускающие дополнительный обзор. Применяйте более тяжелый путь только к ним.
- Дайте органу санкционирования стратегическую роль. Используйте любой центральный совет для координации между командами, разрешения конфликтов и деловых компромиссов. Не используйте его как контрольный пункт для каждого изменения.
- Обрабатывайте экстренные случаи обычным путем. Сделайте обычный процесс достаточно быстрым и надежным, чтобы экстренные изменения шли по нему, с обзором потом. Часто используемые экстренные пути сигнализируют, что обычный путь слишком медленный.
- Не добавляйте согласования после инцидента по умолчанию. Страница DORA говорит, что добавление процесса в ответ на нестабильность обычно делает хуже. Сначала спросите, не лучше ли исправление в виде лучших тестов, более мелких изменений или более быстрого восстановления.
- Измеряйте процесс. Отслеживайте время выполнения, время ожидания согласования, долю изменений, проходящих без ручного согласования, и долю неудачных изменений. Используйте измерения для улучшения, а не для ранжирования команд.
- Объясняйте процесс. Страница DORA отмечает, что ясное доведение существующего процесса до команд и помощь в навигации по нему связаны с лучшими результатами еще до того, как вы его меняете. Опубликуйте одностраничное руководство с примерами.
Вопросы для обсуждения с командой
Какая доля наших изменений низкорисковая и хорошо понятная и как они согласуются сегодня?
Возьмите месяц изменений и рассортируйте. Большинство команд обнаруживает, что подавляющее большинство рутинны. Спросите, как долго рутинные изменения ждут согласования и что добавляет согласующий. Ведущий может спросить, помнит ли кто-нибудь рутинное изменение, которое согласование уберегло от сбоя. Используйте ответ, чтобы определить первого кандидата на предварительное санкционирование.
Что на самом деле ловит наш шаг согласования?
Перечислите последние десять изменений, отклоненных или задержанных на согласовании, и почему. Сравните с проблемами, которые дошли до промышленной среды несмотря на согласование. Если согласование ловит мало, спросите, что поймало бы те же проблемы раньше, например тесты или коллегиальный обзор. Помните, что страница DORA не сообщает о свидетельствах того, что более формальный внешний обзор снижает долю неудачных изменений. Договоритесь об одном изменении, которое попробовать.
Как мы отменили бы плохое изменение и как быстро?
Выберите недавнее изменение и опишите откат. Если он неясен, не проверен или ручной, это и есть риск. Спросите, сколько это заняло бы и кто это сделал бы. Договоритесь отрепетировать один откат в этом месяце. Команда, способная восстановиться за минуты, может принять больше изменений.
Какие из наших изменений требуют дополнительной проверки и как мы их распознаем?
Соберите примеры изменений, вызвавших серьезные инциденты. Ищите общие черты: общая инфраструктура, средства безопасности, миграции данных. Составьте три сигнала, помечающих изменение как высокорисковое. Спросите, кто должен рецензировать помеченные изменения и как быстро.
Когда мы вводили контроль после инцидента и помогло ли это?
Попросите примеры. Перечислите, что было добавлено, какие проблемы это решало и возвращалась ли проблема. Страница DORA называет добавление согласований в ответ на нестабильность ловушкой. Обсудите, сработал бы другой ответ, такой как лучшие тесты или более мелкие изменения. Запишите один урок.
Какие свидетельства из нашего конвейера аудитор принял бы вместо подписи?
Пригласите аудитора или коллегу по соответствию требованиям. Перечислите свидетельства, которые конвейер уже производит: обзоры, результаты тестов, записи о развертывании. Спросите, чего не хватает. Многие аудиторы принимают записанный коллегиальный обзор и автоматические свидетельства, если они надежны. Договоритесь о кратком описании контроля и пробном периоде.
На практике: пример agile ITIL
ИТ-отдел региональной больницы поддерживает систему клинического расписания, которую обновляет собственная команда из семи человек. Каждое изменение, от исправления опечатки до миграции базы данных, идет на еженедельный консультативный совет по изменениям. Небольшие исправления ждут до восьми дней. Врачи жалуются, а разработчики начали объединять исправления в более крупные релизы, чтобы избежать очереди, что делает каждый релиз рискованнее.
Руководитель ИТ и председатель совета пересматривают год изменений. Большинство были небольшими, два вызвали инциденты, и ни одно из них совет не поймал. Они разрабатывают трехполосный подход. Стандартные изменения, такие как изменения текста и конфигурации в согласованных пределах, при пройденных автоматических тестах и проверенном откате, санкционируются заранее и регистрируются автоматически. Обычные изменения требуют коллегиального обзора, записанного в платформе разработки, и проверки по короткому перечню сигналов высокого риска, таких как изменения обработки данных пациентов. Изменения, помеченные как высокорисковые, идут в совет, который собирается дважды в неделю. Экстренные изменения идут по обычному пути с обзором после внедрения.
Через четыре месяца стандартные изменения вступают в силу в течение дня, а совет видит около пятой части прежнего объема. Доля неудачных изменений не растет. Проблемы остаются. Двое разработчиков непоследовательно применяют сигналы высокого риска, и одно помеченное изменение попало в совет поздно, а внутренний аудит просит свидетельства того, что коллегиальные обзоры не штамп. Команда пишет примеры сигналов, добавляет выборочный обзор коллегиальных обзоров старшим инженером и договаривается с аудитом пересмотреть свидетельства на следующей ежеквартальной встрече.
Четыре точки зрения
Продуктовые команды и команды поставки
Команды поставки несут большую часть контроля: обзор, тесты, небольшие изменения и откат. Встраивайте их в конвейер и делайте свидетельства видимыми. Держите изменения небольшими и говорите эксплуатации, что ожидается. Используйте процесс изменений как место для обмена информацией о рисках, а не только для получения разрешения.
Сервисные и операционные команды
Команды эксплуатации знают, какие изменения вредили услугам. Делитесь этим знанием как сигналами дополнительного обзора и помогайте создавать проверки, ловящие их рано. Поддерживайте более легкие пути для низкорисковых изменений и ведите записи, ускоряющие реагирование на инциденты.
Руководство и управление
Руководители решают, сколько согласований требует организация. Руководство DORA предлагает просить свидетельства контроля, а не подписи на каждом изменении. Поддерживайте измерение времени выполнения и доли неудачных изменений и избегайте добавления процесса после инцидентов без изучения причин. Договоритесь с аудитом, какие свидетельства приемлемы.
Заказчики и пользователи
Заказчики и пользователи выигрывают от частых небольших улучшений и меньшего числа крупных нарушений. Ожидайте, что вам расскажут об изменениях, затрагивающих вас, простым языком и заранее. Если у вас есть особые потребности, такие как периоды заморозки, сообщите поставщику заранее, чтобы их можно было учесть.
Типичные причины неудач
- Один путь для каждого изменения. Рутинные изменения стоят в очереди за рискованными. Вместо этого классифицируйте по риску и дайте каждому классу свой путь.
- Согласование как единственный контроль. Подпись заменяет качество. Вместо этого встраивайте тесты, обзор и откат в конвейер.
- Совет, рецензирующий то, что не может оценить. Члены одобряют изменения, которых не понимают. Вместо этого направляйте изменения к людям со знаниями, а совет используйте для координации.
- Группировка, чтобы избежать очереди. Команды объединяют изменения, делая каждый релиз рискованнее. Вместо этого сделайте очередь достаточно короткой, чтобы небольшие изменения были легким путем.
- Добавление контроля после каждого инцидента. Процесс растет, скорость падает. Вместо этого ищите причину и устраняйте ее тестами, более мелкими изменениями или более быстрым восстановлением.
- Формальный коллегиальный обзор. Обзоры формальны, но поверхностны. Вместо этого делайте выборочные проверки, делитесь примерами хороших обзоров и держите изменения достаточно малыми для рецензирования.
- Нет отката. Изменения нельзя отменить. Вместо этого требуйте и репетируйте откат для каждого типа изменений.
- Манипулирование метриками. Команды дробят изменения или скрывают сбои, чтобы хорошо выглядеть. Вместо этого используйте несколько измерений, пересматривайте их вместе и сосредоточьтесь на улучшении во времени.
Модель зрелости
| Измерение | Инициация | Развитие | Стандартизация | Управление | Оркестрация |
|---|---|---|---|---|---|
| Классификация и пути | Все изменения идут одним путем или никаким | У некоторых команд есть быстрый путь для простых изменений | Типы изменений с критериями и отдельными путями стандартны | Доля изменений по путям и время ожидания измеряются и настраиваются | Пути корректируются между командами на основе общих свидетельств |
| Согласование и свидетельства | Согласование подписью или не записывается | Некоторые изменения проходят коллегиальный обзор | Коллегиальный обзор и автоматические проверки записываются для большинства изменений | Качество обзора и свидетельства проверяются выборочно и улучшаются | Свидетельства автоматически поступают аудиту и партнерам |
| Восстановление | Откат произвольный | У некоторых изменений есть шаги отката | Откат определен и отрепетирован для каждого типа изменений | Время восстановления измеряется и сокращается | Практики восстановления разделяются и проверяются между командами и поставщиками |
| Измерение и улучшение | Мало измерений | Некоторые команды отслеживают время выполнения | Время выполнения, частота, доля неудач и время восстановления отслеживаются по каждой услуге | Измерения направляют запланированные улучшения и не используются как цели | Команды учатся на измерениях друг друга и улучшаются по всей организации |
Контрольный список
- Мы определили типы изменений с критериями и примерами.
- Низкорисковые, хорошо понятные изменения санкционируются заранее и записываются автоматически.
- Коллегиальный обзор записывается в платформе разработки для обычных изменений.
- Автоматические тесты и проверки запускаются при каждом изменении.
- У каждого типа изменений есть отрепетированный откат.
- У нас есть сигналы, помечающие изменения с высоким риском для дополнительной проверки.
- У любого центрального совета есть ясная роль в координации и компромиссах.
- Мы отслеживаем время выполнения изменения, частоту развертывания, время восстановления после неудачного развертывания и долю неудачных изменений по каждой услуге.
- Наши аудиторы сказали, какие свидетельства они принимают вместо подписей.
- У нас есть одностраничное руководство по процессу изменений с примерами.
ИИ-промпты
Назначение: классифицировать изменения прошлого месяца по риску и пути согласования.
Below is a list of the changes we made last month: [paste one line per change with a short description, who reviewed it, how long it waited for approval, and whether it caused an incident; remove personal data].
Help me sort them into three groups: routine and low risk, needs normal assessment, and needs extra scrutiny. For each group, say what features of the changes in my list led you to the grouping, using only the text. Calculate the share in each group and the average wait for approval from my numbers only. Suggest which routine changes might be pre-authorized and what safeguards I would want first. Do not guess at risks beyond what I wrote. List what you are unsure of.
Назначение: написать процедуру стандартного изменения.
Help me write a procedure for a standard (pre-authorized) change: [name the change, for example "update a configuration value within agreed limits"].
How it is done today, step by step: [paste].
Checks that exist: [tests, scans, reviews].
How to undo it: [describe, or write "unknown"].
Who owns the procedure: [role].
Write a one-page procedure with: when it applies, the criteria that make a change standard, the steps, the checks that must pass, how it is recorded, how to undo it, and when to treat it as a normal change instead. Mark every statement you added as an assumption. Do not claim any rule requires something unless I pasted its text. Ask clarifying questions first, and list what you are unsure of.
Назначение: подготовиться к обсуждению с аудитором свидетельств, которые производит наш конвейер.
An auditor asks how we authorize changes. Our pipeline does the following: [describe code review, tests, scans, deployment record, who can approve, and where records are kept].
The auditor's concern in their words: [paste, or write "unknown"].
Rules we know apply, with source text if you have it: [paste, or write "none known"].
Make a table of what evidence each step produces, where it is stored, who can alter it, and what gaps the auditor may notice. Suggest three lightweight ways to strengthen the weakest points. Do not state that any standard requires something unless I pasted its text. Mark assumptions, and list what you are unsure of.
Назначение: разработать испытание более легкого согласования.
Design a three-month trial of lighter approval for [service].
Current process: [describe].
Change volume and types last quarter: [paste counts from your records].
Measures we already have: [list, for example lead time and change fail rate].
Concerns from audit or operations: [list].
Propose: which change types to include, safeguards, what to measure and how often (without inventing targets), what would make us stop or pause the trial, and how to report results. Ask clarifying questions first, mark assumptions, and list what you are unsure of.
ИИ-навыки
- change-request: используйте, чтобы составлять записи об изменениях с тем, что нужно эксплуатации и аудиторам.
- enterprise-change-management: используйте, когда изменение организационное и требует планирования для людей, а не только для систем.
- release-notes: используйте, чтобы сообщить пользователям и службе service desk, что делает изменение.
- two-way-door-decisions: используйте, чтобы отличать обратимые решения, которые можно принимать быстро, от необратимых, требующих большей осторожности.
- risk-register: используйте, чтобы записывать и пересматривать риски, которые вносит изменение, и способы их контроля.
Ключевые источники
- Streamlining change approval (DORA, dora.dev): руководство исследовательской программы по коллегиальному обзору, автоматизации и роли совета по изменениям.
- DORA's software delivery performance metrics (dora.dev): определения и предостережения для времени выполнения изменения, частоты развертывания, времени восстановления, доли неудачных изменений и доли доработок.
- ITIL (Wikipedia): справка о версиях ITIL и переходе на ITIL 4.
- Continuous delivery (Wikipedia): справка о практиках, делающих небольшие частые изменения безопасными.
Источники
- Streamlining change approval — DORA, dora.dev — https://dora.dev/capabilities/streamlining-change-approval/
- DORA's software delivery performance metrics — DORA, dora.dev — https://dora.dev/guides/dora-metrics-four-keys/
- ITIL — Wikipedia — https://en.wikipedia.org/wiki/ITIL
- Continuous delivery — Wikipedia — https://en.wikipedia.org/wiki/Continuous_delivery
- Change management — Wikipedia — https://en.wikipedia.org/wiki/Change_management
- DevOps — Wikipedia — https://en.wikipedia.org/wiki/DevOps
- Separation of duties — Wikipedia — https://en.wikipedia.org/wiki/Separation_of_duties
- Version control — Wikipedia — https://en.wikipedia.org/wiki/Version_control
- Goodhart's law — Wikipedia — https://en.wikipedia.org/wiki/Goodhart%27s_law