Почему это важно

Когда что-то ломается, первые вопросы всегда одни и те же. Что это за компонент? С чем он соединен? Что изменилось? Кто им владеет? Если на поиск ответов уходит час, инцидент, который можно было исправить за минуты, затягивается. Когда планируется изменение, те же вопросы решают, понимаете ли вы риск. Хорошая картина услуги и ее частей это одна из самых полезных вещей, которые может иметь команда эксплуатации.

Это также одна из самых трудных вещей для поддержания в правдивом состоянии. Документы об инфраструктуре, нарисованные один раз, устаревают в течение недель. Базы данных компонентов, ведущиеся вручную, ошибочны так, что никто этого не видит. Гибкие и облачные способы работы ухудшают это в одном отношении, порождая множество мелких быстро меняющихся частей, и улучшают в другом, потому что конфигурацию можно записать как код, хранить в системе контроля версий и применять автоматически.

Статья английской Wikipedia об управлении конфигурациями описывает его как управленческий процесс установления и поддержания согласованности между атрибутами продукта и его требованиями, проектом и эксплуатационной информацией на протяжении его жизни, с корнями в Министерстве обороны США в 1950-х годах. Статья о базах данных управления конфигурациями описывает термин ITIL для хранилища конфигурационных единиц и их отношений. Статья об инфраструктуре как коде описывает управление ресурсами через машиночитаемые файлы определений. Вместе они дают традиционный взгляд и современный, и эта тема их соединяет.

Основные понятия

Управление конфигурациями в целом

Согласно Wikipedia, управление конфигурациями (configuration management, CM) используется в военных системах, в управлении ИТ-услугами по ITIL и в гражданском строительстве. Его история начинается в Министерстве обороны США в 1950-х годах как технической дисциплины для оборудования, а военные стандарты конца 1960-х и 1970-х годов превратили его в самостоятельную дисциплину. Статья называет несколько стандартов, включая ANSI/EIA-649, ISO 10007 (редакция 2017 года) и IEEE 828-2012. Основные дисциплины, которые она перечисляет, из военных справочников и стандарта EIA, таковы:

Дисциплина Что она делает
Планирование и управление План, охватывающий людей, обучение, соглашения об именовании, аудиты и требования к поставщикам
Идентификация конфигурации Установление и поддержание базовых линий, определяющих архитектуру и компоненты; отслеживаемые продукты это конфигурационные единицы (CI)
Контроль конфигурации Оценка запросов на изменения и их одобрение или отклонение
Учет состояния конфигурации Запись и отчетность об описаниях CI и отклонениях от базовой линии
Проверка и аудит Независимые проверки того, что система соответствует документации и требованиям

Базовая линия (baseline) это согласованная точка отсчета; когда атрибут зафиксирован в базовой линии, изменения проходят формальный контроль, оцениваются, одобряются и затем снова фиксируются. Статья отличает управление конфигурациями от управления активами, сосредоточенного на финансовом учете и стоимости ИТ-активов (см. Тема 4.1 — Управление ИТ-активами).

Управление конфигурациями программного обеспечения

Статья описывает управление конфигурациями программного обеспечения как определение атрибутов программного обеспечения в различные моменты и контроль изменений для поддержания целостности и прослеживаемости, с теми же четырьмя процедурами идентификации, контроля, учета состояния и аудитов. Системы контроля версий, инструменты сборки и записи о релизах современные случаи.

База данных управления конфигурациями

Wikipedia описывает базу данных управления конфигурациями (configuration management database, CMDB) как термин ITIL для базы данных, хранящей информацию об аппаратных и программных активах организации, то есть CI, и отношениях между ними. Она «представляет санкционированную конфигурацию значимых компонентов ИТ-среды». Ключевые моменты статьи:

  • У CI есть атрибуты, такие как идентификатор, названия, описания, владение и важность, число которых может достигать сотен.
  • Отношения обычно связывают исходный CI с целевым CI. Более развитые отношения добавляют дескриптор, например, база данных является компонентом приложения.
  • Федерация: реализации часто объединяют данные из таких источников, как управление активами, чтобы каждый источник сохранял контроль над своими данными; статья противопоставляет это копированию данных в CMDB.
  • Применения: анализ влияния, анализ первопричин, управление изменениями, управление инцидентами, инвентаризация и сборки.
  • Типы CI: оборудование, программное обеспечение, связь и сети, местоположение, документация и люди; зрелые организации добавляют деловые типы, такие как продукты и поставщики.
  • Трудности: актуальность (сбор данных на протяжении жизненного цикла каждого CI), сопровождение (поддержание высокого качества данных, для чего нужно несколько специализированных ролей) и удобство использования (CMDB часто представляют собой обычные базы данных без визуализации, поэтому может понадобиться дополнительный слой приложений).

Статья называет ключевыми факторами успеха автоматическое обнаружение CI и отслеживание изменений. Она не указывает даты основания, конкретной версии ITIL и данных о внедрении и помечена как нуждающаяся в большем числе ссылок. Она также говорит, что ITIL переименовал процесс в Service Asset and Configuration Management в версии 3 ITIL (это из статьи об управлении конфигурациями).

Инфраструктура как код

Статья об инфраструктуре как коде описывает практику управления и выделения ресурсов дата-центров через машиночитаемые файлы определений, а не ручной настройкой или интерактивными инструментами, причем определения хранятся в системе контроля версий. Она различает:

  • Декларативные подходы, описывающие желаемое конечное состояние и позволяющие системе вычислить шаги, и императивные подходы, задающие команды по порядку. Статья говорит, что IaC чаще использует декларативные определения.
  • Методы толкания (push), когда управляющая система отправляет инструкции серверам, и методы вытягивания (pull), когда серверы сами получают свои инструкции.

Она называет множество инструментов от CFEngine (1993) до Terraform, Ansible, Puppet, Chef, Pulumi и OpenTofu и связывает практику с DevOps тем, что вовлекает разработчиков в конфигурацию и привлекает эксплуатацию раньше. Утверждения о выгодах, касающиеся стоимости, скорости и сокращения человеческих ошибок, помечены как нуждающиеся в ссылках. Она ссылается на отчет Unit 42 2020 года, нашедший около 200 000 потенциальных уязвимостей в шаблонах IaC, напоминая, что код тоже может нести изъяны. Статья не упоминает дрейф конфигурации и идемпотентность.

Объявленная и обнаруженная конфигурация

Полезный способ думать о современном управлении конфигурациями состоит в том, что есть два источника истины, и ценность в их сравнении:

Источник Что он говорит Сильная сторона Слабость
Объявленная (код, определения в системе контроля версий) Какой мы хотим систему Можно рецензировать, версионируется, повторяема Может не совпадать с тем, что работает
Обнаруженная (сканирования, API облака, агенты) Что существует сейчас Отражает действительность Не говорит, что задумано и зачем

CMDB, питаемая обоими, может показывать дрейф (drift), разницу между задуманным и фактическим состоянием. Источники, прочитанные для этого руководства, не используют это слово, но оно называет проблему, которую должны ловить дисциплины CM учета состояния и аудита.

Управление конфигурациями и изменения

Контроль конфигурации и обеспечение изменений близкие партнеры (см. Тема 3.4 — Обеспечение изменений). Дисциплины CM говорят, что изменения базовых элементов оцениваются и одобряются. В установке на основе конвейера изменение кода, определяющего инфраструктуру, рецензируется и тестируется, как любой другой код, а запись конвейера показывает, кто что изменил и когда. CMDB или ее эквивалент затем отражает результат.

Использование в управлении услугами

Отношения, записанные в данных конфигурации, отвечают на вопросы в других практиках:

  • Инциденты: что зависит от этого отказавшего компонента и кто им владеет (см. Тема 3.2 — Управление инцидентами)?
  • Проблемы: какие компоненты были вовлечены в повторяющиеся инциденты (см. Тема 3.3 — Управление проблемами)?
  • Изменения: каков радиус поражения этого изменения?
  • Непрерывность: что нужно восстановить и в каком порядке (см. Тема 3.12 — Управление непрерывностью услуг)?
  • Безопасность: что открыто и что изменилось?

Пределы источников

Статья об управлении конфигурациями помечена как возможно нуждающаяся в переписывании и мало говорит о практической реализации. В статье о CMDB нет раздела критики и мало ссылок. Опыт в этой области таков, что CMDB часто терпят неудачу, пытаясь хранить слишком много, слишком точно, слишком долго. Считайте это практическим опытом, который предлагает данное руководство, а не выводом из источников.

Лучшие практики

  1. Начинайте с вопросов, на которые нужно ответить. Перечислите вопросы, задаваемые исполнителями инцидентов, рецензентами изменений и планировщиками непрерывности, такие как «что от этого зависит?» и «кто этим владеет?». Записывайте только то, что на них отвечает.
  2. Определите небольшой набор типов конфигурационных единиц. Начните с услуг, приложений, хостов или контейнеров, баз данных и ключевых внешних зависимостей. Добавляйте типы, когда их требует вопрос.
  3. Записывайте отношения, а не только элементы. Фиксируйте, какие элементы от каких зависят и какую услугу они поддерживают. Отношения делают данные полезными для анализа влияния.
  4. Назначьте владельца каждому элементу. Элемент без владельца это риск. Сделайте владение частью способа создания элементов.
  5. Храните задуманную конфигурацию в системе контроля версий. Выражайте инфраструктуру и конфигурацию как код, рецензируйте его, как другой код, и позвольте конвейеру применять его. Тогда репозиторий становится записью замысла и истории.
  6. Используйте обнаружение, чтобы найти действительность. Сканируйте сети и облачные учетные записи, чтобы увидеть, что существует, и сравнивайте с объявленной конфигурацией. Расследуйте различия (дрейф), а не игнорируйте их.
  7. Федерируйте вместо копирования там, где можете. Позвольте каждому источнику данных (реестр активов, облачные учетные записи, инструменты развертывания) владеть своими фактами и ссылайтесь на них из данных конфигурации, как описывает статья о CMDB.
  8. Автоматизируйте обновления. Питайте данные конфигурации из конвейера и обнаружения, чтобы они менялись по мере изменения системы. Ручные обновления будут отставать.
  9. Фиксируйте базовые линии для важного. Для критически важных услуг записывайте утвержденную конфигурацию и применяйте формальный контроль изменений к отклонениям от нее. Для остальных достаточно более легкого контроля.
  10. Проводите аудит регулярно. Каждый квартал сравнивайте данные с действительностью для выборки элементов и исправляйте процесс, стоящий за любым расхождением. Это дисциплина проверки и аудита на практике.
  11. Делайте данные удобными для использования. Предоставьте визуализацию и поиск для исполнителей и планировщиков, так как данные, которые нельзя быстро прочитать, не будут использоваться.
  12. Держите безопасность в поле зрения. Относитесь к коду конфигурации как к чувствительному, сканируйте шаблоны на слабости и контролируйте, кто может менять базовую линию. Цифра Unit 42 в статье об инфраструктуре как коде напоминает о риске.

Вопросы для обсуждения с командой

Когда случается инцидент, сколько времени нам нужно, чтобы выяснить, что зависит от отказавшего компонента?

Посмотрите на последний инцидент и время, потраченное на этот вопрос. Спросите, откуда пришел ответ: схема, человек, поиск. Ведущий может спросить, что сэкономило бы больше всего времени. Часто это перечень зависимостей и владельцев для самых важных услуг. Договоритесь составить такой для одной услуги.

Где определена наша инфраструктура и соответствует ли это тому, что работает?

Спросите, строятся ли основные среды из кода и как часто кто-то меняет их вручную. Ищите различия. Если вы не знаете, спланируйте сравнение для одной среды. Обсудите, как предотвращать ручные изменения или быстро их обнаруживать.

У каких элементов в наших записях конфигурации нет владельца или они давно не подтверждались?

Возьмите выборку и посчитайте. Спросите, почему они в таком состоянии: нет процесса для владельцев, нет напоминания, нет последствий. Обсудите легкий механизм, например ежегодное подтверждение или тег владельца, обязательный при создании. Выберите один.

Какие данные мы храним, которыми никто не пользуется?

Перечислите поля и типы записей и спросите, кто пользовался ими в последнем квартале. Статья о CMDB называет сопровождение основной трудностью, а неиспользуемые данные это затраты без выгоды. Удалите или перестаньте поддерживать то, чем никто не пользуется.

Что нам нужно было бы видеть, чтобы с уверенностью одобрить изменение критически важной услуги?

Спросите рецензентов. Типичные ответы: что затрагивает изменение, что от него зависит, что оно сделало в прошлый раз. Спросите, что из этого могут дать данные конфигурации. Выберите один недостающий элемент для добавления.

Кому разрешено менять базовую линию наших критически важных услуг и как мы узнаем, когда они это делают?

Попросите перечень и свидетельства изменений. Обсудите, обнаруживаются ли изменения вне конвейера. Договоритесь, как будет находиться дрейф и кто будет действовать.

На практике: пример agile ITIL

Национальное налоговое ведомство эксплуатирует 120 приложений и сочетание локальных серверов и облачных услуг. Команда из шести инженеров эксплуатации сопровождает CMDB, загруженную из таблицы три года назад. Во время крупного инцидента на портале подачи деклараций инженеры обнаруживают, что CMDB перечисляет сервер базы данных, выведенный год назад, и не включает балансировщик нагрузки, который на самом деле отказал. Инцидент решается на три часа дольше, потому что столько времени уходит на выяснение, от чего зависит портал.

Руководитель эксплуатации и инженер пересматривают, какие вопросы задают исполнители. Они сужают область CMDB до услуг, приложений, основных компонентов инфраструктуры за ними и ключевых внешних зависимостей и отбрасывают типы с низкой ценностью. Инфраструктура портала подачи деклараций переносится в код в системе контроля версий, а конвейер записывает в CMDB запись о каждом развернутом компоненте. Сканирование обнаружения сети и облачных учетных записей запускается каждую ночь, и отчет перечисляет различия между объявленными и обнаруженными данными. У каждого элемента есть поле владельца, которое отчет тоже проверяет. Из данных строится простое представление зависимостей для портала подачи деклараций.

Через квартал представление зависимостей портала достаточно точно, чтобы команда следующего инцидента использовала его в первые десять минут. Ночной отчет о различиях находит 14 неуправляемых серверов, большинство из которых выведены или заявлены владельцами. Проблемы остаются. Услуги вне портала подачи деклараций все еще полагаются на старые данные, а одна команда продолжает вносить ручные изменения в сервер базы данных, которые конвейер затем перезаписывает, вызывая короткий сбой. Руководитель эксплуатации распространяет подход на следующие три услуги, добавляет правило, что изменения в промышленной среде идут через конвейер, и просит отчет обнаружения помечать ручные изменения.

Четыре точки зрения

Продуктовые команды и команды поставки

Команды поставки определяют конфигурацию через код. Помещайте инфраструктуру и настройки в систему контроля версий, рецензируйте их и позволяйте конвейеру применять. Помечайте ресурсы владельцем и услугой и описывайте зависимости в репозитории или записи услуги.

Сервисные и операционные команды

Команды эксплуатации используют и сопровождают данные конфигурации. Держите область небольшой, сравнивайте объявленную и обнаруженную конфигурацию и гоняйтесь за дрейфом. Передавайте то, что узнали из инцидентов, обратно в типы и отношения, которые вы записываете.

Руководство и управление

Руководители решают, сколько усилий заслуживают данные конфигурации. Спросите, какие решения они поддерживают, такие как анализ влияния и планирование непрерывности, и судите по использованию. Избегайте финансирования огромной базы данных ради нее самой. Поддерживайте средства контроля конвейера, сохраняющие записи правдивыми.

Заказчики и пользователи

Заказчики и пользователи выигрывают, когда инциденты решаются быстрее, а изменения ломают меньше, чему хорошие данные конфигурации помогают. Сами данные они видят редко. Спрашивайте поставщиков, как они знают, что затрагивает изменение, и как находят причину сбоя.

Типичные причины неудач

  • Попытка записать все. Данные слишком велики, чтобы быть правдивыми. Вместо этого начинайте с вопросов и критически важных услуг.
  • Ручное сопровождение. Записи отстают. Вместо этого питайте данные из конвейера и обнаружения.
  • Нет отношений. Элементы перечислены, но не связаны. Вместо этого фиксируйте зависимости и услугу, которую поддерживает каждый элемент.
  • Нет владельцев. Никто не подтверждает и не исправляет записи. Вместо этого требуйте владельца и регулярно проверяйте.
  • Ручные изменения вне конвейера. Действительность и замысел расходятся. Вместо этого направляйте изменения через конвейер и обнаруживайте дрейф.
  • Нечитаемые данные. Исполнители не могут пользоваться базой данных. Вместо этого предоставьте поиск и визуализацию.
  • Копирование вместо федерации. Дублированные данные устаревают. Вместо этого ссылайтесь на источник, владеющий фактами.
  • Код конфигурации как безобидный. Шаблоны несут уязвимости. Вместо этого сканируйте и рецензируйте их.

Модель зрелости

Измерение Инициация Развитие Стандартизация Управление Оркестрация
Область и отношения Компоненты известны неформально У некоторых услуг есть перечни компонентов У ключевых услуг записаны элементы, владельцы и зависимости Охват и точность измеряются, пробелы закрываются Данные конфигурации охватывают команды, облака и поставщиков
Объявленная конфигурация Системы настраиваются вручную Некоторые среды используют код Инфраструктура и конфигурация ключевых услуг это код в системе контроля версий История изменений и дрейф отслеживаются Код конфигурации разделяется и используется повторно между командами
Обнаружение и проверка Действительность предполагается Время от времени выполняются сканирования Регулярное обнаружение сравнивается с объявленными данными Различия и их причины измеряются и сокращаются Обнаружение и проверка автоматизированы по организации
Использование данных К данным обращаются редко Используются в некоторых инцидентах Используются регулярно для инцидентов, изменений и планирования непрерывности Использование и польза измеряются, данные улучшаются Данные поддерживают решения по организации и с партнерами

Контрольный список

  • Мы перечислили вопросы, на которые нужны данные конфигурации нашим исполнителям и рецензентам.
  • Мы записываем небольшой набор типов элементов с владельцами и отношениями.
  • Инфраструктура и конфигурация ключевых услуг находятся в системе контроля версий.
  • Изменения этих услуг в промышленной среде идут через конвейер.
  • Результаты обнаружения сравниваются с объявленной конфигурацией по расписанию.
  • Различия (дрейф) расследуются и исправляются.
  • Записи автоматически питаются из конвейера и обнаружения там, где возможно.
  • Выборка записей проверяется на соответствие действительности каждый квартал.
  • Данные легко искать и визуализировать исполнителям.
  • Код конфигурации рецензируется и сканируется на слабости.

ИИ-промпты

Назначение: решить, что записывать, перечислив вопросы, на которые нужно ответить.

Help me decide what configuration data to record for [service].

The questions responders and change reviewers ask, in our words: [list].
What we record today: [describe, or write "nothing"].
Where data lives (tools, repositories, cloud accounts): [list].

For each question, say what item types and relationships would be needed to answer it, where the data could come from automatically, and what would still need a person. Propose a minimal set of item types and fields. Mark guesses. Do not invent tools we do not have. Ask clarifying questions first, and list what you are unsure of.

Назначение: подвести итог дрейфа между объявленной и обнаруженной конфигурацией.

Here is a list of items found by discovery and a list of items declared in our configuration code or records.

Discovered: [paste names or IDs, with type and key attributes].
Declared: [paste names or IDs, with type and key attributes].

Using only these lists, identify items found but not declared, items declared but not found, and items where attributes differ. Group them and suggest a question to ask about each group (for example whether it is retired, owned by someone else, or created by hand). Do not guess the cause. List what you are unsure of.

Назначение: построить представление зависимостей для одной услуги.

Help me describe the dependencies of [service] so that responders can use them in an incident.

What the service does: [describe].
Components I know (applications, databases, network, cloud services, external suppliers): [list with how they connect].
Owners I know: [list].

Produce a simple text diagram and a table with: component, what depends on it, owner (or "unknown"), and what to check first if it fails (only from my text; otherwise "ask owner"). Highlight single points of failure that appear in my description. Do not invent components. Ask clarifying questions first, and list what you are unsure of.

Назначение: спланировать квартальный аудит записей конфигурации.

Plan a one-hour quarterly audit of our configuration records for [scope].

How records are created and updated today: [describe].
Sample size we can handle: [number].

Give a method: how to choose a sample, how to check each item against reality, what to record, how to calculate the share that is accurate (from the audit results only), and how to turn errors into process fixes. Keep it tool-free. Ask clarifying questions first, mark assumptions, and list what you are unsure of.

ИИ-навыки

  • configuration-management: используйте, чтобы спланировать, что записывать, как поддерживать правдивость и как использовать.
  • change-request: используйте, чтобы писать записи об изменениях со ссылками на затронутые элементы.
  • runbook: используйте, чтобы превратить знания о конфигурации в шаги, которым могут следовать исполнители.
  • enterprise-architecture: используйте, чтобы поместить услуги, приложения и инфраструктуру в архитектурную картину.
  • evolutionary-architecture: используйте, чтобы конфигурация и проект безопасно менялись со временем.

Ключевые источники

  • Configuration management (Wikipedia): история, основные дисциплины, базовые линии и стандарты управления конфигурациями.
  • Configuration management database (Wikipedia): определение, содержание, применения и трудности CMDB.
  • Infrastructure as code (Wikipedia): управление ресурсами через машиночитаемые определения со списком инструментов и заметками о выгодах и рисках.
  • ITIL (Wikipedia): фреймворк, в котором появляются CMDB и управление конфигурациями.

Источники

  1. Configuration management — Wikipedia — https://en.wikipedia.org/wiki/Configuration_management
  2. Configuration management database — Wikipedia — https://en.wikipedia.org/wiki/Configuration_management_database
  3. Infrastructure as code — Wikipedia — https://en.wikipedia.org/wiki/Infrastructure_as_code
  4. ITIL — Wikipedia — https://en.wikipedia.org/wiki/ITIL
  5. IT asset management — Wikipedia — https://en.wikipedia.org/wiki/IT_asset_management
  6. Software configuration management — Wikipedia — https://en.wikipedia.org/wiki/Software_configuration_management
  7. Version control — Wikipedia — https://en.wikipedia.org/wiki/Version_control
  8. DevOps — Wikipedia — https://en.wikipedia.org/wiki/DevOps
  9. Change management — Wikipedia — https://en.wikipedia.org/wiki/Change_management