なぜ重要なのか

多くの組織は、今もリリースを、大きく緊張を伴う機会として扱っています。日付が固定され、ウィンドウが予約され、人々は遅くまで残り、成功は何かが壊れたかどうかで測られます。このパターンは、恐れているリスクそのものを生みます。リリースにまとめられる変更が多いほど、何がうまくいかなかったかを理解するのが難しくなり、ロールバックは痛みを伴います。

DORA の研究プログラムは、その代替を説明しています。継続的デリバリーに関するページは、このプラクティスを「あらゆる種類の変更を、必要に応じて、素早く、安全に、持続可能にリリースできる能力」と定義し、これをうまく行うとデリバリー性能と可用性が向上し、燃え尽きの低下と仕事の満足度の向上に関連していると報告しています。ページはまた、プロセスとアーキテクチャを変えずにデプロイの頻度を上げると、失敗率が上がりチームが燃え尽きる傾向があると警告しています。教訓は「速くリリースせよ」ではなく、「安全にリリースする能力を築き、そのうえで頻繁にリリースせよ」です。

Google の『Site Reliability Engineering』の本は、リリースエンジニアリングの章で、実践から同様の点を述べています。頻繁なリリースは、バージョン間の変更が少ないことを意味し、そのためテストとトラブルシューティングが楽になります。このトピックは、その二つの出典、このガイドの他の変更関連のトピック、そしてこのガイドがフレームワーク所有者のテキストと照合できなかった、広く使われている ITIL の語彙に基づいています。出典は、強く、具体的で、それが説明する状況に限られていると考えてください。

中核となる概念

リリースとデプロイメント

この二つの用語は、しばしば混同されます。サービスマネジメントで広く使われる一般的な区別は、次のとおりです。

  • リリースとは、使用のために利用可能になったサービスまたはコンポーネントのバージョンです。ユーザーが何を得るかについての判断です。
  • デプロイメントとは、バージョンを本番などの環境へ移す行為です。

両者を分けることには大きな力があります。ユーザーに有効にせずにコードを本番にデプロイし、後で統制された形でリリースできます。フィーチャースイッチなどの技法はこの分離に依存しています(Wikipedia のフィーチャートグルの記事を参照)。

継続的デリバリーと継続的デプロイメント

DORA のページは、継続的デリバリーを、あらゆる種類の変更を必要に応じて素早く、安全に、持続可能にリリースできる能力と定義しています。それを、すべての変更をできるだけ早く本番にデプロイすることを意味する継続的デプロイメントと区別しています。DORA は、継続的デプロイメントを採用しない場合でも、チームは「継続的デリバリーから始められるし、始めるべき」だと述べています。リリースするかどうかの判断は、引き続きビジネスの判断です。継続的デリバリーは、それをプロジェクトではなく、選択にします。

研究が勧めること

DORA のページは、継続的デリバリーを支えるプラクティスを挙げています。

プラクティス DORA の言うこと
テスト自動化 包括的で信頼できる、主に開発者が作成し保守する自動テストスイート
デプロイメント自動化 手作業による介入を必要としない、完全に自動化されたデプロイメント
トランクベース開発 アクティブなブランチは三本未満、ごく短命なブランチ、コードロックの期間は稀
疎結合のチームとアーキテクチャ チームが、他のサービスとの調整なしに、必要に応じてテストとデプロイができる
その他のプラクティス 継続的インテグレーション、継続的テスト、すべての本番の成果物のバージョン管理、テストデータ管理、監視とオブザーバビリティ、事前の通知、データベース変更管理、全面的なセキュリティ

ページは、継続的デリバリーが、より高い品質(手戻りや計画外の仕事に費やす時間が少ない)、燃え尽きの低下、デプロイの苦痛の軽減と関連していると報告しています。また、2021 年の報告書で信頼性の目標を満たしたエリートチームは、低パフォーマーに比べて疎結合のアーキテクチャを持つ可能性が三倍高かったとも述べています。ツール、目標のデプロイ頻度、実装のタイムラインは示さず、変革が一般に「J カーブ」をたどり、自動化によってテストの要件が増え、技術的負債が蓄積するため効率が落ち込むと注記しています。

リリースエンジニアリングの実践からの教訓

SRE の本のリリースエンジニアリングの章は、ある大組織のアプローチを説明しています。

  • セルフサービス。 チームが自分のリリースプロセスを実行します。リリースは「真に自動」で、問題が生じた場合にだけエンジニアの関与が必要です。
  • 高速。 頻繁なリリースはバージョン間の変更が少ないことを意味し、テストとトラブルシューティングが容易になります。
  • ハーメティックなビルド。 ビルドは既知のツールとライブラリのバージョンに依存するため、同じリビジョンが同一の結果を与えます。
  • 強制されたポリシー。 アクセス制御が、承認、リリースの作成、デプロイメントを管理します。ほぼすべての変更にコードレビューが必要で、各リリースは含まれる変更の報告書を生成します。

章はまた、ソースコード管理とコードレビューのもとでの構成を強調し、開発者、サイト信頼性エンジニア、リリースエンジニアが、結果を「壁越しに投げる」のではなく協力することを提案しています。まだ自動化や強制ができなくても、組織はリリースのポリシーを定義すべきで、良いプラクティスを早く導入するほうが後付けより安価だと述べています。章は Google 自身のツールを説明しています。皆さんの環境は異なるツールを使うので、製品ではなく原則を引き出してください。

環境とプロモーション

リリースは通常、開発、テスト、本番のような一連の環境を通ります。各ステップが証拠を与えます。上記の研究と一致する一般的な慣行は、一度ビルドして同じ成果物をプロモートすることで、テストされたものがデプロイされるものになることです。同じリビジョンから同一のビルドを作るという SRE の章の強調も、同じ考えを表しています。

ロールアウトとロールバック

リリースがユーザーにどう届くかは、段階的にできます。SRE の章は、開発での毎時間の自動プッシュから、繊細なインフラのための数日にわたるロールアウトまで、リスクに応じたペースのロールアウトを説明し、トラフィックの一部が先に新しいバージョンを受け取るカナリアリリースにも触れています。ロールバックとは、前のバージョンに戻ることで、ロールアウトと同じくらい練習されているべきです。素早く戻せるチームは、頻繁にデプロイする余裕があります(トピック 3.4 — 変更実現 を参照)。

サポートのためのリリース情報

サポートスタッフとユーザーは、何が変わるのか、うまくいかない場合に何をすべきかを知る必要があります。リリースノート、既知の問題の一覧、名前のある連絡先が最低限です(トピック 3.1 — サービスデスク を参照)。SRE の章の、含まれる変更のリリース報告書が情報源になります。

測定

DORA のページは、通常の変更と緊急の変更の短いリードタイム、低い変更失敗率、短いサービス復旧時間、優先事項を期限どおりに届けるリリース頻度を測定することを提案しています。その包括的な目標は、デプロイのために誰も営業時間外に働かないことです。測定の定義と注意点については、トピック 3.4 — 変更実現 とトピック 5.6 — 指標と測定 を参照してください。

ベストプラクティス

  1. デプロイとリリースを分ける。 コードを休止状態で本番にデプロイし、準備ができたらフィーチャースイッチや段階的ロールアウトを使ってユーザーに有効にします。これはデプロイのリスクを減らし、ビジネスに統制を与えます。
  2. デプロイを自動化する。 手作業のステップをなくすことを目指します。手作業のステップは遅く、人によって異なり、インシデントを起こします。最も失敗するステップから、小さな増分で自動化します。
  3. 一度ビルドして、成果物をプロモートする。 一つのパッケージを作り、環境を通して移動させ、テストしたものが実行するものになるようにします。どのバージョンがどこにあるかを記録します。
  4. ビルドを再現可能にする。 ツールとライブラリのバージョンを固定し、同じリビジョンが同じ結果を生むようにします。これは、ハーメティックなビルドという SRE の章の原則に従っています。
  5. ブランチを短命に保つ。 DORA のトランクベースのガイダンスは、アクティブなブランチを三本未満にし、約一日以内にマージされるブランチとすることです。長いブランチは、リリースをマージのイベントに変えます。
  6. 自動でテストし、テストを速く信頼できるものに保つ。 数分でフィードバックを得ることを目指します。不安定または遅いテストスイートは、人々にそれを迂回させます。
  7. 小さなバッチでリリースする。 小さなリリースは、レビュー、テスト、巻き戻しが容易です。リリースが大きければ、どう分割できるかを問います。
  8. 段階的にロールアウトする。 ユーザーまたはサーバーの小さな割合から始め、シグナルを見守り、拡大します。何を見守り、誰がロールアウトを止められるかを事前に定義します。
  9. ロールバックをリハーサルする。 最後の良いバージョンに戻る方法を知り、練習します。一度も試したことのないロールバックは、期待にすぎません。
  10. リリースの前に、サポートが必要とするものを与える。 リリースノート、既知の問題、連絡先を提供します。ユーザーに影響する変更の承認に、サポートスタッフを含めます(トピック 3.1 — サービスデスク を参照)。
  11. 構成をバージョン管理に置く。 構成の変更を、レビューと記録を伴うコードのように扱います。各種の設定をどこに置き、なぜそうするかを選びます。
  12. 営業時間内のデプロイを目指す。 DORA はこれを包括的な目標として挙げています。デプロイに深夜が必要なら、プロセスかアーキテクチャに手を入れる必要があります。

チームで話し合うための質問

完成した変更を本番に出すまでに、どのくらいの時間がかかり、いくつのステップが関わるか。

最近の変更を、「準備完了」から「本番稼働」までたどります。各ステップ、実行する人、待ち時間を一覧にします。手作業のステップと自動のステップを区別します。手作業のステップの多さと、その間の待ちに驚くチームが多いです。ファシリテーターは、どのステップが最も多くのインシデントを起こしたかを問えます。自動化するものを一つ選びます。

心配せずに営業時間中にリリースできるには、何が成り立っている必要があるか。

チームがリリースについて何を恐れているかを尋ねます。典型的な答えは、テストされたロールバックがない、弱いテスト、ユーザーへの影響が不明、です。それぞれが、築くべきものです。一覧にして順位づけします。最初のものにとって最小の一歩は何かを尋ねます。デプロイのために誰も営業時間外に働かないという DORA の目標は、話し合うのに有用な目標です。

リリースが痛みを伴うために変更をまとめているのはどこで、まとめることは私たちに何をもたらしているか。

最近のリリースの内容を見ます。それぞれの変更の数を数えます。まとまりがうまくいかなかったとき何が起き、原因を見つけるのにどれだけかかったかを尋ねます。単一の変更のリリースを楽な道にするには何が必要かを話し合います。低リスクの変更を単独でリリースするなど、最初の一歩を合意します。

リリースが本番に出た後、うまく機能しているかをどうやって知るか。

最初の一時間に、チームがどのシグナル、すなわちエラー、性能、ユーザーの報告を見守っているかを尋ねます。答えが「苦情を待つ」なら、問題を素早く示す監視を話し合います。誰が見ていて、何をするかを尋ねます。リリース後の短いチェックリストを合意します。

リリースが出る前に、サポートチームは何を知っているか。

サービスデスクに、直近のリリースについて何を、いつ知ったかを尋ねます。彼らが必要としたものと比べます。リリースノートと名前のある連絡先など、簡単な引き継ぎを話し合います。リスクの高いリリースの計画に、ユーザーの質問に答える人々を含めます。

フリーズ期間なしにデプロイするのを妨げているものは何で、フリーズ期間は何を犠牲にしているか。

フリーズ期間は、ビジネスのピーク時の前後で一般的です。どれくらい続き、何を遅らせるかを尋ねます。小さく、よくテストされた変更が、追加の保護策を伴ってその間に進められないかを話し合います。DORA のページは、リスクやタイミングにかかわらずすべての変更に同じ承認を適用することに警告しているので、フリーズが粗すぎないかを問います。

実践例: アジャイルITILの事例

ある大学は、3 万人の学生向けのオンライン履修登録システムを運営しています。8 人の開発チームは、履修登録が始まる前の週末のウィンドウで、学期に一度リリースします。各リリースは数百の変更をまとめ、15 人、長い手作業のチェックリスト、連絡計画を必要とします。直近のリリースは、日曜の午前 2 時に失敗し、チームはどの変更が原因かを突き止めるのに 14 時間を費やしました。

チームリーダーは、アプローチの変更を提案します。第一に、デプロイを完全にスクリプト化し、前回失敗したステップから始めます。第二に、履修登録の経路に対する自動テストを加え、変更のたびに実行され、10 分未満で終わるようにします。第三に、新機能は無効の状態でデプロイし、確認の後にフィーチャースイッチで有効にします。第四に、ロールバックの手順を書き、テスト環境でリハーサルします。学籍課は、履修登録のピークの三週間は、ユーザーに見える不具合の修正でない限り、本番にリリースしないというルールに同意します。

一学期のうちに、チームはピーク週以外に、営業時間中に毎週デプロイし、リリースノートは前日に学生ヘルプデスクに送られます。不安定なテストでリリースが遅れるものもあり、フィーチャースイッチが一つ誤ってオンのままにされ、短い混乱を招きました。変革は、DORA のページが説明する J カーブにも当たります。二か月間、テストとスクリプトの作業が機能の提供を遅らせます。チームは続け、不安定なテストを直し、スイッチを取り除くチェックリストのステップを加え、来年にフリーズのルールを見直すことを学籍課と合意します。その学期の履修登録のピークは、リリースに関連するインシデントなしに過ぎます。

4つの視点

プロダクトチームとデリバリーチーム

デリバリーチームは、パイプラインを担います。テスト、ビルド、デプロイのスクリプト、ロールバックです。それらを、ユーザーのいるプロダクトとして投資します。小さく、頻繁にリリースし、各リリースをパイプラインについての証拠として扱います。変更がサポートと運用に影響するときは、彼らを巻き込みます。

サービスチームと運用チーム

運用チームは、より小さく予測しやすいリリースから利益を得て、リリースが受け入れられる前に何が成り立っている必要があるか、すなわち監視、ランブック、ロールバックを定義することで、助けることができます。デリバリーチームが使うプラットフォームとチェックを提供することで、門番から実現者へと移ります。リリース後のシグナルに注意します。

リーダーシップとガバナンス

リーダーは、チームがパイプラインに投資し、J カーブを許容できるかを決めます。リードタイム、変更失敗率、復旧時間を求めます。リスクへの一律の対応としてリリースを凍結することに抵抗し、代わりに、リスクの高いリリースがより多くの精査を受けるという証拠を求めます。

顧客とユーザー

顧客とユーザーは、頻繁な小さな改善と、少ない大規模な混乱を目にします。自分に影響する変更の事前通知と、問題を報告する方法を期待してください。ピーク期間があるなら、プロバイダーが段階的なロールアウトをそれに合わせて計画できるよう、伝えてください。

よくある失敗パターン

  • ビッグバンのリリース。 数百の変更がまとめて出ます。代わりに、小さなバッチでリリースし、デプロイとリリースを分けます。
  • 手作業のデプロイ。 ステップは人によって異なり、夜間に失敗します。代わりに、最もリスクの高いステップから、増分で自動化します。
  • 保護策なしでより頻繁にリリースする。 DORA が警告するとおり、失敗率が上がり、人が燃え尽きます。代わりに、まずテスト、ロールバック、監視に投資します。
  • 環境ごとに異なる成果物。 テストされたものが、実行されるものではありません。代わりに、一度ビルドして、同じ成果物をプロモートします。
  • 長いブランチ。 マージがイベントになります。代わりに、ブランチを短く保ち、継続的に統合します。
  • 試していないロールバック。 最初のロールバックが障害の最中に起きます。代わりに、定期的にリハーサルします。
  • サポートが最後に知る。 スタッフはユーザーから変更を知ります。代わりに、リリース前にリリースノートと連絡先を送ります。
  • 一律のフリーズ。 すべての変更に同じフリーズが適用されます。代わりに、低リスクでよくテストされた変更を追加のチェックとともに通し、フリーズはリスクの高いものに残します。

成熟度モデル

次元 開始 発展 標準化 管理 最適化
デプロイメントの自動化 デプロイは手作業でばらつく 一部のデプロイがスクリプト化されている デプロイが共通のパイプラインで自動化されている デプロイの失敗と所要時間が追跡され、減らされる パイプラインとプラクティスがチーム間で共有・改善される
リリースの頻度と規模 リリースは稀で大きい 一部のチームがより小さなバッチでリリースしている チームが既知のリズムで小さなバッチをリリースする 頻度、リードタイム、規模が測定・調整される リリースのリズムがサービスとサプライヤー間で調整される
安全性(テスト、ロールアウト、ロールバック) テストは手作業で、ロールバックは試されていない 一部に自動テストとロールバック手順がある 自動テスト、段階的ロールアウト、リハーサル済みのロールバックが標準になっている 変更失敗率と復旧時間が追跡・改善される 安全のプラクティスがチーム間で共有・テストされる
サポートの準備 サポートはユーザーからリリースを知る 一部のリリースにノートがある リリースノートと連絡先が標準になっている リリースに関するサポートのフィードバックが集められ、実行に移される サポート、デリバリー、ユーザーが一緒にリリースを計画する

チェックリスト

  • デプロイとリリースの違いを述べられ、それを使っている。
  • デプロイは手作業のステップなしに自動化されているか、残りの手作業のステップが一覧にされている。
  • 一度ビルドして、同じ成果物を環境を通してプロモートしている。
  • 自動テストが変更のたびに実行され、数分でフィードバックを返す。
  • ブランチは短命で、頻繁にトランクにマージされる。
  • 各種のリリースにロールバックがあり、リハーサルされている。
  • リスクが正当化する場合、ロールアウトは段階的で、事前に定義されたシグナルがある。
  • リリースノートと既知の問題が、リリース前にサービスデスクに届く。
  • 構成がバージョン管理に置かれ、レビューされている。
  • サービスごとに、リードタイム、変更失敗率、復旧時間を追跡している。

AIプロンプト

目的: 「準備完了」から「本番稼働」までのステップを地図にし、自動化するものを見つける。

Help me map the path of a change from ready to live.

The steps in order, with who does each, whether it is manual or automated, and how long it typically waits or takes: [paste].
The last three releases and what went wrong, if anything: [paste facts].

Produce a table of steps and mark the manual ones. Rank the manual steps by how often they caused problems in the text, and suggest, for the top three, one small way to automate or check each. Do not invent durations or failure counts. Ask clarifying questions first if information is missing, mark assumptions, and list what you are unsure of.

目的: サービスデスクとユーザー向けのリリースノートを書く。

Write a release note for [service].

What changed (plain words): [describe].
Who is affected and when: [describe].
What users will notice: [describe].
Known issues and workarounds: [list, or write "none known"].
How to roll back and who to contact: [describe].

Write two versions: a one-paragraph note for users and a half-page note for the service desk. Use only the facts above. Mark any statement that is an assumption and ask clarifying questions first if information is missing. List what you are unsure of.

目的: 段階的なロールアウトを計画する。

Plan a staged rollout of [change].

What it changes and who uses it: [describe].
How we can limit exposure (percentage of users, regions, servers, feature switch): [describe options available].
Signals we can watch: [list monitoring and user feedback sources].
Rollback method: [describe].

Propose stages, what to check at each stage, who can pause or stop, and what would trigger a rollback, leaving numeric thresholds as [to be agreed]. Do not invent monitoring that we do not have. Ask clarifying questions first, mark assumptions, and list what you are unsure of.

目的: リリース自動化への投資の論拠を準備する。

Help me prepare a short case for investing in release automation for [service].

What a release costs us today, in facts: [people involved, hours, incidents, delays; use real numbers only].
What we want to be able to do: [describe].
Known risks of the work: [for example a temporary slowdown while tests are written].

Write a one-page case with the problem, the proposed first steps (small and incremental), what we will measure (lead time, change fail rate, recovery time, with no targets that I did not give), the risks including a temporary dip in delivery, and what we ask for. Do not invent figures. Ask clarifying questions first, and list what you are unsure of.

AIスキル

  • release-notes: リリースが何を変えるかを、ユーザーとサービスデスクに伝えるときに使います。
  • changelog: バージョンごとの変更の記録を保つときに使います。
  • test-driven-development: 頻繁なリリースを安全にする自動テストを作るときに使います。
  • shift-left-testing: 問題がより早く見つかるよう、テストをパイプラインのより早い段階に移すときに使います。
  • agile-delivery: 小さく頻繁なリリースと、その周りのチェックを計画するときに使います。

主要な情報源

  • Continuous delivery (DORA、dora.dev): 研究プログラムによる、定義、推奨プラクティス、知見、落とし穴です。
  • Release Engineering (『Site Reliability Engineering』、Google、sre.google): セルフサービス、再現可能なビルド、強制されたリリースポリシーという、ある組織の実践です。
  • Streamlining change approval (DORA、dora.dev): 承認がデリバリーにどう収まるかについてのガイダンスです。
  • Continuous delivery (Wikipedia): このプラクティスとその歴史の概観です。

参考文献

  1. Continuous delivery — DORA, dora.dev — https://dora.dev/capabilities/continuous-delivery/
  2. Release Engineering — Google SRE book, sre.google — https://sre.google/sre-book/release-engineering/
  3. Streamlining change approval — DORA, dora.dev — https://dora.dev/capabilities/streamlining-change-approval/
  4. Continuous delivery — Wikipedia — https://en.wikipedia.org/wiki/Continuous_delivery
  5. Software deployment — Wikipedia — https://en.wikipedia.org/wiki/Software_deployment
  6. Release management — Wikipedia — https://en.wikipedia.org/wiki/Release_management
  7. Feature toggle — Wikipedia — https://en.wikipedia.org/wiki/Feature_toggle
  8. Continuous integration — Wikipedia — https://en.wikipedia.org/wiki/Continuous_integration
  9. Version control — Wikipedia — https://en.wikipedia.org/wiki/Version_control