เหตุใดเรื่องนี้จึงสำคัญ

หลายองค์กรยังมองการปล่อยเป็นโอกาสใหญ่ที่ตึงเครียด กำหนดวันที่ จองช่วงเวลา ผู้คนอยู่ดึก และวัดความสำเร็จด้วยว่ามีอะไรพังหรือไม่ รูปแบบนี้สร้างความเสี่ยงที่มันกลัวพอดี ยิ่งรวมการเปลี่ยนแปลงไว้ในการปล่อยมาก ยิ่งเข้าใจยากว่าอะไรผิดพลาดและการย้อนกลับยิ่งเจ็บปวด

โครงการวิจัย DORA อธิบายทางเลือก หน้าว่าด้วยการส่งมอบอย่างต่อเนื่องนิยามแนวปฏิบัตินี้ว่าเป็น "ความสามารถในการปล่อยการเปลี่ยนแปลงทุกชนิดตามต้องการอย่างรวดเร็ว ปลอดภัย และยั่งยืน" และรายงานว่าการทำได้ดีปรับปรุงผลการส่งมอบและความพร้อมใช้งาน และสัมพันธ์กับความเหนื่อยหน่ายที่ต่ำกว่าและความพึงพอใจในงานที่สูงกว่า หน้านั้นยังเตือนว่าการติดตั้งบ่อยขึ้นโดยไม่เปลี่ยนกระบวนการและสถาปัตยกรรมมักเพิ่มอัตราความล้มเหลวและทำให้ทีมหมดไฟ บทเรียนไม่ใช่ "ปล่อยให้เร็วขึ้น" แต่คือ "สร้างความสามารถในการปล่อยอย่างปลอดภัย แล้วปล่อยบ่อย"

หนังสือ Site Reliability Engineering ของ Google ในบทว่าด้วยวิศวกรรมการปล่อย กล่าวประเด็นคล้ายกันจากการปฏิบัติ คือการปล่อยบ่อยหมายถึงการเปลี่ยนแปลงระหว่างเวอร์ชันน้อยลง ทำให้การทดสอบและการแก้ปัญหาง่ายขึ้น หัวข้อนี้อาศัยสองแหล่งนั้น หัวข้ออื่นของคู่มือที่เกี่ยวกับการเปลี่ยนแปลง และคำศัพท์ ITIL ที่ใช้กว้างขวางซึ่งคู่มือนี้ยืนยันกับข้อความของเจ้าของกรอบแนวทางไม่ได้ มองแหล่งต่างๆ ว่าแข็งแรง เฉพาะเจาะจง และจำกัดอยู่ในบริบทที่อธิบาย

แนวคิดหลัก

การปล่อยและการติดตั้ง

สองคำนี้มักถูกสับสน ความแตกต่างที่พบบ่อยและใช้กว้างขวางในการบริหารบริการคือ

  • การปล่อย (release) คือเวอร์ชันของบริการหรือส่วนประกอบที่เปิดให้ใช้ เป็นการตัดสินใจว่าผู้ใช้จะได้อะไร
  • การติดตั้ง (deployment) คือการกระทำย้ายเวอร์ชันเข้าสู่สภาพแวดล้อม เช่น ระบบจริง

การแยกสองอย่างนี้ทรงพลัง คุณติดตั้งโค้ดในระบบจริงได้โดยไม่เปิดให้ผู้ใช้ แล้วปล่อยภายหลังอย่างควบคุมได้ เทคนิค เช่น สวิตช์ฟีเจอร์ (feature switch) อาศัยการแยกนี้ (ดูบทความ Wikipedia เรื่อง feature toggle)

การส่งมอบอย่างต่อเนื่องและการติดตั้งอย่างต่อเนื่อง

หน้าของ DORA นิยาม การส่งมอบอย่างต่อเนื่อง (continuous delivery) ว่าเป็นความสามารถในการปล่อยการเปลี่ยนแปลงทุกชนิดตามต้องการอย่างรวดเร็ว ปลอดภัย และยั่งยืน แยกจาก การติดตั้งอย่างต่อเนื่อง (continuous deployment) ซึ่งหมายถึงติดตั้งทุกการเปลี่ยนแปลงในระบบจริงโดยเร็วที่สุด DORA ระบุว่าทีม "สามารถและควร" เริ่มจากการส่งมอบอย่างต่อเนื่อง แม้จะไม่เคยนำการติดตั้งอย่างต่อเนื่องมาใช้ การตัดสินใจว่าจะปล่อยหรือไม่ยังเป็นการตัดสินใจทางธุรกิจ การส่งมอบอย่างต่อเนื่องทำให้เป็นทางเลือก ไม่ใช่โครงการ

สิ่งที่งานวิจัยแนะนำ

หน้าของ DORA ระบุแนวปฏิบัติที่สนับสนุนการส่งมอบอย่างต่อเนื่อง

แนวปฏิบัติ สิ่งที่ DORA กล่าว
การทดสอบอัตโนมัติ ชุดทดสอบอัตโนมัติที่ครอบคลุมและเชื่อถือได้ ส่วนใหญ่สร้างและดูแลโดยนักพัฒนา
การติดตั้งอัตโนมัติ ติดตั้งอัตโนมัติเต็มรูปแบบ ไม่ต้องแทรกแซงด้วยมือ
การพัฒนาแบบทรังก์ (Trunk-based development) กิ่งที่ใช้งานอยู่น้อยกว่าสามกิ่ง กิ่งมีอายุสั้นมาก ช่วงล็อกโค้ดเกิดน้อย
ทีมและสถาปัตยกรรมที่ผูกพันกันหลวม ทีมทดสอบและติดตั้งตามต้องการได้โดยไม่ต้องประสานกับบริการอื่น
แนวปฏิบัติอื่น การรวมระบบอย่างต่อเนื่อง การทดสอบอย่างต่อเนื่อง การควบคุมเวอร์ชันสำหรับทุกสิ่งในระบบจริง การจัดการข้อมูลทดสอบ การเฝ้าติดตามและการสังเกตได้ การแจ้งเตือนเชิงรุก การจัดการการเปลี่ยนแปลงฐานข้อมูล ความมั่นคงปลอดภัยแบบทั่วถึง

หน้านั้นรายงานว่าการส่งมอบอย่างต่อเนื่องสัมพันธ์กับคุณภาพที่สูงกว่า (ใช้เวลาแก้งานซ้ำหรืองานที่ไม่ได้วางแผนน้อยลง) ความเหนื่อยหน่ายที่ต่ำกว่า และความเจ็บปวดจากการติดตั้งที่น้อยลง ยังระบุว่าทีมระดับยอดเยี่ยมที่บรรลุเป้าหมายความน่าเชื่อถือในรายงานปี 2021 มีแนวโน้มมีสถาปัตยกรรมที่ผูกพันกันหลวมมากกว่าทีมผลงานต่ำถึงสามเท่า หน้านั้นไม่ระบุเครื่องมือ ความถี่ในการติดตั้งเป้าหมาย หรือกรอบเวลาการนำไปใช้ และระบุว่าการเปลี่ยนแปลงมักเป็นไปตาม "เส้นโค้งตัว J" คือมีช่วงที่ประสิทธิภาพตกลงขณะที่การทำงานอัตโนมัติเพิ่มความต้องการทดสอบและหนี้ทางเทคนิคสะสม

บทเรียนจากการปฏิบัติด้านวิศวกรรมการปล่อย

บทของหนังสือ SRE ว่าด้วยวิศวกรรมการปล่อยอธิบายแนวทางขององค์กรขนาดใหญ่แห่งหนึ่ง

  • บริการตนเอง ทีมรันกระบวนการปล่อยของตนเอง การปล่อย "เป็นอัตโนมัติอย่างแท้จริง" และต้องการวิศวกรเข้าร่วมเฉพาะเมื่อมีปัญหา
  • ความเร็วสูง การปล่อยบ่อยหมายถึงการเปลี่ยนแปลงระหว่างเวอร์ชันน้อยลง ซึ่งทำให้การทดสอบและการแก้ปัญหาง่ายขึ้น
  • การสร้างแบบปิดสนิท (Hermetic builds) การสร้างพึ่งพาเวอร์ชันเครื่องมือและไลบรารีที่ทราบ ดังนั้นรีวิชันเดียวกันให้ผลเหมือนกัน
  • นโยบายที่บังคับใช้ การควบคุมการเข้าถึงกำกับการอนุมัติ การสร้างการปล่อย และการติดตั้ง การเปลี่ยนแปลงเกือบทั้งหมดต้องมีการทบทวนโค้ด และแต่ละการปล่อยสร้างรายงานการเปลี่ยนแปลงที่รวมอยู่

บทยังเน้นการตั้งค่าที่อยู่ใต้การควบคุมซอร์สและการทบทวนโค้ด และเสนอให้นักพัฒนา วิศวกรความน่าเชื่อถือของไซต์ และวิศวกรการปล่อยร่วมมือกัน แทนการโยนผลลัพธ์ "ข้ามรั้ว" บทระบุว่าองค์กรควรกำหนดนโยบายการปล่อยแม้ยังทำให้เป็นอัตโนมัติหรือบังคับใช้ไม่ได้ และถูกกว่าที่จะนำแนวปฏิบัติที่ดีมาใช้แต่เนิ่นๆ มากกว่าติดตั้งเพิ่มภายหลัง บทอธิบายเครื่องมือของ Google เอง สภาพแวดล้อมของคุณจะใช้เครื่องมืออื่น ให้เอาหลักการ ไม่ใช่ผลิตภัณฑ์

สภาพแวดล้อมและการเลื่อนระดับ

การปล่อยมักเคลื่อนผ่านชุดสภาพแวดล้อม เช่น การพัฒนา การทดสอบ และระบบจริง แต่ละขั้นให้หลักฐาน แนวปฏิบัติที่พบบ่อยซึ่งสอดคล้องกับงานวิจัยข้างต้นคือสร้างครั้งเดียวและเลื่อนระดับอาร์ทิแฟกต์เดียวกัน เพื่อให้สิ่งที่ทดสอบคือสิ่งที่ติดตั้ง การเน้นของบท SRE เรื่องการสร้างที่เหมือนกันจากรีวิชันเดียวกันแสดงแนวคิดเดียวกัน

การเปิดตัวและการย้อนกลับ

วิธีที่การปล่อยไปถึงผู้ใช้ทำเป็นขั้นได้ บท SRE อธิบายการเปิดตัวที่กำหนดจังหวะตามความเสี่ยง ตั้งแต่การผลักอัตโนมัติรายชั่วโมงในการพัฒนาไปจนถึงการเปิดตัวหลายวันสำหรับโครงสร้างพื้นฐานที่ละเอียดอ่อน และกล่าวถึงการปล่อยแบบคานารี (canary release) ที่ส่วนเล็กของทราฟฟิกได้เวอร์ชันใหม่ก่อน การย้อนกลับหมายถึงกลับไปเวอร์ชันก่อนหน้า และควรฝึกซ้อมเท่ากับการเปิดตัว ทีมที่ย้อนกลับได้เร็วสามารถติดตั้งบ่อยได้ (ดูหัวข้อ 3.4 — การสนับสนุนการเปลี่ยนแปลง)

ข้อมูลการปล่อยสำหรับการสนับสนุน

เจ้าหน้าที่สนับสนุนและผู้ใช้ต้องรู้ว่าอะไรเปลี่ยนและต้องทำอย่างไรหากผิดพลาด บันทึกการปล่อย รายการปัญหาที่ทราบ และผู้ติดต่อที่ระบุชื่อเป็นขั้นต่ำ (ดูหัวข้อ 3.1 — ศูนย์บริการ) รายงานการเปลี่ยนแปลงที่รวมอยู่ของการปล่อยในบท SRE เป็นแหล่งข้อมูล

ตัวชี้วัด

หน้าของ DORA เสนอให้วัดเวลานำที่สั้นสำหรับการเปลี่ยนแปลงปกติและฉุกเฉิน อัตราความล้มเหลวของการเปลี่ยนแปลงต่ำ เวลากู้คืนบริการสั้น และความถี่การปล่อยที่ส่งมอบลำดับความสำคัญได้ตรงเวลา เป้าหมายรวมคือไม่มีใครทำงานนอกเวลาทำการเพื่อติดตั้ง สำหรับนิยามและข้อควรระวังของตัวชี้วัด ดูหัวข้อ 3.4 — การสนับสนุนการเปลี่ยนแปลง และหัวข้อ 5.6 — ตัวชี้วัดและการวัดผล

แนวปฏิบัติที่ดี

  1. แยกการติดตั้งออกจากการปล่อย ติดตั้งโค้ดในระบบจริงในสถานะพัก และเปิดให้ผู้ใช้เมื่อพร้อม โดยใช้สวิตช์ฟีเจอร์หรือการเปิดตัวเป็นขั้น วิธีนี้ลดความเสี่ยงของการติดตั้งและให้ธุรกิจควบคุมได้
  2. ทำการติดตั้งให้เป็นอัตโนมัติ ตั้งเป้าไม่มีขั้นตอนด้วยมือ ขั้นตอนด้วยมือช้า แตกต่างกันตามบุคคล และก่อให้เกิดเหตุการณ์ขัดข้อง ทำให้เป็นอัตโนมัติทีละส่วนเล็กๆ เริ่มจากขั้นที่ผิดพลาดมากที่สุด
  3. สร้างครั้งเดียว เลื่อนระดับอาร์ทิแฟกต์ สร้างแพ็กเกจเดียวและเคลื่อนผ่านสภาพแวดล้อม เพื่อให้สิ่งที่คุณทดสอบคือสิ่งที่คุณรัน บันทึกว่าเวอร์ชันใดอยู่ที่ไหน
  4. ทำให้การสร้างทำซ้ำได้ ตรึงเวอร์ชันเครื่องมือและไลบรารีเพื่อให้รีวิชันเดียวกันได้ผลเดียวกัน ตามหลักการสร้างแบบปิดสนิทของบท SRE
  5. ให้กิ่งมีอายุสั้น แนวทางทรังก์ของ DORA คือกิ่งที่ใช้งานน้อยกว่าสามกิ่งและกิ่งที่รวมภายในประมาณหนึ่งวัน กิ่งอายุยาวทำให้การปล่อยกลายเป็นเหตุการณ์การรวม
  6. ทดสอบโดยอัตโนมัติ และทำให้การทดสอบเร็วและเชื่อถือได้ ตั้งเป้าข้อเสนอแนะภายในไม่กี่นาที ชุดทดสอบที่ไม่เสถียรหรือช้าทำให้ผู้คนเลี่ยง
  7. ปล่อยเป็นชุดเล็ก การปล่อยที่เล็กกว่าทบทวน ทดสอบ และย้อนกลับได้ง่ายกว่า หากการปล่อยใหญ่ ให้ถามว่าแบ่งอย่างไร
  8. เปิดตัวเป็นขั้น เริ่มด้วยส่วนเล็กของผู้ใช้หรือเซิร์ฟเวอร์ เฝ้าสัญญาณ แล้วขยาย กำหนดล่วงหน้าว่าจะเฝ้าดูอะไรและใครหยุดการเปิดตัวได้
  9. ฝึกซ้อมการย้อนกลับ รู้วิธีกลับไปเวอร์ชันดีล่าสุดและฝึก การย้อนกลับที่คุณไม่เคยลองเป็นเพียงความหวัง
  10. ให้ฝ่ายสนับสนุนได้สิ่งที่ต้องการก่อนปล่อย จัดบันทึกการปล่อย ปัญหาที่ทราบ และผู้ติดต่อ รวมเจ้าหน้าที่สนับสนุนในการลงนามรับรองสำหรับการเปลี่ยนแปลงที่กระทบผู้ใช้ (ดูหัวข้อ 3.1 — ศูนย์บริการ)
  11. เก็บการตั้งค่าในการควบคุมเวอร์ชัน มองการเปลี่ยนการตั้งค่าเหมือนโค้ด พร้อมการทบทวนและบันทึก เลือกว่าการตั้งค่าแต่ละชนิดอยู่ที่ไหนและเพราะเหตุใด
  12. ตั้งเป้าติดตั้งในเวลาทำการ DORA ระบุเป็นเป้าหมายรวม หากการติดตั้งต้องทำดึก กระบวนการหรือสถาปัตยกรรมต้องได้รับการปรับปรุง

คำถามสำหรับพูดคุยกับทีมของคุณ

ใช้เวลานานเท่าใดและมีกี่ขั้นตอนกว่าที่การเปลี่ยนแปลงที่เสร็จแล้วจะเข้าสู่ระบบจริง

ติดตามการเปลี่ยนแปลงล่าสุดหนึ่งรายการจาก "พร้อม" ไปจนถึง "ใช้งานจริง" ระบุแต่ละขั้น ใครทำ และรอนานเท่าใด แยกขั้นตอนด้วยมือออกจากขั้นอัตโนมัติ ทีมมักประหลาดใจว่ามีขั้นตอนด้วยมือกี่ขั้นและการรอระหว่างขั้น ผู้อำนวยการสนทนาอาจถามว่าขั้นใดก่อให้เกิดเหตุการณ์ขัดข้องมากที่สุด เลือกหนึ่งขั้นไปทำให้เป็นอัตโนมัติ

อะไรต้องเป็นจริงเพื่อให้เราปล่อยในเวลาทำการได้โดยไม่กังวล

ถามว่าทีมกลัวอะไรเกี่ยวกับการปล่อย คำตอบทั่วไป ได้แก่ ไม่มีการย้อนกลับที่ทดสอบแล้ว การทดสอบอ่อน ผลกระทบต่อผู้ใช้ไม่ชัด แต่ละข้อเป็นสิ่งที่ต้องสร้าง ระบุและจัดอันดับ ถามว่าก้าวเล็กที่สุดสำหรับข้อแรกคืออะไร เป้าหมายของ DORA ที่ไม่มีใครทำงานนอกเวลาทำการเพื่อติดตั้งเป็นเป้าหมายที่มีประโยชน์ในการพูดคุย

เรารวมการเปลี่ยนแปลงเป็นชุดเพราะการปล่อยเจ็บปวดตรงไหน และการรวมนั้นทำให้เราเสียอะไร

ดูเนื้อหาของการปล่อยล่าสุด นับจำนวนการเปลี่ยนแปลงในแต่ละครั้ง ถามว่าเกิดอะไรขึ้นเมื่อชุดผิดพลาด และใช้เวลานานเท่าใดในการหาสาเหตุ พูดคุยว่าอะไรจะทำให้การปล่อยการเปลี่ยนแปลงเดียวเป็นทางที่ง่าย ตกลงก้าวแรก เช่น ปล่อยการเปลี่ยนแปลงความเสี่ยงต่ำหนึ่งรายการเดี่ยวๆ

เรารู้ได้อย่างไรว่าการปล่อยทำงานได้ดีเมื่อใช้งานจริง

ถามว่าทีมเฝ้าดูสัญญาณอะไรในชั่วโมงแรก ได้แก่ ข้อผิดพลาด ประสิทธิภาพ รายงานของผู้ใช้ หากคำตอบคือ "เรารอข้อร้องเรียน" ให้พูดคุยการเฝ้าติดตามที่จะแสดงปัญหาอย่างรวดเร็ว ถามว่าใครเฝ้าดูและจะทำอะไร ตกลงรายการตรวจสอบสั้นๆ หลังการปล่อย

ฝ่ายสนับสนุนของเรารู้อะไรเกี่ยวกับการปล่อยก่อนที่มันจะออก

ถามศูนย์บริการว่ารู้อะไรเกี่ยวกับการปล่อยล่าสุดและเมื่อใด เปรียบเทียบกับสิ่งที่พวกเขาต้องการ พูดคุยการส่งต่อง่ายๆ เช่น บันทึกการปล่อยและผู้ติดต่อที่ระบุชื่อ รวมผู้ที่ตอบคำถามของผู้ใช้ในการวางแผนสำหรับการปล่อยที่เสี่ยง

อะไรขัดขวางเราจากการติดตั้งโดยไม่มีช่วงห้ามเปลี่ยนแปลง และช่วงห้ามเปลี่ยนแปลงทำให้เราเสียอะไร

ช่วงห้ามเปลี่ยนแปลงพบบ่อยในช่วงพีคทางธุรกิจ ถามว่ายาวนานเท่าใดและทำให้อะไรล่าช้า พูดคุยว่าการเปลี่ยนแปลงเล็กๆ ที่ทดสอบดีจะดำเนินต่อได้ระหว่างช่วงนั้นพร้อมมาตรการป้องกันเพิ่มเติมหรือไม่ หน้าของ DORA เตือนไม่ให้ใช้การอนุมัติเดียวกันกับทุกการเปลี่ยนแปลงโดยไม่คำนึงถึงความเสี่ยงหรือเวลา ดังนั้นให้ถามว่าช่วงห้ามเปลี่ยนแปลงทื่อเกินไปหรือไม่

ในทางปฏิบัติ: ตัวอย่าง ITIL แบบเอไจล์

มหาวิทยาลัยแห่งหนึ่งดำเนินระบบลงทะเบียนเรียนออนไลน์สำหรับนักศึกษา 30,000 คน ทีมพัฒนาแปดคนปล่อยปีละภาคการศึกษาหนึ่งครั้ง ในช่วงสุดสัปดาห์ก่อนเปิดลงทะเบียน แต่ละการปล่อยรวมการเปลี่ยนแปลงหลายร้อยรายการและต้องใช้คนสิบห้าคน รายการตรวจสอบด้วยมือที่ยาว และแผนการโทรติดต่อ การปล่อยครั้งล่าสุดล้มเหลวตอนตีสองวันอาทิตย์ และทีมใช้เวลาสิบสี่ชั่วโมงหาว่าการเปลี่ยนแปลงใดเป็นต้นเหตุ

หัวหน้าทีมเสนอเปลี่ยนแนวทาง ประการแรก การติดตั้งกลายเป็นสคริปต์เต็มรูปแบบ เริ่มจากขั้นตอนที่ล้มเหลวครั้งก่อน ประการที่สอง ทีมเพิ่มการทดสอบอัตโนมัติสำหรับเส้นทางการลงทะเบียนที่รันทุกการเปลี่ยนแปลงและใช้เวลาไม่ถึงสิบนาที ประการที่สาม ฟีเจอร์ใหม่ถูกติดตั้งในสถานะปิดและเปิดด้วยสวิตช์ฟีเจอร์หลังการตรวจ ประการที่สี่ ขั้นตอนการย้อนกลับถูกเขียนและฝึกซ้อมในสภาพแวดล้อมทดสอบ สำนักทะเบียนตกลงกฎว่าไม่มีการปล่อยสู่ระบบจริงในสามสัปดาห์ของการลงทะเบียนช่วงพีค เว้นแต่เป็นการแก้ข้อบกพร่องที่ผู้ใช้มองเห็น

ภายในหนึ่งภาคการศึกษา ทีมติดตั้งทุกสัปดาห์นอกสัปดาห์พีค ในเวลาทำการ พร้อมส่งบันทึกการปล่อยไปยังเฮลป์เดสก์นักศึกษาก่อนหนึ่งวัน บางการปล่อยช้าลงเพราะการทดสอบไม่เสถียร และสวิตช์ฟีเจอร์หนึ่งถูกเปิดทิ้งไว้โดยผิดพลาดและก่อความสับสนสั้นๆ การเปลี่ยนแปลงยังเจอเส้นโค้งตัว J ที่หน้าของ DORA อธิบาย คือสองเดือนที่งานเกี่ยวกับการทดสอบและสคริปต์ทำให้การส่งมอบฟีเจอร์ช้าลง ทีมทำต่อไป แก้การทดสอบที่ไม่เสถียร เพิ่มขั้นตอนในรายการตรวจสอบเพื่อถอดสวิตช์ และตกลงกับสำนักทะเบียนว่าจะทบทวนกฎห้ามเปลี่ยนแปลงในปีหน้า ช่วงพีคการลงทะเบียนของภาคการศึกษาผ่านไปโดยไม่มีเหตุการณ์ขัดข้องที่เกี่ยวกับการปล่อย

สี่มุมมอง

ทีมผลิตภัณฑ์และทีมส่งมอบ

ทีมส่งมอบเป็นเจ้าของไปป์ไลน์ ได้แก่ การทดสอบ การสร้าง สคริปต์การติดตั้ง และการย้อนกลับ ลงทุนกับสิ่งเหล่านี้เหมือนผลิตภัณฑ์ที่มีผู้ใช้ ปล่อยเล็ก ปล่อยบ่อย และมองแต่ละการปล่อยเป็นหลักฐานเกี่ยวกับไปป์ไลน์ ให้ฝ่ายสนับสนุนและฝ่ายปฏิบัติการมีส่วนร่วมเมื่อการเปลี่ยนแปลงกระทบพวกเขา

ทีมบริการและทีมปฏิบัติการ

ทีมปฏิบัติการได้ประโยชน์จากการปล่อยที่เล็กและคาดเดาได้มากขึ้น และช่วยได้ด้วยการกำหนดว่าอะไรต้องเป็นจริงก่อนยอมรับการปล่อย ได้แก่ การเฝ้าติดตาม คู่มือปฏิบัติ และการย้อนกลับ เปลี่ยนจากการเฝ้าด่านเป็นการสนับสนุนด้วยการจัดหาแพลตฟอร์มและการตรวจสอบที่ทีมส่งมอบใช้ เฝ้าสัญญาณหลังการปล่อย

ภาวะผู้นำและธรรมาภิบาล

ผู้นำตัดสินใจว่าทีมลงทุนในไปป์ไลน์และทนต่อเส้นโค้งตัว J ได้หรือไม่ ขอเวลานำ อัตราความล้มเหลวของการเปลี่ยนแปลง และเวลากู้คืน ต้านการห้ามปล่อยแบบครอบคลุมเป็นการตอบสนองต่อความเสี่ยง และขอหลักฐานว่าการปล่อยที่เสี่ยงได้รับการตรวจสอบมากขึ้นแทน

ลูกค้าและผู้ใช้

ลูกค้าและผู้ใช้เห็นการปรับปรุงเล็กๆ บ่อยๆ และการหยุดชะงักครั้งใหญ่ที่น้อยลง พึงคาดหวังการแจ้งล่วงหน้าเกี่ยวกับการเปลี่ยนแปลงที่กระทบคุณและวิธีรายงานปัญหา หากคุณมีช่วงพีค ให้บอกผู้ให้บริการเพื่อให้วางแผนการเปิดตัวเป็นขั้นรอบช่วงนั้น

รูปแบบความล้มเหลวที่พบบ่อย

  • การปล่อยแบบบิ๊กแบง การเปลี่ยนแปลงหลายร้อยรายการออกพร้อมกัน แก้ไขโดยปล่อยเป็นชุดเล็กและแยกการติดตั้งออกจากการปล่อย
  • การติดตั้งด้วยมือ ขั้นตอนต่างกันตามบุคคลและล้มเหลวตอนกลางคืน แก้ไขโดยทำให้เป็นอัตโนมัติทีละส่วน เริ่มจากขั้นตอนที่เสี่ยงที่สุด
  • ปล่อยบ่อยขึ้นโดยไม่มีมาตรการป้องกัน อัตราความล้มเหลวเพิ่มและผู้คนหมดไฟ ตามที่ DORA เตือน แก้ไขโดยลงทุนในการทดสอบ การย้อนกลับ และการเฝ้าติดตามก่อน
  • อาร์ทิแฟกต์ต่างกันในสภาพแวดล้อมต่างกัน สิ่งที่ทดสอบไม่ใช่สิ่งที่รัน แก้ไขโดยสร้างครั้งเดียวและเลื่อนระดับอาร์ทิแฟกต์เดียวกัน
  • กิ่งอายุยาว การรวมกลายเป็นเหตุการณ์ แก้ไขโดยให้กิ่งสั้นและรวมระบบอย่างต่อเนื่อง
  • การย้อนกลับที่ไม่เคยลอง การย้อนกลับครั้งแรกเกิดขึ้นระหว่างการล่ม แก้ไขโดยฝึกซ้อมเป็นประจำ
  • ฝ่ายสนับสนุนรู้เป็นคนสุดท้าย เจ้าหน้าที่รู้เรื่องการเปลี่ยนแปลงจากผู้ใช้ แก้ไขโดยส่งบันทึกการปล่อยและผู้ติดต่อก่อนปล่อย
  • การห้ามเปลี่ยนแปลงแบบครอบคลุม ช่วงห้ามเดียวกันใช้กับทุกการเปลี่ยนแปลง แก้ไขโดยให้การเปลี่ยนแปลงความเสี่ยงต่ำที่ทดสอบดีผ่านได้พร้อมการตรวจเพิ่มเติม และเก็บช่วงห้ามไว้สำหรับสิ่งที่เสี่ยง

แบบจำลองความเป็นผู้ใหญ่

มิติ เริ่มต้น พัฒนา สร้างมาตรฐาน บริหารจัดการ ประสานกลมกลืน
การติดตั้งอัตโนมัติ การติดตั้งด้วยมือและแตกต่างกัน บางการติดตั้งใช้สคริปต์ ทำการติดตั้งเป็นอัตโนมัติผ่านไปป์ไลน์ร่วม ติดตามและลดความล้มเหลวและระยะเวลาของการติดตั้ง แบ่งปันและปรับปรุงไปป์ไลน์และแนวปฏิบัติข้ามทีม
ความถี่และขนาดของการปล่อย ปล่อยไม่บ่อยและใหญ่ บางทีมปล่อยเป็นชุดเล็กลง ทีมปล่อยเป็นชุดเล็กตามจังหวะที่ทราบ วัดและปรับความถี่ เวลานำ และขนาด ประสานจังหวะการปล่อยข้ามบริการและผู้ส่งมอบ
ความปลอดภัย (การทดสอบ การเปิดตัว การย้อนกลับ) ทดสอบด้วยมือ ไม่เคยลองย้อนกลับ มีการทดสอบอัตโนมัติและขั้นตอนย้อนกลับบางส่วน การทดสอบอัตโนมัติ การเปิดตัวเป็นขั้น และการย้อนกลับที่ฝึกซ้อมเป็นมาตรฐาน ติดตามและปรับปรุงอัตราความล้มเหลวของการเปลี่ยนแปลงและเวลากู้คืน แบ่งปันและทดสอบแนวปฏิบัติด้านความปลอดภัยข้ามทีม
ความพร้อมของฝ่ายสนับสนุน ฝ่ายสนับสนุนรู้เรื่องการปล่อยจากผู้ใช้ บางการปล่อยมีบันทึก บันทึกการปล่อยและผู้ติดต่อเป็นมาตรฐาน รวบรวมและลงมือตามข้อเสนอแนะของฝ่ายสนับสนุนเกี่ยวกับการปล่อย ฝ่ายสนับสนุน ฝ่ายส่งมอบ และผู้ใช้วางแผนการปล่อยร่วมกัน

รายการตรวจสอบ

  • เราบอกความแตกต่างระหว่างการติดตั้งกับการปล่อยได้ และใช้มัน
  • การติดตั้งเป็นอัตโนมัติโดยไม่มีขั้นตอนด้วยมือ หรือระบุขั้นตอนด้วยมือที่เหลือไว้
  • เราสร้างครั้งเดียวและเลื่อนระดับอาร์ทิแฟกต์เดียวกันผ่านสภาพแวดล้อม
  • การทดสอบอัตโนมัติรันกับทุกการเปลี่ยนแปลงและให้ข้อเสนอแนะภายในไม่กี่นาที
  • กิ่งมีอายุสั้นและรวมเข้าทรังก์บ่อย
  • มีการย้อนกลับสำหรับการปล่อยแต่ละประเภทและฝึกซ้อมแล้ว
  • การเปิดตัวเป็นขั้นในจุดที่ความเสี่ยงสมควร พร้อมสัญญาณที่กำหนดล่วงหน้า
  • บันทึกการปล่อยและปัญหาที่ทราบไปถึงศูนย์บริการก่อนการปล่อย
  • การตั้งค่าอยู่ในการควบคุมเวอร์ชันและมีการทบทวน
  • เราติดตามเวลานำ อัตราความล้มเหลวของการเปลี่ยนแปลง และเวลากู้คืนสำหรับแต่ละบริการ

พรอมต์ปัญญาประดิษฐ์

วัตถุประสงค์: ทำแผนที่ขั้นตอนจาก "พร้อม" ถึง "ใช้งานจริง" และค้นหาสิ่งที่ควรทำให้เป็นอัตโนมัติ

Help me map the path of a change from ready to live.

The steps in order, with who does each, whether it is manual or automated, and how long it typically waits or takes: [paste].
The last three releases and what went wrong, if anything: [paste facts].

Produce a table of steps and mark the manual ones. Rank the manual steps by how often they caused problems in the text, and suggest, for the top three, one small way to automate or check each. Do not invent durations or failure counts. Ask clarifying questions first if information is missing, mark assumptions, and list what you are unsure of.

วัตถุประสงค์: เขียนบันทึกการปล่อยสำหรับศูนย์บริการและผู้ใช้

Write a release note for [service].

What changed (plain words): [describe].
Who is affected and when: [describe].
What users will notice: [describe].
Known issues and workarounds: [list, or write "none known"].
How to roll back and who to contact: [describe].

Write two versions: a one-paragraph note for users and a half-page note for the service desk. Use only the facts above. Mark any statement that is an assumption and ask clarifying questions first if information is missing. List what you are unsure of.

วัตถุประสงค์: วางแผนการเปิดตัวเป็นขั้น

Plan a staged rollout of [change].

What it changes and who uses it: [describe].
How we can limit exposure (percentage of users, regions, servers, feature switch): [describe options available].
Signals we can watch: [list monitoring and user feedback sources].
Rollback method: [describe].

Propose stages, what to check at each stage, who can pause or stop, and what would trigger a rollback, leaving numeric thresholds as [to be agreed]. Do not invent monitoring that we do not have. Ask clarifying questions first, mark assumptions, and list what you are unsure of.

วัตถุประสงค์: เตรียมข้อเสนอเพื่อลงทุนในการปล่อยอัตโนมัติ

Help me prepare a short case for investing in release automation for [service].

What a release costs us today, in facts: [people involved, hours, incidents, delays; use real numbers only].
What we want to be able to do: [describe].
Known risks of the work: [for example a temporary slowdown while tests are written].

Write a one-page case with the problem, the proposed first steps (small and incremental), what we will measure (lead time, change fail rate, recovery time, with no targets that I did not give), the risks including a temporary dip in delivery, and what we ask for. Do not invent figures. Ask clarifying questions first, and list what you are unsure of.

ทักษะปัญญาประดิษฐ์

  • release-notes: ใช้บอกผู้ใช้และศูนย์บริการว่าการปล่อยเปลี่ยนอะไร
  • changelog: ใช้เก็บบันทึกต่อเนื่องของการเปลี่ยนแปลงตามเวอร์ชัน
  • test-driven-development: ใช้สร้างการทดสอบอัตโนมัติที่ทำให้การปล่อยบ่อยปลอดภัย
  • shift-left-testing: ใช้ย้ายการทดสอบไปไว้ก่อนในไปป์ไลน์เพื่อให้พบปัญหาเร็วขึ้น
  • agile-delivery: ใช้วางแผนการปล่อยเล็กๆ บ่อยๆ และการตรวจสอบรอบๆ

แหล่งอ้างอิงหลัก

  • Continuous delivery (DORA, dora.dev): นิยาม แนวปฏิบัติที่แนะนำ ข้อค้นพบ และข้อผิดพลาดของโครงการวิจัย
  • Release Engineering (Site Reliability Engineering, Google, sre.google): แนวปฏิบัติขององค์กรหนึ่งเรื่องบริการตนเอง การสร้างที่ทำซ้ำได้ และนโยบายการปล่อยที่บังคับใช้
  • Streamlining change approval (DORA, dora.dev): แนวทางว่าการอนุมัติเข้ากับการส่งมอบอย่างไร
  • Continuous delivery (Wikipedia): ภาพรวมของแนวปฏิบัติและประวัติ

เอกสารอ้างอิง

  1. Continuous delivery — DORA, dora.dev — https://dora.dev/capabilities/continuous-delivery/
  2. Release Engineering — Google SRE book, sre.google — https://sre.google/sre-book/release-engineering/
  3. Streamlining change approval — DORA, dora.dev — https://dora.dev/capabilities/streamlining-change-approval/
  4. Continuous delivery — Wikipedia — https://en.wikipedia.org/wiki/Continuous_delivery
  5. Software deployment — Wikipedia — https://en.wikipedia.org/wiki/Software_deployment
  6. Release management — Wikipedia — https://en.wikipedia.org/wiki/Release_management
  7. Feature toggle — Wikipedia — https://en.wikipedia.org/wiki/Feature_toggle
  8. Continuous integration — Wikipedia — https://en.wikipedia.org/wiki/Continuous_integration
  9. Version control — Wikipedia — https://en.wikipedia.org/wiki/Version_control

คู่มือ ITIL แบบเอไจล์ — การบริหารบริการไอทีแบบเอไจล์

ซอร์สโค้ดและการมีส่วนร่วม: github.com/agile-itil. สร้างด้วย: Lily Design System™.

นำโดย: Joel Parker Henderson.