AWS Billing Glitch ส่งประมาณค่าใช้จ่ายพันล้านดอลลาร์ให้ผู้ใช้ทั่วโลก

AWS Billing glitch ส่งประมาณค่าใช้จ่าย “พันล้านดอลลาร์” ให้ผู้ใช้ทั่วโลก ในเช้าวันศุกร์ที่ 17 กรกฎาคม ทีม AWS ยอมรับว่าระบบ Cost Explorer แสดงข้อมูลการคำนวณค่าใช้จ่ายโดยประมาณที่ผิดพลาดอย่างรุนแรง ผู้ใช้หลายพันรายได้รับอีเมลแจ้งเตือนว่าเกินวงเงินหลายแสนล้านดอลลาร์ แม้ตัวเลขเหล่านั้นไม่สอดคล้องกับการใช้งานจริง การเกิดข้อผิดพลาดนี้เปิดเผยช่องโหว่ในกระบวนการคำนวณค่าบริการของคลาวด์ยักษ์ใหญ่และอาจส่งผลต่อความเชื่อมั่นของลูกค้าองค์กรทั่วโลก

Overview

ปัญหาเริ่มต้นจาก AWS Health Dashboard ที่แจ้งว่า Cost Explorer กำลัง “แสดงข้อมูลการประมาณค่าใช้จ่ายที่ไม่ถูกต้อง” เวลา 1:33 am ตามเวลาแปซิฟิกของวันศุกร์ ข้อความบนแดชบอร์ดระบุว่าผู้ใช้จะเห็นตัวเลขสูงกว่าการใช้งานจริง แต่ไม่ได้บ่งบอกถึงสาเหตุหรือขอบเขตที่แน่นอน

AWS รายงานว่าได้ตรวจสอบและพบ “ปัญหาเกี่ยวกับ unit pricing ภายในส่วนย่อยของระบบคำนวณค่าใช้จ่ายโดยประมาณ” ภายในหนึ่งชั่วโมงครึ่งหลังจากเริ่มการสอบสวน แม้จะระบุสาเหตุขั้นพื้นฐานแล้ว แต่บริษัทไม่ได้ให้รายละเอียดเชิงเทคนิคเพิ่มเติมเพื่อไม่ให้ข้อมูลรั่วไหลต่อผู้แข่งขัน

การหยุดอัปเดตค่าประมาณเป็นมาตรการแรกของ AWS เพื่อป้องกันตัวเลขที่บิดเบือนเพิ่มขึ้น ลูกค้าจะยังคงเห็นจำนวนเงินที่สูงเกินจริงในหน้าจอ แต่จะไม่มีการเปลี่ยนแปลงเพิ่มเติมจนกว่าจะทำการแก้ไขเต็มรูปแบบ

Timeline & Technical Details

• 1:33 am PT (ศุกร์) – เปิดแจ้งเตือนบน AWS Health Dashboard เกี่ยวกับข้อมูลไม่ถูกต้องของ Cost Explorer
• ภายใน 90 นาที – ทีมวิศวกร AWS ระบุสาเหตุเป็นปัญหา “unit pricing” ใน subsystem ที่คำนวณค่าบริการโดยประมาณ
• หลังจากระบุต้นเหตุ – ระบบ estimated bill updates ถูกหยุดทำงานเพื่อไม่ให้ตัวเลขเพิ่มขึ้นต่อไป

AWS อธิบายว่าขั้นตอนแก้ไขจะต้องใช้หลายชั่วโมง เนื่องจากจำเป็นต้องคำนวนใหม่ (re‑compute) ข้อมูลที่ผิดพลาดและทำการ back‑fill ใน Cost Management Console การอัปเดตครั้งแรกของหน้าแดชบอร์ดระบุว่าจะเสร็จสิ้นภายในเที่ยงวันเวลาแปซิฟิกของวันเสาร์ที่ 18 กรกฎาคม

Customer Impact & Reactions

ผู้ใช้หลายพันรายได้แชร์ประสบการณ์บน Reddit และ Hacker News โดยมีภาพหน้าจอยืนยันว่าบัญชีที่เคยใช้เพียง $0.19 ต่อเดือน ถูกแสดงเป็นประมาณค่าใช้จ่ายเกือบ $2.5 billion ในบางกรณี ผู้ใช้รายอื่นระบุการประเมินอยู่ในช่วงตั้งแต่ $126,000 ถึง $2.5 trillion

เหตุการณ์ดังกล่าวทำให้หลายองค์กรเริ่มตรวจสอบระบบควบคุมค่าใช้จ่ายภายใน (FinOps) และอาจส่งผลต่อกระบวนการอนุมัติงบประมาณของโครงการคลาวด์ในระยะสั้น นอกจากนี้ การแจ้งเตือนแบบอัตโนมัติเกินจริงยังทำให้ศูนย์บริการลูกค้าต้องรับมือกับคำร้องขอสอบถามจำนวนมหาศาลโดยไม่จำเป็น

AWS Response & Mitigation Steps

AWS เน้นว่าตัวเลขที่แสดงอยู่เป็น “ประมาณค่าใช้จ่ายที่ผิดพลาด ไม่ได้สะท้อนการใช้งานจริงหรือค่าบริการที่ต้องชำระ” และขอให้ลูกค้าไม่ต้องดำเนินการใด ๆ เพิ่มเติม เช่น ส่งตั๋วร้องเรียนไปยังศูนย์ช่วยเหลือ

ขั้นตอนต่อไปของ AWS ได้แก่

• การ pause การอัปเดตรายการประมาณค่าใช้จ่ายเพื่อหยุดการบิดเบือนเพิ่มเติม
• การทำ backfill ข้อมูลใน Cost Management Console เพื่อแก้ไขตัวเลขให้สอดคล้องกับการใช้งานจริง
• คาดว่าจะมีการอัพเดตค่าประมาณที่ถูกต้องโดยครบถ้วนภายในเที่ยงวัน PT ของ 18 กรกฎาคม

AWS ไม่ได้ให้รายละเอียดเชิงลึกเพิ่มเติมเกี่ยวกับวิธีการตรวจจับหรือป้องกันข้อบกพร่องในอนาคต นอกจากการชี้ให้ผู้ใช้ติดตามหน้า AWS Health Dashboard สำหรับอัปเดตสถานะต่อไป

Analysis of Underlying Causes

แม้ว่า AWS จะระบุสาเหตุเป็น “unit pricing” ภายใน subsystem ที่คำนวณค่าบริการโดยประมาณ แต่การอธิบายนี้ยังเปิดช่องให้สงสัยเกี่ยวกับ ระบบราคาแบบไดนามิก ของคลาวด์ที่อาจพึ่งพาการคูณจำนวนหน่วย (units) กับอัตราค่าบริการตามช่วงเวลา

ข้อบกพร่องดังกล่าวบ่งชี้ว่าแม้โครงสร้างพื้นฐานของ AWS จะมีความเสถียรสูง การจัดการข้อมูลเชิงปริมาณที่ซับซ้อนอย่าง unit pricing ยังอาจเกิดความคลาดเคลื่อนได้ การตรวจสอบและทดสอบระบบคำนวณราคาต้องทำเป็นประจำเพื่อหลีกเลี่ยงผลกระทบต่อลูกค้าในระดับมหาศาล

นอกจากนี้ ความล่าช้าในการสื่อสารแก้ไข (หลายชั่วโมง) แสดงให้เห็นว่ากระบวนการ incident response ของ AWS ยังต้องพัฒนาให้ตอบสนองเร็วขึ้นเมื่อตัวเลขผิดปกติแสดงผลต่อผู้ใช้จำนวนมากในเวลาเดียวกัน

Summary

AWS ยอมรับว่าข้อผิดพลาดของระบบคำนวณค่าใช้จ่ายโดยประมาณทำให้ลูกค้าเห็นตัวเลขบิลที่เกินจริงหลายร้อยล้านถึงหลายพันล้านดอลลาร์ การหยุดอัปเดตและการ backfill ข้อมูลจะช่วยคืนค่าที่ถูกต้องภายในวันเสาร์ที่ 18 กรกฎาคม ผู้ใช้งานควรติดตามสถานะผ่าน AWS Health Dashboard และตรวจสอบความสอดคล้องของค่าใช้จ่ายจริงกับตัวเลขที่ปรากฏในระบบต่อไป.