1 คะแนน โดย GN⁺ 2025-06-13 | 1 ความคิดเห็น | แชร์ทาง WhatsApp
  • เมื่อวันที่ 12 มิถุนายน 2025 Cloudflare เริ่มพบปัญหา การยืนยันตัวตนของ Access ล้มเหลว และปัญหาการเชื่อมต่อ Zero Trust WARP ก่อนที่เหตุขัดข้องจะแพร่กระจายไปยังบริการหลักหลายรายการ และได้รับการแก้ไขเมื่อเวลา 21:31 UTC
  • เนื่องจาก เหตุขัดข้องของบริการบุคคลที่สาม ซึ่งเป็น dependency สำคัญ ทำให้ Workers KV ออฟไลน์ ส่งผลกระทบต่อเนื่องไปยังผลิตภัณฑ์ที่ใช้บริการนี้ในการจัดเก็บและกระจายข้อมูล
  • ขอบเขตผลกระทบกว้าง ครอบคลุม Access, WARP, Browser Isolation, Browser Rendering, Workers KV, Workers AI, Stream, Turnstile, AI Gateway, AutoRAG, บางส่วนของ Dashboard และอื่น ๆ
  • เวลา 20:32 UTC บริการทั่วโลกกำลังฟื้นตัวอย่างรวดเร็ว และแม้ WARP กับ Turnstile จะอยู่ในสถานะใช้งานได้แล้ว แต่ยังมีผลกระทบตกค้างบางส่วน
  • เวลา 20:57 UTC บริการทั้งหมดของ Cloudflare กลับสู่สถานะ ปฏิบัติการเต็มรูปแบบ และ Cloudflare เปลี่ยนไปสู่ขั้นตอนตรวจสอบเสถียรภาพโดยดูจากตัวชี้วัดของแพลตฟอร์ม

ลำดับเหตุขัดข้องและการกู้คืน

  • เวลา 18:19 UTC ทีมวิศวกรรมของ Cloudflare เริ่มตรวจสอบปัญหา การยืนยันตัวตนของ Access ล้มเหลว
    • การเชื่อมต่อ Cloudflare Zero Trust WARP ได้รับผลกระทบด้วยเช่นกัน
  • หลังจากนั้นเกิด ความล้มเหลวเป็นครั้งคราว ในหลายบริการ และ Cloudflare ได้ประเมินขอบเขตผลกระทบแยกตามบริการพร้อมอัปเดตรายการ
  • เวลา 19:12 UTC บางบริการเริ่มฟื้นตัวแล้ว แต่เนื่องจากกระบวนการ retry และการเติม cache อาจยังเกิดข้อผิดพลาดเป็นครั้งคราวในภาพรวมของบริการที่ได้รับผลกระทบ
  • เวลา 20:32 UTC การกู้คืนบริการทั่วโลกดำเนินไปอย่างรวดเร็ว
    • WARP และ Turnstile อยู่ในสถานะใช้งานได้แล้ว แต่ยังมีผลกระทบตกค้างขนาดเล็กบางส่วน
    • เมื่อบริการหลัก Workers KV ฟื้นตัว ผลิตภัณฑ์ที่พึ่งพาบริการนี้ก็กลับมาออนไลน์อีกครั้ง
  • เวลา 20:57 UTC บริการทั้งหมดของ Cloudflare อยู่ในสถานะ ปฏิบัติการเต็มรูปแบบ และเปลี่ยนไปเป็นการมอนิเตอร์เพื่อตรวจสอบเสถียรภาพอย่างต่อเนื่อง
  • เวลา 21:31 UTC เหตุการณ์ถูกปิดในสถานะ แก้ไขแล้ว

บริการที่ได้รับผลกระทบและสาเหตุ

  • บริการสำคัญ Workers KV ของ Cloudflare ออฟไลน์ เนื่องจากเหตุขัดข้องของบริการบุคคลที่สามซึ่งเป็น dependency หลัก
  • ผลิตภัณฑ์บางส่วนของ Cloudflare ที่ใช้บริการ KV เพื่อจัดเก็บและกระจายข้อมูลอยู่ในสถานะใช้งานไม่ได้
    • Access
    • WARP
    • Browser Isolation
    • Browser Rendering
    • Durable Objects ที่ใช้ SQLite ในกลุ่ม Durable Objects
    • Workers KV
    • Realtime
    • Workers AI
    • Stream
    • บางส่วนของ Cloudflare Dashboard
    • Turnstile
    • AI Gateway
    • AutoRAG
  • รายการบริการที่ได้รับผลกระทบรวมถึง Access, Dashboard, Durable Objects, Realtime SFU, Realtime TURN Service, RealtimeKit, Stream, Waiting Room, Cloudflare One Client, Workers AI และ Workers KV ในกลุ่ม Cloudflare Sites and Services

1 ความคิดเห็น

 
GN⁺ 2025-06-13
ความคิดเห็นบน Hacker News
  • หาก Workers KV ซึ่งเป็นบริการหลักของ Cloudflare ล่มเพราะบริการบุคคลที่สามซึ่งเป็น dependency สำคัญมีปัญหา ก็เท่ากับว่าบางบริการ พึ่งพา GCP อยู่
  • บน https://downdetector.com/ เห็นเหตุขัดข้องของบริษัทใหญ่หลายแห่ง เช่น Google, Cloudflare, AWS เป็นต้น
    ข่าวลือตามท้องถนนบอกว่ามี ปัญหา BGP routing ใหญ่อยู่เบื้องหลังทั้งหมดนี้
    • ฟังดูสมเหตุสมผล ตอนที่เคยเห็นเหตุการณ์คล้ายกันในอดีต ก็จำได้ว่าเพราะ BGP ทำให้ทราฟฟิกถูก route ไปทางอิหร่านหรือจีน
    • Internet Health Report แสดงว่า ไม่มีข้อมูลให้แสดง
      [1] https://www.ihr.live/
    • Anthropic ก็ล่มหรือประสิทธิภาพลดลงเหมือนกัน ได้เวลาออกไปเดินเล่นแล้ว
  • GCP ก็ล่มด้วย https://news.ycombinator.com/item?id=44260810
    • บังเอิญแปลกดี อยากรู้ว่า Cloudflare ใช้ GCP หรือเปล่า
  • เรื่องนี้น่าจะเป็นปัญหาใหญ่ ไม่ได้เห็น เหตุขัดข้องวงกว้าง ที่กระทบหลายบริการขนาดนี้มาพักใหญ่แล้ว
    • ตอนนี้ทุกคนเอาไข่ไปใส่ไว้ในตะกร้าไม่กี่ใบ เหตุการณ์แบบนี้เลยดูเหมือนจะเกิดขึ้นเป็นระยะ ๆ
  • มีใคร deploy การตั้งค่า BGP ผิดพลาดหรือเปล่า?
    • ถ้าเป็นเหตุขัดข้องที่ใหญ่และกว้างขนาดนี้ มันก็ดูต้องเป็นตัวการหลักเลย
  • เดี๋ยวคงมีบล็อกโพสต์ยาว ๆ ออกมาว่าพวกเขาช่วยกอบกู้อินเทอร์เน็ตไว้ได้ ;)
    ตอนนี้ล่มอยู่ แต่ลิงก์อ้างอิง: https://blog.cloudflare.com/the-ddos-that-almost-broke-the-i...
  • ดูเหมือนว่าจะกระทบไม่ใช่แค่ Workers แต่รวมถึงฟีเจอร์ กล่องโต้ตอบ “Verify you are human” ด้วย
    • ใช่ KV ก็พังด้วย Worker ทุกตัวที่พึ่งพา KV กำลัง throw exception
      ยังเข้า dashboard ได้ แต่ช้ามาก อัตราข้อผิดพลาดเริ่มพุ่งขึ้นอย่างมากตั้งแต่ราว ๆ 18:00 UTC
      แก้ไข: หน้าสถานะของ CF ก็ยอมรับแล้วว่าเป็นเหตุขัดข้องวงกว้างในหลายบริการ: https://www.cloudflarestatus.com/incidents/25r9t0vz99rp
    • เป็นอย่างนั้นจริง ๆ อีกคำถามคือ ทำไมเราถึงเห็นกล่องโต้ตอบแบบนี้จาก Cloudflare ตลอด แทนที่จะเป็น Akamai ตั้งแต่แรก
  • ชื่อเรื่องถูกเปลี่ยนเป็น “Broad Cloudflare service outages
  • เป็นเรื่องบังเอิญหรือเปล่าที่มีงานบำรุงรักษาตามกำหนดในโตเกียวตอน 18:00 UTC และปัญหาเริ่มตอน 18:19 UTC?
    • ไม่เกี่ยวกัน Cloudflare มีบริการอยู่ไม่กี่ตัวที่พึ่งพา GCP ซึ่งล่มอยู่
      แต่คนที่กำลังทำงานบำรุงรักษาในโตเกียวคงหน้าซีดกันแน่ ๆ เพราะกลัวว่าจะเป็นเรื่องที่ตัวเองทำ
    • คงได้รู้จาก postmortem ข้อดีอย่างเดียวของเหตุขัดข้องแบบนี้คือมีบทความดี ๆ ให้อ่านเพื่อเรียนรู้และเพลิดเพลิน
    • หน้านั้นมี การบำรุงรักษาตามกำหนด อยู่เสมอ จากประสบการณ์ของผมจึงไม่ใช่สัญญาณอะไรเป็นพิเศษ