1 คะแนน โดย GN⁺ 2024-02-23 | 1 ความคิดเห็น | แชร์ทาง WhatsApp
  • เหตุ เครือข่ายไร้สายของ AT&T ขัดข้อง ที่เกิดขึ้นในสหรัฐฯ เมื่อวันพฤหัสบดี ทำให้การโทร การส่งข้อความ และการโทรฉุกเฉิน 911 บางส่วนมีปัญหา โดย AT&T ระบุว่าบริการของลูกค้าที่ได้รับผลกระทบทั้งหมดได้รับการกู้คืนแล้วหลังเวลา 15:00 น. ตามเวลาตะวันออกไม่นาน
  • จากการตรวจสอบเบื้องต้น พบว่าสาเหตุ ไม่ใช่การโจมตีทางไซเบอร์ แต่เป็นการนำไปใช้และการดำเนินกระบวนการที่ไม่ถูกต้องระหว่างการขยายเครือข่าย โดย AT&T จะประเมินเพิ่มเติมต่อไป
  • รายงานบน Downdetector เริ่มเพิ่มขึ้นราว 04:00 น. ตามเวลาตะวันออก และพุ่งสูงสุดที่ประมาณ 74,000 รายงาน เมื่อเวลา 08:30 น. โดยช่วงใกล้เที่ยงยังมีรายงานประมาณ 58,000 รายงาน
  • อุปกรณ์ที่ได้รับผลกระทบไม่มีแถบสัญญาณหรือแสดงข้อความ SOS และลูกค้าสามารถโทรได้เมื่อเปิด Wi-Fi calling
  • Verizon และ T-Mobile ก็มีรายงานหลายพันรายการเช่นกัน แต่ทั้งสองบริษัทมองว่าน่าจะสะท้อนปัญหาในกระบวนการพยายามเชื่อมต่อกับผู้ใช้เครือข่ายอื่น

สถานการณ์เหตุขัดข้องและการกู้คืนของ AT&T

  • เมื่อวันพฤหัสบดี ผู้ใช้ AT&T หลายพันคนในสหรัฐฯ ประสบปัญหาเครือข่ายเซลลูลาร์ขัดข้อง ทำให้การโทรและการส่งข้อความมีปัญหา
  • AT&T แจ้งว่าบริการของลูกค้าที่ได้รับผลกระทบทั้งหมดได้รับการกู้คืนแล้วหลังเวลา 15:00 น. ตามเวลาตะวันออกไม่นาน
  • บริษัทระบุว่าการรักษาการเชื่อมต่อของลูกค้าเป็นสิ่งสำคัญสูงสุด และกำลังดำเนินมาตรการเพื่อไม่ให้ลูกค้าต้องประสบเหตุเช่นนี้อีก
  • AT&T ได้จัดทำเว็บไซต์ system updates แต่ไม่ได้เปิดเผยจำนวนลูกค้าที่ได้รับผลกระทบจากเหตุขัดข้องเมื่อวันพฤหัสบดี

สาเหตุของเหตุขัดข้องและการตอบสนองของหน่วยงานกำกับดูแล

  • จากการตรวจสอบเบื้องต้นของ AT&T ในช่วงดึกของวันพฤหัสบดี พบว่าสาเหตุของเหตุขัดข้องคือการนำไปใช้และการดำเนินกระบวนการที่ไม่ถูกต้องซึ่งใช้ใน กระบวนการขยายเครือข่าย
  • ในคำอธิบายเดียวกัน บริษัทได้ยืนยันว่าเหตุขัดข้องครั้งนี้ ไม่ใช่การโจมตีทางไซเบอร์
  • FCC ระบุบน X ว่ากำลังสอบสวนเหตุการณ์นี้ และกำลังติดต่อกับ AT&T รวมถึงหน่วยงานด้านความปลอดภัย
  • AT&T จะดำเนินการประเมินเหตุขัดข้องต่อไป

แนวโน้มรายงานบน Downdetector และราคาหุ้น

  • ตามข้อมูลของ Downdetector.com รายงานเหตุขัดข้องเริ่มเพิ่มขึ้นราว 04:00 น. ตามเวลาตะวันออก
  • จำนวนรายงานพุ่งสูงสุดที่ประมาณ 74,000 รายงาน ราวเวลา 08:30 น.
  • ช่วงใกล้เที่ยง มีรายงานเหตุขัดข้องประมาณ 58,000 รายงาน
  • หุ้น AT&T ปิดตลาดวันพฤหัสบดีโดย ลดลง 2.41%

การแสดงผลบนอุปกรณ์และผลกระทบต่อ 911

  • โทรศัพท์ที่ได้รับผลกระทบจากเหตุขัดข้องไม่มีแถบสัญญาณที่มุมขวาบนของหน้าจอ หรือแสดงข้อความ SOS
  • ลูกค้าสามารถโทรได้หากเปิดใช้งาน Wi-Fi calling
  • San Francisco Fire Department แจ้งในโพสต์บน X ว่าลูกค้าเครือข่ายไร้สายของ AT&T ไม่สามารถโทรออกหรือรับสายได้ รวมถึงการโทร 911 ด้วย
  • Andre Dickens นายกเทศมนตรีเมือง Atlanta ระบุว่าเมืองสามารถรับและโทรออกสาย 911 ได้ แต่ลูกค้า AT&T ในพื้นที่รายงานว่าโทรศัพท์อยู่ในโหมด SOS
  • Massachusetts State Police ขอให้ประชาชนอย่าโทรเข้าไปยังศูนย์ 911 เพื่อตรวจสอบว่าบริการ 911 บนโทรศัพท์มือถือใช้งานได้หรือไม่ เนื่องจากมีสายดังกล่าวจำนวนมาก
    • พร้อมแจ้งว่าหากสามารถโทรแบบไม่ฉุกเฉินไปยังหมายเลขทั่วไปได้สำเร็จ บริการ 911 ก็ใช้งานได้เช่นกัน

รายงานของ Verizon และ T-Mobile

  • ตามข้อมูลของ Downdetector ณ เวลา 10:00 น. ตามเวลาตะวันออก ผู้ใช้ Verizon และ T-Mobile ก็รายงานเหตุขัดข้องบริษัทละหลายพันรายการเช่นกัน
  • ทั้งสองบริษัทมองว่ารายงานดังกล่าวน่าจะสะท้อนความยากลำบากที่เกิดขึ้นระหว่างการพยายามเชื่อมต่อกับผู้ใช้เครือข่ายอื่น
  • T-Mobile อธิบายในแถลงการณ์ทางอีเมลว่า Downdetector น่าจะสะท้อนปัญหาที่ลูกค้าพบเมื่อพยายามเชื่อมต่อไปยังผู้ใช้เครือข่ายอื่น

1 ความคิดเห็น

 
GN⁺ 2024-02-23
ความคิดเห็นบน Hacker News
  • นี่คือ ข้อบกพร่องเชิงสถาปัตยกรรม ที่ร้ายแรง
    ต่อให้มองย้อนประวัติศาสตร์ทั้งหมดของระบบสวิตช์ไฟฟ้าเชิงกลของ Bell System ก็แทบไม่มี central office แห่งไหนหยุดให้บริการเกิน 30 นาทีเลย ยกเว้นภัยธรรมชาติหรือเหตุไฟไหม้ครั้งใหญ่ใน NYC เพียงครั้งเดียว
    ระบบ AT&T Long Lines ในช่วงทศวรรษ 1960~70 มีศูนย์ภูมิภาค 10 แห่งที่เป็นอิสระต่อกันทั้งหมดและเชื่อมถึงกันอย่างหนาแน่น ส่วนศูนย์ควบคุมที่ Bedminster, NJ มีหน้าที่แค่เฝ้าติดตามและอัปเดตเส้นทางทุก 15 นาที
    หากจำเป็น สวิตช์ทุกตัวสามารถย้อนกลับไปใช้การกำหนดเส้นทางพื้นฐานได้ และหากโหลดสูงเกินไป แม้บางสายจะโทรไม่ติด แต่ส่วนใหญ่ก็ยังทำงานต่อได้

    • มีเหตุขัดข้อง Mother's Day ในปี 1990
      สาเหตุคือมีการเปลี่ยนคำสั่ง break เป็น continue ในโค้ด C ที่จัดการ routing และเกิดผลกระทบเป็นลูกโซ่
      อย่างไรก็ตาม มันส่งผลเฉพาะกับบริการโทรศัพท์ทางไกลเท่านั้น
    • ช่วงนี้รู้สึกว่าโครงสร้างพื้นฐานในสหรัฐแทบทั้งหมด เชื่อถือได้ น้อยลงกว่าเดิมเมื่อเทียบกับปลายศตวรรษที่ 20
      ไม่แน่ใจว่าเป็นแค่ความรู้สึกไปเองหรือเป็นเรื่องจริง และถ้าเป็นจริงมันหมายความว่าอย่างไร
    • น่าแปลกที่ไม่มีใครเห็น 502 ตอนพยายามเปิด WiFi calling
      ต้นทางของ 502 มาจาก Azure และดูเหมือนจะเป็นปัญหาของสถาปัตยกรรมคลาวด์
    • อาจเป็นสาเหตุนี้ก็ได้: https://www.webwire.com/ViewPressRel.asp?aId=318230
    • ในบริบทนี้ ขนาดทางกายภาพของ central office โดยทั่วไปอยู่ในระดับไหนของพื้นที่ท้องถิ่นกันแน่
  • มีประเด็นหนึ่งที่แทบไม่ได้ถูกพูดถึงที่นี่: ผลกระทบเป็นลูกโซ่ ของเหตุขัดข้องนี้ โดยเฉพาะผลต่อคนขับรถเป็นอย่างไรบ้าง?
    คนจำนวนมากที่อยู่ในอาคารอาจพอเลี่ยงไปใช้ Wi‑Fi ได้ แต่กับคนขับรถน่าจะได้รับผลกระทบในวงกว้างพอสมควร
    ตัวอย่างที่นึกออกคือ UPS, FedEx, Amazon และคนขับรถบรรทุกที่พึ่งพาแอปแผนที่บนมือถืออาจส่งของล่าช้า, คนขับ Uber/Lyft/แท็กซี่อาจนำทางไปจุดรับส่งไม่ได้, และการจราจรอาจแย่ลงเพราะไม่ได้รับการปรับเส้นทางหรือแนะนำปลายทาง
    บริษัทใหญ่ ๆ อาจมีระบบของตัวเองหรือมีความซ้ำซ้อนอย่างอุปกรณ์ GPS เฉพาะทาง แต่ก็สงสัยว่ามีผลกระทบแบบนี้เกิดขึ้นจริงไหม หรือมีวิธีเลี่ยงอย่างไร
    นอกจากเรื่องคนขับรถแล้ว ความเสี่ยงที่คนจะไม่ได้รับการรักษาในภาวะฉุกเฉินเพราะโทรออกไม่ได้ก็น่าจะเพิ่มขึ้น และก็ยังไม่ชัดเจนว่าสายฉุกเฉินได้รับผลกระทบอย่างไร

    • ตอนเกิด Rogers outage ในแคนาดาปี 2022 ก็มีการพึ่งพาด้านการจราจรเช่นกัน
      ในโตรอนโต สัญญาณไฟจราจรถึงหนึ่งในสี่ของทั้งหมดพึ่งพาเครือข่ายเซลลูลาร์ของ Rogers เพื่อเปลี่ยนจังหวะไฟ และระบบเฝ้าระวังระยะไกลของสัญญาณเตือนไฟไหม้กับสปริงเกลอร์ในอาคารเทศบาลก็ใช้เครือข่าย Rogers GSM
      ระบบจ่ายเงินค่าจอดรถสาธารณะและบริการจักรยานสาธารณะก็ใช้งานไม่ได้เช่นกัน
      https://en.m.wikipedia.org/wiki/2022_Rogers_Communications_o...
      จำได้ว่าตอนนั้นเป็นช่วงฤดูร้อน เลยมีโครงการในสวนสาธารณะสำหรับเด็กบางส่วนถูกยกเลิกด้วย เพราะเจ้าหน้าที่ต้องมีโทรศัพท์มือถือที่โทร 9-1-1 ได้ติดตัวไว้ แต่อย่างน้อยดูเหมือนว่าการโทรนั้นเองยังใช้งานได้ในกรณีนั้น
    • เช้านี้สาเหตุที่เจอรถติดหนักมากกลางย่านอาจเป็นเพราะเรื่องนี้ก็ได้
      ผมตั้งใจลดการพึ่งพามือถือ เลยไม่รู้ด้วยซ้ำว่ามีเหตุขัดข้องอะไรอยู่ แต่ก่อนผมจะเปิด Google Maps อัตโนมัติแม้จะไปแค่ระยะสั้น ๆ มาก แต่พอรู้ว่าถ้าพึ่งพาการติดตามตำแหน่งและคำสั่งจากบริษัทจนหมด เราจะค่อย ๆ สูญเสียความสามารถในการหาทางเอง ผมก็เลยเปลี่ยนมาใช้ Organic Maps ระหว่างกระบวนการเลิกใช้บริการของ Google
      ถึงอย่างนั้น ถ้าทำได้ผมก็ยังพยายามหาทางเองโดยไม่พึ่ง GPS เพราะรู้สึกว่า การหาทาง เป็นทักษะที่ถ้าไม่ฝึกก็หายไปได้จริง ๆ
      เช้านี้หลังจากข้ามตัวเมืองไปทำธุระเสร็จ ผมพยายามจะกลับเข้าสู่ถนนสายหลักที่ใหญ่ที่สุดที่ผมรู้จัก แต่กลับไปติดรถแน่นสนิทที่ต่อแถวไปทางตะวันตกอย่างน้อย 1 ไมล์ทันที
      ตอนแรกคิดว่าอาจมีอุบัติเหตุ แต่ก็มองไม่เห็นอะไรเลย ทุกคนแค่หยุดนิ่งอยู่ตรงนั้น
      ผมเลยกลับรถทันทีแล้วขึ้นไปทางเหนือ 0.75 ไมล์เพื่อไปถนนอีกเส้นที่มุ่งตะวันตกเหมือนกัน ปรากฏว่าไม่มีรถเลยและผมขับกลับบ้านด้วยความเร็วตามกฎหมายได้ตลอดทาง
      ปกติแอปนำทางที่คนใช้กันมากจะเสนอเส้นทางอื่นเมื่อมีรถติด แล้วทำไมทุกคนยังนั่งอยู่ในรถติดนั้น ทั้งที่ถนนคู่ขนานซึ่งอยู่ห่างไม่ถึง 1 ไมล์กลับว่างเปล่า? อาจเป็นผลกระทบลูกโซ่จากการที่เมื่อมือถือบอกทางอื่นไม่ได้ ก็มีคนจำนวนมากเกินไปที่เคยชินกับการทำตามคำสั่งจากมือถือ
    • ถ้าใช้ Google Maps ระบบจะขึ้นแนะนำให้ดาวน์โหลดแผนที่ของพื้นที่นั้นไว้ล่วงหน้าโดยอัตโนมัติ หากเป็นพื้นที่ที่รู้กันว่าสัญญาณสื่อสารไม่ดี
      เหมือนจะมีฟังก์ชันแผนที่ท้องถิ่นอัตโนมัติด้วย
    • ควรพูดไว้ด้วยว่า GPS ไม่ได้พึ่งพาบริการเซลลูลาร์
    • ไม่แน่ใจนักว่าการที่คนขับรถปรับเส้นทางไม่ได้จะทำให้จราจรแย่ลง
      คนขับส่วนใหญ่ใช้เส้นทางที่คุ้นเคยอยู่แล้ว ไม่ได้ให้ระบบอิเล็กทรอนิกส์นำทาง
      คำถามที่ดีกว่าคือรถไร้คนขับได้รับผลอย่างไร พวกมันหาทางไม่ได้หากไม่มีสัญญาณเซลลูลาร์จนต้องจอดข้างทางหรือเปล่า
  • สำหรับคนที่พยายามเดาต้นตอที่แท้จริง ต้องบอกว่าจากข้อมูลในคอมเมนต์ที่มีอยู่ตอนนี้ยังไม่พอจะสรุปได้
    ตอนที่ทำงานกับผู้ให้บริการโทรคมนาคม ฉันเคยรับมือปัญหาเครือข่ายเซลลูลาร์ระดับประเทศในแคนาดาหลายครั้ง ซึ่งผลกระทบระดับประเทศเกิดได้จากหลายสาเหตุมาก
    เคยมีครั้งหนึ่งที่มีการ inject route ใหม่เข้าเครือข่าย แล้ว routing engine ของอุปกรณ์เซลลูลาร์บางตัวล่มพร้อมกันทั่วประเทศ ผลคืออุปกรณ์เซลลูลาร์ทั้งประเทศใช้อินเทอร์เน็ตไม่ได้เท่านั้น โชคดีที่เกิดตอนช่วงบำรุงรักษาตี 2 และพบก่อนเวลางานจึง rollback ได้ เลยมีคนส่วนใหญ่ไม่รู้ตัว
    เคยมีกรณีที่ช่างเสียบเราเตอร์ตัวใหม่แล้ว core router เดิมล่มและรีบูต ผลกระทบที่ถึงขั้นเป็นข่าวมีแค่ outage ระดับภูมิภาคราว 20 นาที แต่หลังจากนั้นอีก 12 ชั่วโมงก็ยังเจอบั๊กและผลข้างเคียงตั้งแต่ฝั่งแปซิฟิกไปจนถึงชายฝั่งแอตแลนติก
    เพราะงั้นข้อมูลประเภท “ได้รับผลกระทบที่ตำแหน่ง x” จึงแยกได้ยากว่าพื้นที่นั้นล่มทั้งพื้นที่ คนจำนวนมากมีปัญหา หรือเป็นปัญหาของคนแค่หนึ่งสองคนที่ลามมาจากที่อื่น ดังนั้นข้อมูลว่าใช้ได้/ใช้ไม่ได้ในจุดใดจุดหนึ่งจึงมีคุณค่าอย่างจำกัด
    เคยมีครั้งที่ messaging relay ไปชน rate limit ที่ตั้งไว้ แล้วการ retry ของโปรโตคอลยิ่งทำให้อัตราข้อความสูงขึ้น จนเกิด congestion collapse แบบแทบสมบูรณ์ในบางโปรโตคอล เนื่องจากเป็นปัญหาความแออัดของการส่งต่อสถานะจึงมีผลทั่วประเทศ แต่ถึงอย่างนั้นก็ยังเป็นลักษณะว่าการไหลของข้อความสำเร็จได้ด้วยความน่าจะเป็น x% ทำให้บริการยังพอใช้งานได้บ้าง
    ส่วน outage ชื่อดังของ Rogers ฉันจำไม่ได้ว่าเคยยอมรับสาเหตุรากจริงทั้งหมดหรือไม่ มีการคาดเดาว่าเกิดจากการเปลี่ยนแปลงหรืออัปเกรดเครือข่าย routing แล้วผลข้างเคียงของปัญหาทำให้แม้แต่ทีมเทคนิคเองก็ถูกตัดออกจากเครือข่าย พอเครือข่ายทั่วประเทศล่มและพนักงานก็ใช้เครือข่ายเดียวกัน การประสานงานเพื่อกู้ระบบจึงยิ่งยาก
    เอกสารที่ยื่นต่อ CRTC ที่ฉันเคยอ่านนั้นปกปิดข้อมูลที่มีประโยชน์ไว้หมด แทบไม่มีอะไรให้เรียนรู้ การคาดเดาก็สนุกดี แต่หวังว่าครั้งนี้ AT&T จะโปร่งใสมากกว่าผู้ให้บริการในแคนาดา เพื่อให้อุตสาหกรรมได้เรียนรู้

    • แน่นอนว่า Rogers โทษ vendor และน่าจะเป็น Ericsson เพราะ Rogers ไม่มีทางทำผิดอยู่แล้ว
      น่าสนใจที่ได้เห็นองค์กรขนาดใหญ่อีกแห่งไม่มีแผน rollback หรือแผนรับมือความล้มเหลวสำหรับการเปลี่ยนแปลงที่อาจทำให้ทั้งบริษัทพังได้ เหมือนไม่มีหรือมีเพียงเล็กน้อยแม้แต่ IT 101 ขั้นพื้นฐาน
      สิ่งดีที่ได้เรียนรู้คือผู้ให้บริการรายใหญ่ 3 ราย หรือจริง ๆ คือ 2 ราย คิดว่าเป็นความคิดที่ดีที่จะให้ SIM สำรองฉุกเฉินของอีกเครือข่ายแก่พนักงานสำคัญ เมื่อเครือข่ายของตัวเองล่ม แม้จะเพิ่งทำในปี 2015 แต่ช้าก็ยังดีกว่าไม่ทำ
      Rogers ใช้ core เดียวกันทั้งสำหรับการเชื่อมต่อไร้สายและมีสาย ทำให้คนที่ใช้ผู้ให้บริการอินเทอร์เน็ตบุคคลที่สามซึ่งทำงานบนโครงข่ายของ Rogers ก็เจอ blackout เต็มรูปแบบไปด้วย เว็บไซต์ วงจรองค์กร และแทบทุกอย่างล่ม ขณะที่การสื่อสารของ Rogers เองก็แทบไม่มี
      โชคดีที่องค์กรของเราทำ multi-homing ไว้ จึงสลับวงจรตอน 6 โมงเช้าและหน้างานส่วนใหญ่ก็ดำเนินต่อได้แทบไม่มีปัญหา
      อีกเรื่องที่น่าสนใจคือสถานีฐานยังเปิดอยู่พอให้โทรศัพท์ attach ได้ แต่ทำอะไรต่อไม่ได้ ทำให้สาย 9-1-1 ไม่ถูกส่งต่อไปเครือข่ายอื่นและล้มเหลวไปเลย ดูเหมือนจะเป็นข้อบกพร่องของสเปก GSM หรือการตั้งโปรแกรม SIM ของ Rogers แต่ไม่รู้ว่าแก้แล้วหรือยัง
      https://en.m.wikipedia.org/wiki/2022_Rogers_Communications_o...
    • การคาดเดาน่าสนใจก็เพราะส่วนใหญ่มันสะท้อนตัวผู้เดาเอง อยากรู้ว่ามีคำเรียกสิ่งนี้หรือเปล่า
      ถ้าจะเหมารวมแบบหยาบมาก ๆ คนสายวิทยาศาสตร์จะเดาว่าเป็น solar flare เพื่อนฝ่ายขวาของฉันเดาว่าเป็นแฮ็กเกอร์ต่างชาติ ฉันเดาว่าเป็นการ deploy ซอฟต์แวร์ที่ล้มเหลว และมีใครบางคนในกระทู้นี้เขียนว่าเพื่อนที่เป็นทหารบอกให้กักตุนเชื้อเพลิงไว้
      แต่เหมือนกับทุกคน ฉันก็รู้สึกจริง ๆ ว่าการเดาของฉันน่าจะถูก
    • จากคอมเมนต์ใน DownDetector ดูเหมือนจะไม่ใช่ปัญหา routing
      มีรายงานเยอะว่าคน 6 คนในบ้านเดียวกันใช้ AT&T ทั้งหมด แต่มีแค่คนเดียวที่มีปัญหา
      ฟังดูเหมือนอัปเกรดที่ถูกใช้ไปแค่ครึ่งเดียว หรือเมื่อดูตามเวลาที่เกิดเหตุ ก็ดูเหมือน rollback ที่ทำไปแค่ครึ่งเดียวมากกว่า
    • ฉันสงสัยว่าการที่ข้อมูลที่มีประโยชน์ทั้งหมดในเอกสารยื่นต่อ CRTC ถูกปกปิดไว้นั้นเป็นเรื่องปกติในวงการหรือเปล่า
    • ฉันคิดว่าหนึ่งในเหตุผลหลักที่ยังมีบางคนใช้บริการได้คือ roaming
  • Verizon และ T-Mobile ต่างก็ประกาศว่าไม่ได้มี outage ในเครือข่ายของตัวเอง แต่เป็นปัญหาที่ลูกค้าของตนโทรหาลูกค้า AT&T ไม่ได้
    อย่างไรก็ตาม ดูเหมือนว่า เครือข่าย AT&T ในสหรัฐฯ ส่วนใหญ่จะล่ม

    • ทฤษฎีหนึ่งเกี่ยวกับปัญหา Verizon/T-Mobile ที่ถูกรายงานคือ เมื่อ AT&T ออฟไลน์ โทรศัพท์ AT&T ทั้งหมดเข้าสู่ SOS mode และพยายามลงทะเบียนกับเครือข่ายที่เหลืออยู่คือ Verizon และ T-Mobile เพื่อโทร 911
      การที่มีอุปกรณ์จำนวนมากพยายามลงทะเบียนพร้อมกันอาจทำให้บางส่วนของเครือข่ายเหล่านั้นโอเวอร์โหลดได้
    • ข้อมูลจาก AT&T ผ่าน MVNO ในแอตแลนตา: ยังเชื่อมต่อได้จนถึงประมาณ 11 โมงตามเวลาฝั่งตะวันออก แล้วก็ตัด หลังจากนั้นก็ไม่กลับมาเชื่อมต่ออีก
    • ภรรยาของฉันใช้ google-fi และเพื่อนร่วมงานใช้ verizon ทั้งคู่บอกว่าโทรออกไม่ได้
  • อาจไม่เกี่ยวกัน แต่จังหวะเวลามันแย่มากเพราะ AT&T เพิ่งยื่นคำขอเลิกให้บริการ โทรศัพท์บ้าน ในบางพื้นที่ของแคลิฟอร์เนีย
    https://www.wired.com/story/att-landline-california-complain...

  • เหตุขัดข้องสิ้นสุดแล้ว
    สถานะ: กู้คืนแล้ว
    AT&T FINAL, Service Degradation, Global Smart Messaging Suite
    AT&T Global Smart Messaging Suite
    คำอธิบายเหตุการณ์: FINAL, Service Degradation
    บริการที่ได้รับผลกระทบ: MMS MT
    เริ่ม: 2024-02-21 เวลา 22:00 ฝั่งตะวันออก, 21:00 ตอนกลาง, 19:00 แปซิฟิก
    สิ้นสุด: 2024-02-22 เวลา 11:00 ฝั่งตะวันออก, 10:00 ตอนกลาง, 08:00 แปซิฟิก
    ระยะเวลาหยุดชะงัก: 780 นาที
    เรียนลูกค้า Global Smart Messaging Suite พร้อมใช้งานแล้วในขณะนี้ บริการ MMS MT ได้รับการกู้คืนแล้ว และทีมของเรากำลังติดตามสถานการณ์
    AT&T Business Solutions
    Kind Regards,
    The AT&T SMS Service Administrator

    • ฉันคิดว่าประกาศแบบนี้ควรระบุด้วยว่ากำลังทำ การสอบสวนหาสาเหตุราก อยู่หรือไม่ และถ้ายังไม่แน่ชัดว่าจะมีการแชร์ผลสอบสวนหรือไม่ จะเผยแพร่ที่ไหน
      อาจเป็นเพราะฉันอ่านมากเกินไป แต่ฉันรู้สึกติดใจที่ข้อมูลนั้นหายไป
    • สงสัยว่านี่รวมถึงบริการโทรเสียงผ่านเครือข่ายเซลลูลาร์ด้วยหรือไม่
  • ช่วงนี้มีการพูดถึงเรื่อง หน้าสถานะ กันอีกครั้ง: https://news.ycombinator.com/item?id=39099980
    หน้าสถานะควรต้องแม่นยำ แต่สถานะของ AT&T กลับอ้างว่าทุกอย่างปกติดี
    บริการไร้สายของฉันล่ม และใน DownDetector ก็มีรายงานเป็นหลักหลายหมื่น ดังนั้นชัดเจนว่าไม่ได้ปกติทุกอย่าง

    • หน้าสถานะสาธารณะนั้นโดยพื้นฐานแล้วแทบไม่มีประโยชน์
      มันมีอยู่สองแบบ: อัปเดตด้วยการทดสอบอัตโนมัติ หรืออัปเดตด้วยมือ
      ถ้าเป็นแบบอัตโนมัติ เกือบตลอดเวลามันจะทำไว้ใช้ภายใน ไม่ใช่สำหรับสาธารณะ และถ้าเป็นแบบอัปเดตด้วยมือ ก็มักช้าเกือบเสมอ และยังไงก็จะอัปเดตหลังจากที่เหตุขัดข้องถูกโพสต์บน HN แล้ว
    • คงจะดีถ้า FTC บังคับ ให้หน้าสถานะต้องแม่นยำ
      น่าเบื่อจริง ๆ ที่ฝ่ายการตลาดเข้ามาคุมหน้าสถานะ จนกลายเป็นเครื่องหมายถูกสีเขียวอันฉาวโฉ่พร้อมตัว “i” เล็ก ๆ
    • ตอนนี้ในหน้าปัญหาขัดข้องของ AT&T มีแบนเนอร์นี้อยู่:
      “Service Alert: Some of our customers are experiencing wireless service interruptions this morning. We are working urgently to restore service to them. We will provide updates as they are available.”
      https://www.att.com/outages/
    • สงสัยว่ากำลังพูดถึงหน้าสถานะอันไหนกันแน่
  • ตอนนี้ยังไม่มีข้อมูลใน NANOG แต่คาดว่าอีกไม่กี่ชั่วโมงข้างหน้าคงมีอะไรมาโพสต์ในเธรดนี้: https://mailman.nanog.org/pipermail/nanog/2024-February/2250...

  • ต่อให้ใช้แอป myATT ก็ยังไม่เห็นบัญชีไร้สายของฉันเลย
    ทั้งบัญชีครอบครัวก็ไม่แสดงว่าเป็นบริการเลย ดูเหมือนจะเป็นการถูกแฮ็กหรือปัญหาภายในที่ทำให้ลบบัญชีไป
    มีใครช่วยเช็กได้ไหมว่าคนอื่นยังเห็นบัญชีของตัวเองหรือเปล่า

    • ดูเหมือนว่า API หลายตัวจะคืนค่า 502 เป็นพัก ๆ และนั่นน่าจะทำให้เว็บ/แอปมือถือมีอาการแปลก ๆ
    • จากที่เพิ่งอ่านมา ดูเหมือนว่าปัญหาหลักอยู่ที่ ฐานข้อมูลหมายเลข SIM
      คือ SIM สูญเสียการยืนยันตัวตนกับเครือข่าย ทำให้หลุดออกจากโครงข่ายกันหมด ถ้าเป็นแบบนั้นก็ดูมีแนวโน้มสูงว่าจะเป็นการปล่อยซอฟต์แวร์ที่ล้มเหลว
      บัญชีออนไลน์ก็น่าจะดึงข้อมูลนี้ไม่ทางใดก็ทางหนึ่งด้วย เลยอาจอธิบายได้ว่าทำไมพอร์ทัลถึงพัง
      ฮอตสปอตแบบเติมเงินยังใช้งานได้ดี แต่โทรศัพท์แบบสัญญารายเดือนใน “แพ็กเกจครอบครัว” ใช้งานไม่ได้เลยสักเครื่อง
      ก็เลยสงสัยว่าความต่างระหว่าง physical SIM กับ eSIM จะอธิบายได้ไหมว่าทำไมรุ่น “ใหม่กว่า” ถึงยังใช้งานได้
    • หน้าสถานะเหตุขัดข้องก็พังไปหมดเหมือนกัน ไม่แสดงอะไรเลย
    • บัญชีของฉันยังมองเห็นอยู่
      อย่างแรกที่ฉันทำตอนเห็นว่าโทรศัพท์ใช้ไม่ได้ คือรีบล็อกอินไปจ่ายบิลก่อน เพราะคิดว่าอาจลืมจ่ายเงิน
    • เครื่องมือจัดการบัญชีกับเครื่องมือดูสถานะก็ช้าและไม่เสถียรมาตลอดอยู่แล้ว
      จึงตัดความเป็นไปไม่ได้ที่แค่ทราฟฟิกเพิ่มขึ้นเล็กน้อยก็ทำให้มันล่มไม่ได้ ความสัมพันธ์ร่วมกันไม่ได้แปลว่าเป็นเหตุและผลเสมอไป
  • มีสิ่งที่เรียกว่าแผนที่เหตุขัดข้อง[1] แต่ไม่มีประโยชน์
    มันเป็นแค่แผนที่ที่ชี้ว่าพื้นที่ไหนในสหรัฐฯ มีคนอาศัยอยู่เยอะเท่านั้น
    [1] https://www.cbsnews.com/news/outage-map-att-where-cell-phone...