1 ความคิดเห็น

 
GN⁺ 2024-05-06
ความคิดเห็นบน Hacker News
  • งบประมาณของโครงการแมนฮัตตันและโครงการอพอลโล ถ้ามองเป็นมูลค่าในปัจจุบันแล้วกลับกลายเป็นเรื่องที่ค่อนข้าง "ไม่แพง" อย่างน่าประหลาด งบที่ใช้สำหรับการลงจอดบนดวงจันทร์ในทศวรรษ 1960 อยู่ในระดับใกล้เคียงกับการซื้อคืนหุ้นของ Apple เมื่อเร็ว ๆ นี้
  • โครงการแมนฮัตตันและโครงการอพอลโลต่างก็ใช้จ่ายประมาณ 0.4% ของ GDP ในเวลานั้น ซึ่งเทียบกับ GDP ปัจจุบัน 27 ล้านล้านดอลลาร์สหรัฐจะเท่ากับประมาณ 108 พันล้านดอลลาร์ เมต้ายังไม่เคยใช้จ่ายเงินเพื่อ GPU ถึงหนึ่งในสามของจำนวนนี้
  • ความซับซ้อนล้นโลกของ GPU, CPU และ SoC สมัยใหม่ไม่ได้ทำให้เราอึ้งอย่างนั้น เมื่อเปรียบเทียบกับกระบวนการผลิตชิป 3nm ที่มีทรานซิสเตอร์ถึง 3 พันล้านตัว โครงการแมนฮัตตันแม้จะเป็นสิ่งที่เปลี่ยนโลก แต่เมื่อมองด้านขนาดแล้วก็ไม่ถึงขนาดใหญ่
  • สงสัยว่าทำไม Meta ถึงลงทุนมากขนาดนี้แต่ก็ยังไม่ไล่ตาม OpenAI ได้ OpenAI ทำงานได้ยอดเยี่ยมได้ยังไงนะ
  • ยังคงทึ่งเสมอกับคุณภาพและฝีมือของผลงานที่สร้างก่อนทศวรรษ 1960 ไม่รู้ว่าเหตุใดหลังจากนั้นโลกสมัยใหม่จึงกลายเป็นอะไรที่ฟุ่มเฟือย ช้า แพง และไร้ความทะเยอทะยาน แต่ถ้ามีโอกาสกลับไปได้ คงอยากกลับ
  • อยากรู้ว่ามีการเปิดเผยข้อมูลว่าบริษัท Meta ใช้ GPU เหล่านี้กับการดำเนินงานภายในมากแค่ไหน และได้ผลลดต้นทุนอย่างไรหรือไม่ นอกเหนือจากแชตบอท "Meta AI" ที่ทำให้ผิดหวังแล้ว ยังมีพื้นที่ใช้งานมากมายที่ควรนำ H100 ไปใช้ เช่น เครื่องยนต์แนะนำเนื้อหา การป้องกันการใช้งานในทางผิด การเพิ่มประสิทธิภาพแบนด์วิดท์เครือข่าย และอื่น ๆ
  • ดูเหมือนว่าโครงการแมนฮัตตันคุ้มค่าต่อการใช้ทรัพยากรมากกว่า
  • ตัวนี้น่าจะมาจากอิทธิพลของระบบนิเวศแบบปิด (walled garden) และคุณค่าของทรัพย์สินทางปัญญา ถ้ากฎหมายเปลี่ยนไปและไม่สามารถปกป้อง IP/ข้อมูลได้ ปีหน้าคงมีผู้คนทำสำเนา Facebook แบบคัดลอก/ดัดแปลงกันมากขึ้น ทั้งแบบของ NVIDIA GPU ออกแบบเองก็อาจถูกนำไปดัดแปลงได้เหมือนกัน การแข่งขันจะแตะระดับที่ราคากับอัตรากำไรลงมาถึงใกล้ศูนย์
  • อยากรู้ว่ามีโอกาสที่ด้วยกฎของ มัวร์ (Moore's law) ในอีก 10 ปีข้างหน้า จะทำให้ได้การ์ด GPU มูลค่า 1 ล้านดอลลาร์ที่ให้ผลลัพธ์เท่ากับตอนนี้หรือไม่ คงเป็นเงินที่เอาไปซื้อผู้ผลิต GPU ได้ก็ได้
  • มันไม่ยิ่งใหญ่นักอย่างที่ได้ยินกัน เพราะ GDP จริง (ปรับตามเงินเฟ้อ) ของสหรัฐฯ สูงกว่าปี 1945 ราว 9 เท่า