PaLM - Pathways Language Model ของ Google AI ที่เปิดตัวพร้อมพารามิเตอร์ 540B
(ai.googleblog.com)- โมเดลที่มีพารามิเตอร์ 540B ซึ่งมีขนาดใหญ่กว่า GPT-3 (175B) ถึง 3 เท่า
- ใช้ TPU v4 ในการฝึกโมเดล
- เมื่อโมเดลมีขนาดใหญ่ขึ้น ก็สามารถจัดการงานที่หลากหลายได้มากขึ้น (เช่น โจทย์คณิตศาสตร์ การอธิบาย การสร้างโค้ด เป็นต้น)
บทความที่เกี่ยวข้อง
3 ความคิดเห็น
ดูเหมือนว่า Google กำลังพยายามผสานสิ่งนี้เข้ากับหุ่นยนต์ เพื่อให้ปัญญาประดิษฐ์สามารถเรียนรู้โลกกายภาพในความเป็นจริงได้ด้วย
https://say-can.github.io/
https://arxiv.org/abs/2204.01691
ดูเหมือนว่าแนวคิดที่ว่าโมเดล AI ยิ่งใหญ่ยิ่งดีจะยังคงดำเนินต่อไปครับ