DeepSpeed Chat - เฟรมเวิร์กสำหรับฝึกโมเดลแบบ ChatGPT โดยใช้ RLHF

 (github.com/microsoft)
12 คะแนน โดย xguru 2023-04-17 | 1 ความคิดเห็น | แชร์ทาง WhatsApp
  • เฟรมเวิร์กระบบแบบเปิดที่รวดเร็ว ราคาประหยัด และขยายขนาดได้
  • สามารถสร้างโมเดลสไตล์ ChatGPT คุณภาพสูงได้ทุกขนาดผ่าน End-to-End RLHF (Reinforcement Learning Human Feedback)
  • ด้วย 1 คลิก สามารถฝึก สร้าง และให้บริการโมเดล ChatGPT ขนาด 1.3B พารามิเตอร์ได้ภายใน 1.36 ชั่วโมง โดยใช้ NVIDIA A6000 GPU เพียงตัวเดียวที่มีหน่วยความจำ 48GB
  • Databricks Dolly, CarperAI-TRLX, Huggingface-PEFT กำลังใช้งานอยู่

บทความที่เกี่ยวข้อง