KoGPT โมเดลภาษา AI ภาษาเกาหลีของ Kakao ถูกกล่าวหาว่าปั่นคะแนนเกินจริง

• มีการเปิดเผยประสิทธิภาพของ KoGPT ซึ่งเป็น GPT-3 เวอร์ชันที่ปรับแต่งเฉพาะภาษาเกาหลีที่ Kakao Brain พัฒนาขึ้น สูงกว่าคะแนนจริงเดิม

• เนื่องจากปัญหาในโค้ด จึงกรอกคะแนนที่ประเมินไว้โดยไม่ได้ทำการรีเซ็ตในขั้นตอนทดสอบลงไปตามเดิม

• ต่ำกว่าคะแนนที่ระบุในรายงานราว 5 คะแนน... กระทบต่อความเป็นธรรมของการประเมิน

[xguru]

• KoGPT - โอเพนซอร์สโมเดลภาษา AI ภาษาเกาหลี https://th.news.hada.io/topic?id=5407