ภาพลวงของคำอ้าง AI Coding: ทำไมการระบาดของ 'Shovelware' จึงไม่เกิดขึ้น

• เมื่อตรวจสอบคำอ้างเรื่องการเพิ่มผลิตภาพของ เครื่องมือเขียนโค้ดด้วย AI ด้วยข้อมูลล่าสุด พบว่าในความเป็นจริง ความเร็วหรือผลงานไม่ได้เพิ่มขึ้นอย่างเห็นได้ชัด
• ผลวิจัยของ METR ระบุว่า แม้นักพัฒนาจะเชื่อว่าเครื่องมือเขียนโค้ดด้วย AI ช่วยเพิ่ม ผลิตภาพ ได้ 20% แต่ ในความเป็นจริงกลับลดลง 19%
• คำโฆษณาจำนวนมาก รวมถึงคำอ้างเรื่อง ผลิตภาพเพิ่ม 10 เท่า จากบริษัทและนักพัฒนาบางส่วน ไม่ได้สะท้อนอยู่ในสภาพตลาดจริงหรือการเปิดตัวซอฟต์แวร์ใหม่
• ไม่พบปรากฏการณ์อย่างการพุ่งขึ้นของ Shovelware (แอปผลิตจำนวนมาก, ซอฟต์แวร์คุณภาพต่ำ) จึงยังไม่เห็นความเปลี่ยนแปลงที่ชัดเจน
• การ พูดเกินจริงเรื่องผลิตภาพ จากบริษัทอย่าง GitHub, Copilot, Cursor, Google, OpenAI และนักพัฒนาบางส่วน กำลังถูกนำไปใช้ในทางที่ผิดกับ การลงทุน การปรับโครงสร้างองค์กร และการกำหนดเงินเดือน
• ข้อสรุปสำคัญ: “ตราบใดที่ยังไม่มีซอฟต์แวร์ออกมามากขึ้นจริง คำอ้างว่า AI coding ทำให้นักพัฒนาเก่งขึ้น 10 เท่าก็เป็นเรื่องแต่ง” ดังนั้นนักพัฒนาไม่ควรหวั่นไหวต่อแรงกดดัน และควรตอบโต้ด้วยข้อมูล

---

บทนำ: นักพัฒนาซอฟต์แวร์กำลังไม่พอใจกับ AI coding

• ใช้ชีวิตมาอย่างยาวนานในฐานะ นักพัฒนาซอฟต์แวร์ และมีทั้งความภาคภูมิใจและตัวตนผูกกับการเขียนโปรแกรม
• ในช่วงแรกของการนำ เครื่องมือเขียนโค้ดที่ขับเคลื่อนด้วย AI มาใช้ ผู้เขียนมีความคาดหวัง แต่ผลวิจัยล่าสุด (METR) ทำให้เริ่มรู้สึกเคลือบแคลง
  • ผู้เขียนคิดว่า AI coding ทำให้ตนเอง เร็วขึ้นราว 25% แต่ผลวิจัยของ METR กลับพบว่า ช้าลง 19%
• งานวิจัยดังกล่าวยืนยันว่า การรับรู้ของนักพัฒนาต่อประสิทธิภาพของเครื่องมือ AI กับข้อมูลที่วัดจริงนั้นสวนทางกันโดยสิ้นเชิง
• แม้จากการทดลองด้วยตนเอง ก็สัมผัสได้ว่า การใช้ AI ไม่ได้ส่งผลบวกต่อเวลาในการเขียนโปรแกรมจริง

ตรวจสอบด้วยตัวเอง: การทดลองเปรียบเทียบแบบสุ่มกับ AI

• ใช้วิธีทดลองวัด ส่วนต่างของเวลา (Delta) ระหว่างกรณีที่ใช้ AI และไม่ใช้ AI ในแต่ละหน่วยงาน
• ข้อมูลที่ได้จากการทดลอง 6 สัปดาห์ ไม่พบความแตกต่างที่มีนัยสำคัญทางสถิติ
• แม้จะเป็นตัวอย่างขนาดเล็ก แต่ก็พบแนวโน้มว่า การใช้ AI กลับทำให้ ช้าลง 21% (ตัวเลขเดียวกับงานวิจัย METR)
• หากมีผลเพิ่มประสิทธิภาพจริงระดับ 2 เท่าหรือ 10 เท่า ก็ควรปรากฏชัดเจนในข้อมูล
• ความฝันเรื่อง AI coding ในปัจจุบันยังไม่เป็นจริง และในทางปฏิบัติยังไม่มีอะไรเปลี่ยนแปลง

ความคาดหวังกับความจริง: ทำไมจึงไม่มีการระบาดของ Shovelware

• หากการปฏิวัติผลิตภาพจาก AI coding เป็นเรื่องจริง ก็ควรเห็นการเพิ่มขึ้นมหาศาลของ แอป บริการ และเกม ทุกประเภท
• มีข้อความการตลาดของเครื่องมือ AI coding จำนวนมากหลั่งไหลออกมา เช่น “Built to make you extraordinarily productive”
• Google, OpenAI, GitHub Copilot และรายอื่น ๆ ต่างก็อ้างว่า นักพัฒนา เร็วขึ้น 25% หรือมี ผลิตภาพเพิ่ม 10 เท่า
• แต่ในข้อมูลการเปิดตัวซอฟต์แวร์ใหม่จริง (GH Archive, BigQuery ฯลฯ) กลับ ไม่พบการเติบโตแบบพุ่งชันหรือการระเบิดของปริมาณ
• แม้ AI coding จะถูกใช้อย่างแพร่หลายตั้งแต่ปี 2022 เป็นต้นมา แต่จำนวนรีลีสและโปรเจกต์ใหม่ทั่วโลกก็ไม่ได้เปลี่ยนไปมากนัก

ผลกระทบต่อตลาดและความจริงของนักพัฒนา

• เกิด แรงกระเพื่อมทางสังคม ในอุตสาหกรรม เช่น กลยุทธ์ AI-First, FOMO, การปลดคนจำนวนมาก และการลดเงินเดือนนักพัฒนา
• แต่ในหน้างานพัฒนาจริง เครื่องมือ AI ยังไม่สามารถสร้างการปฏิวัติด้านผลิตภาพได้
• แม้จะอ้างถึงเส้นโค้งการเรียนรู้หรือความชำนาญกับเครื่องมือ ก็ยังอธิบายความต่างด้านผลิตภาพแบบเด็ดขาดไม่ได้

บทสรุป: ความจำเป็นของการตัดสินใจบนฐานข้อมูลอย่างเยือกเย็น

• ประเด็นสำคัญคือ จนถึงตอนนี้ ข้อมูลยังยืนยันว่า ปริมาณการส่งมอบซอฟต์แวร์ใหม่ ไม่ได้เปลี่ยนแปลง
• ยังไม่มีหลักฐานรองรับคำอ้างว่า AI ทำให้กลายเป็น coder 10x
• นักพัฒนา ไม่ควรยอมจำนนต่อแรงกดดัน และควรเลือกใช้เครื่องมือโดยอิงจากข้อมูลที่ตรวจสอบด้วยตนเอง

โต้แย้งคำคัดค้านที่พบบ่อย

1. "ถ้าเชี่ยวชาญ prompt engineering จริง ก็จะเป็นนักพัฒนา 10x ได้"

   • หากมีคนที่ทำ ผลิตภาพเพิ่ม 10 เท่า ได้จริง ปริมาณซอฟต์แวร์ใหม่ทั่วโลกก็น่าจะเพิ่มเกินสองเท่าไปแล้ว
   • สิ่งสำคัญกว่าคำอ้างคือ ผลลัพธ์เชิงวัตถุวิสัย (แอป โปรเจกต์ ฯลฯ)

2. "มันยังอยู่ในช่วงเริ่มต้น ต้องใช้เวลา"

   • มีการลงทุนไปแล้วหลายหมื่นล้านดอลลาร์ และถูกนำไปใช้จริงในงานอาชีพแล้ว
   • การตัดสินใจในวันนี้ ส่งผลโดยตรงต่อชีวิตของผู้คนจริง

3. "ถ้าไม่ใช้ตอนนี้จะตามไม่ทัน"

   • แม้แต่ข้อมูลของ Github Copilot ก็ชี้ว่า การเพิ่มผลิตภาพจริงตามระดับความชำนาญ นั้นน้อยมาก (อัตราการยอมรับ 29% → 34%)

4. "คุณภาพดีขึ้นเฉย ๆ ปริมาณเลยเท่าเดิม"

   • โดยรวมแล้วคุณภาพของอุตสาหกรรมกลับ ถดถอยลง และการทดสอบก็ลดลง
   • ถ้ามันเป็นเครื่องมือสร้าง coder 10x จริง ก็ควรเห็น Shovelware ล้นตลาดแล้ว

5. "ทุกอย่างตอนนี้เน้นเว็บ และเดี๋ยวนี้ก็ไม่มีใครสนใจโดเมนเนมแล้ว มีแต่ซับโดเมนของ Vercel อะไรพวกนั้น"

   • ยังมีผู้ใช้จำนวนมากที่ชอบ โดเมนเฉพาะของตัวเอง อยู่

6. "โดเมน .ai พุ่งแรง (47% ปีนี้) = การเติบโตจริง"

   • การเพิ่มขึ้นของโดเมนใหม่เป็นเพียงผลจากการ pivot ของสตาร์ตอัป AI เท่านั้น ไม่ใช่การพุ่งขึ้นของ จำนวนโดเมนใหม่โดยรวม
   • จำนวนโดเมนทั้งหมดไม่ได้เป็นเช่นนั้น

7. "แก่นแท้ของงานพัฒนาไม่ใช่โค้ด แต่เป็นงานอื่นนอกเหนือจากโค้ด"

   • ในสภาพแวดล้อมของ นักพัฒนาเดี่ยวหรือทีมขนาดเล็ก ที่ไม่ใช่องค์กรใหญ่ โค้ดยังคงเป็นศูนย์กลางจริง
   • โปรเจกต์ใหม่ที่ช่วยตอบสนองความอยากเขียนโค้ดเล็ก ๆ น้อย ๆ ก็ยังไม่ได้เพิ่มขึ้นจนสังเกตได้ชัด

ปิดท้าย

• นักพัฒนายังไม่ได้ปล่อยซอฟต์แวร์ออกมามากขึ้นจริง
• คำอ้างว่า AI coding ให้ผลิตภาพเพิ่ม 10 เท่า สามารถโต้แย้งได้ด้วยข้อมูล
• อย่าปล่อยให้ FOMO และ narrative ทางการตลาดของอุตสาหกรรมชักจูง ควร ประเมินจากผลลัพธ์จริงเป็นหลัก
• ข้อความจากผู้เขียน: “ถ้าคุณกำลังรู้สึกถึงแรงกดดัน ก็จงเอาข้อมูลและกราฟออกมาให้ดู และเรียกขอหลักฐานจากคำอ้างเรื่องผลิตภาพ 10 เท่า”