สร้างโมเดลตัวละคร 3D ด้วย Stable Diffusion (Tales of Syn)

Tales of Syn กำลังประยุกต์ใช้ generative AI อย่างกว้างขวางในกระบวนการพัฒนาเกม ตั้งแต่บทสนทนากับ NPC ภาพพื้นหลังของด่าน (แผนที่) ไปจนถึงการสร้างตัวละคร บทความนี้แนะนำเวิร์กโฟลว์ในการสร้างโมเดลตัวละคร 3D ด้วย Stable Diffusion

[ขั้นตอนการทำงาน]

1. แปลงสเก็ตช์ที่วาดด้วย Artstudio Pro บน iPad ผ่าน Automatic1111 WebUI

2. ตอนสร้างจะทำออกมาหลายชิ้นก่อน (สร้างครั้งละประมาณ 9 ชิ้นแล้วทำซ้ำ) จากนั้นนำผลลัพธ์มาซ้อนเป็นเลเยอร์ใน Photoshop แล้วเลือกเฉพาะส่วนที่ชอบมาผสมเข้าด้วยกัน

3. นำสเก็ตช์เริ่มต้นจากข้อ 1 ไปสร้างเป็นโมเดลใน ZBrush โดยใช้ DynaMesh

4. นำภาพตัวละครสุดท้ายจากข้อ 2 เข้ามาด้วย Spotlight แล้วใช้เครื่องมือแปรงที่ตั้งค่า RGB และ Zadd เป็น off เพื่อทำ polypainting ลงบนเมชที่เก็บข้อมูลภาพไว้ใน vertex color

5. สร้าง UV ด้วย UVMaster แล้วสร้าง Normal Map ใน Substance Painter ก่อน export สำหรับ Unity URP

[สิ่งที่จะปรับปรุงในอนาคต]

• สร้างเบสเมชแบบแยกรายละเอียดเพื่อให้นำกลับไปใช้กับตัวละครอื่นที่คล้ายกันได้

• รัน texture projection pass รอบที่สองใน Substance Designer เพื่อให้ได้เท็กซ์เจอร์คุณภาพสูงขึ้น

• สร้างแอนิเมชันแบบคัสตอมที่เหมาะกับตัวละครนี้

• สำรวจกระบวนการ AI อื่น ๆ เพื่อทำให้เวิร์กโฟลว์เป็นอัตโนมัติหรือปรับปรุงให้ดีขึ้น