DALL·E 3
(openai.com)- DALL·E 3 ของ OpenAI เป็นโมเดลสร้างภาพจากข้อความสำหรับผู้ใช้ ChatGPT และนักพัฒนา API โดยมีเป้าหมายเพื่อสร้างภาพที่สะท้อนข้อความที่ป้อนเข้าไปได้ตรงยิ่งขึ้น
- ระบบเดิมมักพลาดคำหรือคำอธิบาย ทำให้ผู้ใช้ต้องพึ่งพา prompt engineering แต่ DALL·E 3 ถูกออกแบบมาให้ให้ผลลัพธ์ที่ดีขึ้นกว่า DALL·E 2 แม้ใช้พรอมป์เดียวกัน
- ด้วยการ ผสานรวมกับ ChatGPT ผู้ใช้เพียงป้อนประโยคสั้น ๆ หรือย่อหน้าละเอียด ๆ แล้ว ChatGPT จะสร้างพรอมป์แบบละเอียดสำหรับ DALL·E 3 ให้อัตโนมัติ
- หากชอบภาพที่ได้แต่รายละเอียดยังไม่ตรง ก็สามารถ ขอแก้ไข ได้ด้วยคำไม่กี่คำ และภาพที่สร้างขึ้นไม่ต้องขออนุญาตเพิ่มเติมเพื่อนำไปพิมพ์ซ้ำ ขาย หรือทำเป็นสินค้า
- มีกลไกความปลอดภัยที่ปฏิเสธคำขอชื่อบุคคลสาธารณะที่มีตัวตนจริงและคำขอสไตล์ของศิลปินที่ยังมีชีวิตอยู่ และผู้สร้างสรรค์สามารถ opt out ไม่ให้นำภาพของตนไปใช้ฝึกโมเดลสร้างภาพในอนาคตได้
การสร้างภาพที่ทำตามข้อความได้แม่นยำยิ่งขึ้น
- DALL·E 3 เปิดให้ใช้งานสำหรับ ผู้ใช้ ChatGPT และนักพัฒนาที่ใช้งานผ่าน API
- ระบบแปลงข้อความเป็นภาพมักมีแนวโน้มจะมองข้ามคำหรือคำอธิบาย ทำให้หลายครั้งผู้ใช้ต้องเรียนรู้ prompt engineering เพื่อให้ได้ผลลัพธ์ที่ต้องการ
- DALL·E 3 มีเป้าหมายเพื่อสร้างภาพที่ทำตามข้อความที่ผู้ใช้ให้มาได้แม่นยำยิ่งขึ้น
- ถูกออกแบบมาให้มีการปรับปรุงที่เห็นได้ชัดเมื่อเทียบกับ DALL·E 2 แม้ใช้พรอมป์เดียวกัน
เชื่อมต่อการสร้างและแก้ไขพรอมป์ด้วย ChatGPT
- DALL·E 3 ถูก ผสานรวมเข้ากับ ChatGPT แบบเนทีฟ ทำให้สามารถคิดไอเดียและปรับแต่งพรอมป์ได้ภายใน ChatGPT
- ผู้ใช้สามารถขอฉากที่อยากเห็นด้วยภาษาธรรมชาติได้ตั้งแต่ประโยคสั้น ๆ ไปจนถึงย่อหน้าที่ละเอียด
- ChatGPT จะสร้างพรอมป์แบบละเอียดที่ปรับให้เหมาะกับ DALL·E 3 โดยอัตโนมัติตามไอเดียของผู้ใช้
- หากชอบภาพบางภาพแต่ยังไม่ตรงกับที่ต้องการทั้งหมด ก็สามารถขอแก้ไขได้ด้วยคำเพียงไม่กี่คำ
สิทธิ์การใช้งานภาพที่สร้างขึ้น
- ผู้ใช้สามารถนำภาพที่สร้างด้วย DALL·E 3 ไปใช้งานได้
- เช่นเดียวกับ DALL·E 2 การ พิมพ์ซ้ำ ขาย หรือทำภาพที่สร้างขึ้นให้เป็นสินค้า ไม่จำเป็นต้องได้รับอนุญาตเพิ่มเติมจาก OpenAI
กลไกความปลอดภัยเพื่อลดการสร้างบุคคลสาธารณะและอคติที่เป็นอันตราย
- DALL·E 3 มีกลไกบรรเทาความเสี่ยงที่ปฏิเสธการสร้างภาพเมื่อมีการขอ ชื่อบุคคลสาธารณะ โดยตรง
- OpenAI ทำงานร่วมกับทีม red team เพื่อปรับปรุงประสิทธิภาพด้านความปลอดภัยในพื้นที่เสี่ยง เช่น การสร้างบุคคลสาธารณะ และอคติที่เป็นอันตรายซึ่งเกี่ยวข้องกับการแสดงภาพเกินจริงหรือด้อยกว่าความเป็นจริง
- ทีม red team คือผู้เชี่ยวชาญเฉพาะด้านที่ทำการ stress test โมเดล
- งานนี้ถูกนำไปใช้กับการประเมินความเสี่ยงและความพยายามในการบรรเทาปัญหาในด้านต่าง ๆ เช่น โฆษณาชวนเชื่อและข้อมูลเท็จ
- OpenAI กำลังวิจัยวิธีที่ดียิ่งขึ้นในการระบุว่าภาพใดถูกสร้างโดย AI
- กำลังทดลองใช้เครื่องมือภายในชื่อ provenance classifier ซึ่งอาจช่วยระบุได้ว่าภาพนั้นถูกสร้างด้วย DALL·E 3 หรือไม่
- OpenAI วางแผนจะใช้เครื่องมือนี้เพื่อทำความเข้าใจให้ดีขึ้นว่าภาพที่สร้างขึ้นอาจถูกนำไปใช้อย่างไร และจะแชร์ข้อมูลเพิ่มเติมต่อไป
การควบคุมของผู้สร้างสรรค์และเอกสารอ้างอิง
- DALL·E 3 ถูกออกแบบมาให้ปฏิเสธคำขอสร้างภาพใน สไตล์ของศิลปินที่ยังมีชีวิตอยู่
- ผู้สร้างสรรค์สามารถ opt out เพื่อไม่ให้นำภาพของตนไปใช้ในการฝึกโมเดลสร้างภาพในอนาคตได้
- มีเอกสารที่เกี่ยวข้องคือ งานวิจัย และ แบบฟอร์ม opt out สำหรับภาพ
1 ความคิดเห็น
ความคิดเห็นบน Hacker News
ถ้ายังไม่ได้เปิดตัวจริง ก็เข้าข่าย การประกาศว่าจะมีประกาศ (https://hn.algolia.com/?dateRange=all&page=0&prefix=true&sor...)
ถ้ามีสิ่งที่ให้ถกกันจริง ๆ ค่อยเปิดเธรดตอนนั้นก็ได้ และการรอก็ไม่เสียหายอะไร (https://hn.algolia.com/?dateRange=all&page=0&prefix=false&so...)
สำหรับผู้ที่สนใจ: ปีที่แล้วผมสร้างภาพด้วย DALL·E 2 ประมาณ 7,000 ภาพ แล้วอัปโหลดไว้ที่ https://generrated.com/
อยากทดลองว่า DALL·E 2 สร้างอะไรได้บ้าง และอยากแชร์ให้คนอื่นใช้เป็นแรงบันดาลใจหรือจุดตั้งต้น
ตอนนั้นยังไม่มี API เลยต้องสร้างและบันทึกทั้งหมดด้วยมือ ค่าใช้จ่ายก็ไม่น้อย แต่ก็สนุกดี
ถ้าได้สิทธิ์เข้าถึง DALL·E 3 ก็คงต้องอัปเดตทั้งหมด
แก้ไข: จริง ๆ แล้วดูเหมือนจะห้ามใช้ในพรอมป์เฉพาะศิลปินที่ยังมีชีวิตอยู่ และอย่างน้อยในบทความก็เขียนไว้แบบนั้น
เห็นแพตเทิร์นที่พอจะตั้งสมมติฐานอย่างมีเหตุผลได้มากมาย แต่ด้วยความอยากรู้ เลยอยากรู้ว่าสาเหตุจริง ๆ คืออะไร
พอดูภาพต่าง ๆ แล้ว สิ่งที่น่าสนใจเป็นพิเศษคือมันไม่เคยทายข้อความได้ถูกเป๊ะเลย และมักคลาดไปนิด ๆ เสมอ บางครั้งก็ผิดไปมาก แต่โดยทั่วไปค่อนข้างใกล้เคียง
ผมทำ บอต Discord สำหรับ Midjourney ไว้ ซึ่งด้วยการตั้งค่าง่าย ๆ สามารถดาวน์โหลดภาพและใส่คำอธิบายประกอบพร้อมข้อมูลที่ดึงมาได้มากที่สุด เช่น เวอร์ชัน เป็นต้น: https://github.com/ernop/social-ai/tree/main/SocialAI
ถึงอย่างนั้นก็ยังไม่สมบูรณ์แบบ เพราะมันดึงข้อมูลจากคำสั่งที่ส่งไป ซึ่งตอนนั้นอาจอาศัยค่าเริ่มต้นอยู่ ดังนั้นถ้าตีความตอนนี้ ก็ยากที่จะสร้างขึ้นใหม่ได้ เว้นแต่ในพรอมป์จะใส่เวอร์ชันในอดีต ซีด ฯลฯ ไว้
แต่ก็ยังดีที่อย่างน้อยสามารถเก็บโฟลเดอร์ภาพ 30,000 ภาพที่มีพรอมป์แนบไว้ถาวร แล้วภายหลังรันซ้ำเพื่อเปรียบเทียบตามเวลาได้
สิ่งที่นึกได้: การผสานกับ ChatGPT ใหญ่มาก ถ้าการผสานกับ ChatGPT Plus และเวอร์ชันองค์กรจะมาในเดือนตุลาคม ก็อาจกดดัน Midjourney และบริษัท SaaS text-to-image หลายแห่งอย่างหนัก และอาจทำให้พวกเขาหันไปโฟกัสการใช้งาน NSFW
คุณภาพดูใกล้เคียงกับ Midjourney แต่ Midjourney ก็มีฟีเจอร์ที่มีประโยชน์อย่างการอัปสเกลหรือการสร้างหลายรูปแบบด้วย สงสัยว่า DALL·E 3 จะตามทันในแง่ประสบการณ์ผู้ใช้ได้ไหม
ในแง่ UI ผมชอบ ChatGPT มากกว่า Discord มาก ดังนั้นทางนี้ดีกว่า
ตอนนี้ Midjourney หรือ Stable Diffusion บางทีก็ได้ภาพสุดยอด บางทีก็ไม่ได้ ให้ความรู้สึกเหมือนคาสิโน Stable Diffusion สามารถใส่มาสก์แล้วลองใหม่ได้ แต่ยุ่งยากและใช้เวลามาก
ถ้าพูดว่า “ภาพนี้ดีแล้ว แต่อยากให้มีลิงแค่ตัวเดียว และเปลี่ยนท้องฟ้าเป็นสีเขียวให้หน่อย” แล้วมันรับภาพต้นฉบับไปแก้ให้ได้ นั่นจะเปลี่ยนเกมโดยสิ้นเชิง
จริง ๆ แล้วมีโอกาสสูงที่มันอาจไม่ได้ทำงานแบบนี้ แต่ก็หวังว่าจะเป็นแบบนั้น
ถึงอย่างนั้น การได้ดูว่าใครหรืออะไรจะชนะในการแข่งขันนี้ก็น่าจะน่าสนใจมาก
Bing Chat ใช้ GPT-4 ภายในอยู่แล้ว และ Bing Image Creator ก็ผสานอยู่ด้วย อีกทั้งภายในดูเหมือนจะใช้ DALL·E ประมาณ 2.5 แต่ไม่ดี
มันก็แค่ช่วยเขียนพรอมป์ภาพแทนเรา เป็นเหมือนเกมโทรศัพท์ที่ไร้ประโยชน์ที่ต้องส่งต่ออีกทอด ทั้งที่เขียนเองก็ได้
อาจเป็นไปได้ด้วยซ้ำว่าจะมีโมเดลภาษาขนาดใหญ่ที่ฝึกด้วย Literotica
ไม่ได้รู้สึกว่าต่างกันมาก โดยเฉพาะอย่างยิ่ง Midjourney ดีกว่า DALL·E มาก
มีเขียนไว้ว่า “DALL·E 3 ถูกออกแบบมาให้ปฏิเสธเมื่อมีการขอภาพในสไตล์ของศิลปินที่ยังมีชีวิตอยู่” และ “ตอนนี้ครีเอเตอร์สามารถยกเว้นภาพของตนเองออกจากการฝึกโมเดลสร้างภาพในอนาคตได้”
ถ้าอย่างนั้นเวอร์ชันนี้ก็เอาผลงานที่มีลิขสิทธิ์ไป ฝึกโดยไม่ได้รับอนุญาต เช่นกัน
แถมยังผลักภาระให้ศิลปินต้องมายื่นคำขอยกเว้นเองแบบแมนนวลอีก
ไม่กลัวหรือว่าสักวันศาลจะบังคับให้จ่ายเงินให้ศิลปินแต่ละคนต่อภาพที่สร้างขึ้นทุกภาพ
กล่าวคือศาลจะต้องบังคับบริษัทขนาดใหญ่มากและทรงอำนาจหลายพันแห่งให้จ่ายเงินแก่คนนับล้าน ซึ่งในทางปฏิบัติจะกลายเป็นความพยายามทางกฎหมายที่รับมือได้ยากมาก
พวกเขาไม่ได้เปิดเผยแหล่งที่มาหรือวิธีวิจัย และนอกจากคำว่า “ฝึก” กับ “ลิขสิทธิ์” แล้ว ที่เหลือยังเป็นคำถามอยู่ ถ้าไม่เช่นนั้นก็น่าจะจ่ายค่าลิขสิทธิ์อยู่แล้ว
อาจใช้ผลลัพธ์จากเวอร์ชัน 2 ก่อนหน้า ร่วมกับพรอมป์ต์ที่ GPT สร้าง แล้วให้คนปรับแก้ให้เข้ากับภาพที่สร้างขึ้นก็ได้
หรืออาจใช้คอมพิวเตอร์วิทัศน์วิเคราะห์ภาพใหม่กับภาพเดิม แล้วถ้าพบคุณลักษณะใหม่ในภาพก็เพิ่มเข้าไปในพรอมป์ต์และฝึกซ้ำก็ได้
ดูสภาพศาลแล้วก็ไม่คาดหวังว่าจะถูกย้อนกลับ
มีความเป็นไปได้สูงว่าพวกเขาทำดีลลับ ๆ กับผู้ถือทรัพย์สินทางปัญญารายใหญ่อย่าง Disney เพื่อไม่ไปแหย่หมี แต่ปล่อยให้รายเล็ก ๆ ป้องกันตัวเองไม่ได้ หรือพูดให้ตรงคือพวกเขายากจนอยู่แล้วและยิ่งไม่มีเงินเข้าไปอีก
ดูเหมือนจะเป็นภัยคุกคามจริงต่อ Midjourney ได้ แต่คงไม่สามารถผลัก Stable Diffusion ออกไปได้
การทำตามพรอมป์ต์น่าจะยอดเยี่ยม แต่การปรับแต่งได้น้อยกับข้อจำกัดด้านสไตล์ศิลปะจะลดประโยชน์การใช้งานลงมาก
ผู้คนน่าจะใช้ DALL·E 3 สร้างภาพพื้นฐานสำหรับองค์ประกอบภาพ แล้วเอาเรื่องสไตล์ การอัปสเกล และรายละเอียดไปทำต่อใน Stable Diffusion
ภาพคุณภาพสูงมากจนแยกยากว่าเป็นภาพสร้างนั้น ผมเห็นจาก Midjourney มากกว่า Stable Diffusion เยอะมาก
การกรองของ Midjourney ก็น่ารำคาญพอแล้ว และการที่ ChatGPT ปฏิเสธคำของ่าย ๆ แบบไร้ความหมายเพียงเพราะอาจถูกตีความผิดได้ก็น่ารำคาญไม่รู้จบ
ถ้าเอาสองอย่างนั้นมารวมกัน แล้วเพิ่มการกรองสไตล์ศิลปินอย่างชัดเจนเข้าไปอีก ผมคงข้ามไปเลย
ขอเสริมว่าไม่ได้กำลังใช้ Midjourney ทำ NSFW นะ ผมหมายถึงสถานการณ์ที่อยากได้ “ภาพสต็อกของคนกำลังตัดชีสบนเคาน์เตอร์” แต่ใช้คำอย่าง “cutting” หรือ “slicing” ไม่ได้ เพราะคำเหล่านี้อาจถูกใช้สร้างภาพเลือดสยองได้
ที่บอกว่า “ตอนนี้ครีเอเตอร์สามารถยกเว้นภาพของตนเองออกจากการฝึกโมเดลสร้างภาพในอนาคตได้” แต่ลิงก์ดันเป็น ฟอร์มส่งทีละภาพ นี่ตลกดี
แม้จะบอกว่าสามารถบล็อก GPTBot จากเว็บไซต์ได้ แต่ถ้าบอตเก็บภาพไปแล้วจะเป็นอย่างไรก็ยังเป็นปัญหา
ยังไงคนอื่นก็อาจเอารูปของผมไปลงเว็บไซต์อื่นที่ไม่ได้บล็อก GPTBot ได้อยู่ดี
ช่วงหลังผมทำ ภาพ Midjourney เยอะเพราะโปรเจกต์หนึ่ง และได้ตระหนักอีกครั้งในสิ่งที่พวกนักทำนายวันสิ้นโลกของศิลปะ AI ดูเหมือนจะไม่เข้าใจ: ความสำคัญของการคัดสรร
แค่ไล่ดู /r/Midjourney หรือภาพแนะนำในลิงก์ DALL·E ข้างบน ก็เห็นแล้วว่า “ผลลัพธ์พื้นฐาน” ของตัวสร้างภาพนั้นน่าเบื่อแค่ไหน
การสร้างภาพอาจง่ายขึ้น แต่การเลือกว่าภาพไหนน่าสนใจยังต้องใช้เซนส์และทักษะทางศิลปะอยู่
ในภาพใหญ่ ผมคิดว่างานศิลปะแนวภาพประกอบจะใกล้เคียงกับกิจกรรมคัดสรรมากขึ้น และความสามารถในการกรองจากภาพจำนวนมหาศาลจะกลายเป็นทักษะหลัก
ถ้าสามารถสร้างภาพอ้างอิงเพื่อใส่เป็นอินพุตได้ ผลลัพธ์ก็น่าจะดีขึ้น ยิ่งอินพุตดี เอาต์พุตก็ยิ่งดี
ในเชิงพาณิชย์ รู้สึกเหมือนศิลปินที่ใช้ AI ได้ดีจะเป็นฝ่ายนำหน้า
ถึงอย่างนั้นศิลปินที่มีรสนิยมและพรสวรรค์ทางเทคนิคก็ยังมีพื้นที่ในการปรับแต่งภาพให้เข้าใกล้อุดมคติที่คัดสรรไว้มากขึ้น
เหมือนเวิร์กโฟลว์ Photoshop ที่ใช้ Stable Diffusion ในตอนนี้ ซึ่งผลลัพธ์ที่สร้างขึ้นเป็นฐาน และเมื่อเวิร์กโฟลว์เติบโตเต็มที่ อินพุตแบบแมนนวลก็น่าจะกลับมาเพิ่มขึ้นอีก
เช่น ใช้ ControlNet กำหนดท่าทางหรือการจัดวางเฉพาะเพื่อล็อกองค์ประกอบภาพไว้ ให้ AI เติม 90% แล้วมนุษย์ใช้รสนิยมเก็บรายละเอียด 10% สุดท้ายและวนซ้ำ
จากข้อที่ว่า “DALL·E 3 ถูกสร้างขึ้นบน ChatGPT แบบเนทีฟ” การผสานกันอย่างแนบแน่นระหว่าง ChatGPT กับการสร้างภาพ และการที่ไม่มี论文วิจัยออกมาพร้อมประกาศ ผมสงสัยอย่างแรงว่านี่เป็นการทดลองเดินเครื่อง ความสามารถมัลติโมดัลของ GPT-4 และมีโอกาสสูงว่าจะทำงานบนโครงสร้างพื้นฐานคล้ายกัน
ดังนั้นก็น่าจะใช้การเรียก API เฉย ๆ ไม่มีอะไรพิเศษ และ Bing ก็ทำแบบเดียวกัน
อ้างอิง: https://arxiv.org/pdf/2303.12712.pdf
พวกเขาเอาข้อมูล “ฝึก” ที่มีลิขสิทธิ์ออกไปแล้วหรือเปล่า หรือว่ายังคง “เรียนรู้” จากหยาดเหงื่อแรงงานของผู้คนโดยไม่ได้รับความยินยอม แล้วนำไปขายโดยไม่ได้รับอนุญาตอยู่
แปลว่ายังคงอาศัยผลงานของผู้คนอยู่ แต่ข้อดีคืออย่างน้อยก็สามารถ ยื่นขอไม่เข้าร่วม เพื่อไม่ให้งานของตัวเองกลายเป็นอาหารของ DALL·E 4 ได้
ประเด็นสำคัญอยู่ที่ว่าจะสามารถอ้างได้สำเร็จหรือไม่ว่า AI เรียนรู้เหมือนมนุษย์ ดังนั้นผลลัพธ์ที่ไม่ใช่การคัดลอกผลงานเดิมโดยตรงจึงเป็นงานสร้างสรรค์ใหม่
แม้ AI จะลอกเลียนสไตล์ศิลปะของศิลปินคนหนึ่ง ก็น่าจะใช้เหตุผลคล้ายกันได้ คล้ายกับมนุษย์ที่ใช้เวลาช่วงสุดสัปดาห์ดูผลงานของศิลปินคนหนึ่ง แล้ววาดงานรับจ้างในสไตล์เดียวกัน และเพราะสไตล์ทางศิลปะไม่สามารถคุ้มครองด้วยลิขสิทธิ์ได้ จึงถูกกฎหมายโดยสมบูรณ์
แน่นอนว่า Adobe คงอยากให้เป็นแบบนั้น[0]
0: https://twitter.com/UltraTerm/status/1679294173793628161
อีกเรื่องหนึ่งที่ผมนึกถึงอยู่เรื่อย ๆ คือ ผลงานที่ AI สร้างเหล่านี้อาจทำให้เกิดการล่มสลายแบบอุตสาหกรรมเกมได้หรือไม่
หากคอนเทนต์ AI ที่ถูกโปรโมตเยอะแต่ไร้ความหมายและมีมูลค่าต่ำล้นตลาด ผู้บริโภคอาจหมดความสนใจ หยุดใช้จ่ายในแต่ละอุตสาหกรรมอย่างหนังสือ เกม ภาพยนตร์ ดิจิทัลอาร์ต และดนตรี จนพังทลายลงได้
https://investor.shutterstock.com/news-releases/news-release...
เช่นเคย ถ้ามีความโปร่งใสเรื่องข้อมูลฝึกมากกว่านี้ก็คงดี
ไม่ควรทำแบบนั้น จากมุมมองแบบยึดลิขสิทธิ์สูงสุด นี่คือการละเมิดลิขสิทธิ์
การแข่งขันอีกครั้งเริ่มขึ้นแล้ว
บางคนดูเหมือนจะมีอคติต่อ OpenAI อย่างแรง แต่อย่างน้อย OpenAI ก็เก่งมากจริง ๆ ในการทำให้ตัวเองกลายเป็น จุดอ้างอิงที่ต้องก้าวข้าม ในบางสาขา
และดูเหมือนว่าการทำแบบนั้นจะผลักดันทั้งวงการให้ไปได้ไกลพอสมควร
คนแก่แบบผมยังจำสิ่งที่ Microsoft ทำในยุค 90 ได้ ถ้าตอนนี้พวกเขานำหน้าในบางสาขา ก็คงทำแบบเดิม และเบื้องหลังก็ยังทำแบบนั้นเป็นครั้งคราว
ผมไม่ได้ชอบ FB หรือ Zuckerberg แต่การปล่อย LLAMA ให้ใช้ฟรีถือเป็นก้าวที่ดี
หวังว่าจะมีการรั่วไหลจากภายใน OpenAI อีกครั้ง เพื่อให้ทุกคนเข้าถึงทุกอย่างได้