AR Cut & Paste - แนวคิดใหม่ของการวางภาพวัตถุ

(twitter.com)

7 คะแนน โดย xguru 2020-05-05 | 1 ความคิดเห็น | แชร์ทาง WhatsApp

ต้นแบบที่ใช้ AR และ ML เพื่อนำภาพวัตถุที่ถ่ายจากโทรศัพท์ มาลบพื้นหลังออก แล้วแทรกเข้าไปในเอกสารบนหน้าจอคอมพิวเตอร์ที่กล้องกำลังมองเห็นได้ทันที

ซอร์สโค้ดทั้งหมดเปิดเผยบน GitHub

แอปมือถือ: React Native

เซิร์ฟเวอร์ภายในเครื่อง: อินเทอร์เฟซระหว่างแอปมือถือกับ Photoshop ใช้ OpenCV + Python

→ ใช้ Screenpoint เพื่อตรวจจับตำแหน่งของจอภาพที่กล้องสมาร์ตโฟนกำลังมองเห็น

→ ปัจจุบันการรู้จำวัตถุต้องรันเซิร์ฟเวอร์ BASNet แยกแล้วเชื่อมต่อกัน แต่ก็น่าจะสามารถใช้ DeepLab ของ TensorFlow Lite ภายในแอปได้เช่นกัน

1 ความคิดเห็น

xguru 2020-05-05

ประสิทธิภาพ AR และ ML ของสมาร์ทโฟนดีขึ้นเรื่อย ๆ แบบนี้ อินเทอร์เฟซลักษณะนี้ก็น่าจะมีมากขึ้นนะครับ