Surrey: AI to help turn dog pics into 3D models

การศึกษาวิจัยเผยว่า สามารถนำภาพถ่ายสุนัขมาใช้เพื่อสร้างโมเดล 3 มิติ ได้แม่นยำยิ่งขึ้น

Photographs of dogs could be used to help generate 3D models more accurately, a study has revealed.

Surrey: AI ที่ช่วยเปลี่ยนภาพสุนัขให้เป็นโมเดล 3 มิติ

การศึกษาวิจัยเผยว่า สามารถนำภาพถ่ายสุนัขมาใช้เพื่อสร้างโมเดล 3 มิติ ได้แม่นยำยิ่งขึ้น

นักวิจัยจากมหาวิทยาลัยเซอร์เรย์ สอนระบบปัญญาประดิษฐ์ (AI) เพื่อทำนายท่าทาง 3 มิติ จากภาพ 2 มิติของสุนัข

สุนัขเสมือนจริงจำนวนมากมายถูกสร้างขึ้นโดยใช้วิดีโอเกม Grand Theft Auto

Moira Shooter นักศึกษาวิจัยระดับบัณฑิตศึกษา กล่าวว่า “ตั้งแต่งานอนุรักษ์ระบบนิเวศไปจนถึงแอนิเมชั่น โซลูชันที่ประณีตนี้มีประโยชน์มากมาย ที่สามารถใช้งานได้”

วิธีหนึ่งในการสอน AI ให้รับข้อมูล 3 มิติ จากภาพ 2 มิติ คือการแสดงภาพถ่ายพร้อมทั้งให้ข้อมูล 3D ‘ground truth’ ซึ่งวัตถุอยู่ใน 3D space

สำหรับมนุษย์ นั่นหมายถึง ให้คนสวมชุดจับภาพเคลื่อนไหว

แต่เราไม่ได้ทำแบบนั้นกับสุนัข นักวิจัยได้แก้ไขโค้ดของ Grand Theft Auto V โดยเปลี่ยนตัวละครหลักให้เป็นสุนัขหนึ่งในแปดสายพันธุ์ ซึ่งเป็นกระบวนการที่เรียกว่า modding

พวกเขาสร้างวิดีโอ 118 รายการ เป็นวิดีโอเกี่ยวกับสุนัขที่กำลังนั่ง เดิน เห่า และวิ่งในสภาพอากาศและแสงที่แตกต่างกัน

ทีมงานเรียกฐานข้อมูลใหม่ว่า DigiDogs ซึ่งประกอบด้วย 27,900 เฟรม

ตอนนี้พวกเขาวางแผนที่จะปรับแต่งระบบโดยใช้โมเดล DINOv2 ของ Meta เพื่อให้แน่ใจว่าจะสามารถคาดเดาท่าทาง 3 มิติ จากรูปภาพสุนัขจริงได้เช่นกัน

“แบบจำลองของเราได้รับการฝึกฝนเกี่ยวกับสุนัข CGI แต่เราสามารถใช้มันเพื่อสร้างแบบจำลองโครงกระดูก 3 มิติ จากภาพถ่ายของสัตว์จริงได้” Ms Shooter กล่าว

“นั่นอาจทำให้นักอนุรักษ์มองเห็นสัตว์ป่าที่ได้รับบาดเจ็บ หรือช่วยให้ศิลปินสร้างสัตว์ที่สมจริงมากขึ้นใน metaverse

เธอกล่าวเสริมว่า “ท่าโพส 3 มิติ มีข้อมูลมากกว่าภาพถ่าย 2 มิติ”

view original *