NVIDIA กับระบบ AI ใหม่ รังสรรค์วัตถุและตัวละครสำหรับโลกเสมือนจริง

NVIDIA กับระบบ AI ใหม่ รังสรรค์วัตถุและตัวละครสำหรับโลกเสมือนจริง

ขอบคุณภาพจาก NV.github

NVIDIA เผยแพร่ปัญญาประดิษฐ์ AI GET3D (Generate Explicit Textured 3D meshes) ที่สามารถสร้างโมเดล 3 มิติสำหรับใช้งานในเกมหรืองานกราฟิกต่างๆ ได้

และสามารถ Generate จำนวนมากภายในเวลาอันสั้น โดยในแต่ละ Model มีความหลากหลายของรูปทรงและพื้นผิว ไม่ว่าจะเป็นคน, สัตว์, สิ่งของ และ  Object ต่างๆ

NVIDIA ใช้วิธีพัฒนา GET3D ด้วยภาพ 2 มิติที่ได้จากการจับภาพโมเดล 3 มิติในหลากหลายมุมมอง โดยทีมงาน ในการใช้เวลา 2 วันในการเทรน ด้วยภาพจำนวน 1 ล้านภาพ ที่ใช้ A100 Tensor Core

GET3D สามารถสร้างโมเดล 3 มิติได้ 20 ชิ้นต่อวินาทีด้วยการประมวลผลของ GPU เพียงตัวเดียว หากป้อนคำสั่งให้มันสร้าง Model รูปสัตว์ มันสามารถสร้าง Model สัตว์นานาชนิด เช่น สุนัขจิ้งจอก, แรด, ม้า และหมี ออกมาได้ในคราวเดียวกัน หรือหากให้มันสร้าง Model เก้าอี้ มันก็จะทำให้ทั้งเก้าอี้หมุน, เก้าอี้ทานข้าว หรือกระทั่งเก้าอี้เอกเขนก ซึ่ง Model เหล่านี้แน่นอนว่ามีความแตกต่างกันทั้งรายละเอียดของรูปทรงและลวดลายสีสันบนพื้นผิวโมเดล

ตัวอย่างแสดงให้เห็นความหลากหลายของรูปทรงและพื้นผิวบนโมเดลที่ GET3D สร้างขึ้นแบ่งตามหมวดหมู่ 

นอกจากนี้ GET3D ยังสามารถทำงานร่วมกับ DIBR++ คือซอฟต์แวร์ที่เรียนรู้และปรับแต่งการให้แสงบนโมเดลเพื่อความสมจริง ก็จะทำให้ได้ Model มีการสะท้อนแสงแสงต่างๆและเงาต่างๆ อิงตามสภาพแวดล้อมรอบได้ ทำให้สมจริงยิ่งขึ้น

และสามารถป้อนคำสั่ง GET3D ทำ Model ที่มีลักษณะเฉพาะเจาะจงยิ่งขึ้น ก็สามารถประยุกต์ใช้งานมันร่วมกับ StyleGAN-NADA ปัญญาประดิษฐ์ที่ทำหน้าที่ปรับแต่งภาพโดยอิงคำสั่งข้อความจากผู้ใช้ ก็จะสามารถทำให้ GET3D รับคำสั่งและสร้างโมเดลที่มีลักษณะเฉพาะตามข้อความบรรยายได้เช่นกัน เช่นการระบุให้มันสร้างโมเดล “รถยนต์” ก็อาจเพิ่มคำสั่งให้มันสร้าง “รถยนต์ขึ้นสนิม” หรือ “รถแท็กซี่” ได้ หรือการสร้างโมเดล “บ้าน” ก็อาจเพิ่มคำสั่งให้สร้างโมเดล “บ้านก่ออิฐ” หรือ “บ้านไฟไหม้” ก็จะได้ผลลัพธ์เปลี่ยนไปตามลักษณะเฉพาะที่ต้องการ

มีการระบุว่าโมเดลที่ได้จาก GET3D นั้นเป็นโมเดลที่สามารถนำออกไปใช้งานในเอนจิ้นเกม, ซอฟต์แวร์พัฒนางาน 3 มิติอื่น หรือซอฟต์แวร์สำหรับงานผลิตภาพยนตร์ สะดวกต่อการปรับแต่งนำไปใช้งานต่อได้ทันที

น่าสนใจมากๆสำหรับคนที่ต้องการใช้ทรัพยากรต่างๆ ที่สามารถทำได้ง่ายขึ้นและสะดวกมากยิ่งขึ้นนั่นเอง โดยต้องขอบคุณทาง Nvidia ที่ได้มี AI ตัวนี้ขึ้นมาครับ

ติดตามข่าวสารเพิ่มเติมได้ที่ TOMITECH