สรุปความสามารถ AI ตัวใหม่ Nvidia สร้างโมเดล 3D จากข้อความ ในไม่ถึงวินาที

ไม่กี่วันที่ผ่านมา Nvidia เปิดตัว LATTE3D เครื่องมืออัจฉริยะ ที่ช่วยสร้างโมเดล 3D จากชุดคำสั่งของเรา ในชั่วพริบตา

โดย LATTE3D ย่อมาจาก Large-scale Amortized Text-To-Enhanced 3D Synthesis

ซึ่ง LATTE3D เป็นการรวมความสามารถ 3 อย่าง เข้ามาด้วยกัน ได้แก่

1. สร้างพื้นผิว 3 มิติ
2. สร้างโมเดล 3 มิติ ได้ถูกต้องตามคำสั่ง
3. สร้างโมเดลตามคำสั่งแบบเรียลไทม์

ที่น่าสนใจคือ LATTE3D สามารถสร้างแบบจำลอง 3 มิติ คุณภาพสูงได้อย่างถูกต้อง และรวดเร็ว

โดยใช้เวลาในการสร้างแบบจำลองโมเดล 3 มิติ จากคำสั่งที่เราต้องการ เริ่มต้นเพียงแค่ 0.4 วินาที เท่านั้น..

วิธีการทำงานของ LATTE3D ประกอบด้วย 2 ขั้นตอน คือ

1. ใช้ Volumetric Rendering หรือ ก็คือการสร้างภาพ 3 มิติ เพื่อเรียนรู้พื้นผิวและรูปทรงชนิดต่าง ๆ รวมถึงการไล่ระดับสี
เพื่อให้การแสดงผลโมเดล 3 มิติ มีความถูกต้องกับคำสั่งที่พิมพ์ลงไป

2. ใช้ Surface Based Rendering หรือก็คือการสร้างพื้นผิว เพื่อเรียนรู้เกี่ยวกับการสร้างรายละเอียดของผิวสัมผัสวัตถุให้มีคุณภาพสูง

โดยทั้งสองขั้นตอนนี้มีการทำงานร่วมกันอย่างรวดเร็ว เพื่อให้ได้โมเดล 3 มิติ ตามที่เราต้องการ

ต้องบอกว่า ที่จริงแล้วการสร้างโมเดล 3 มิติ ด้วยชุดคำสั่ง ไม่ได้เป็นสิ่งใหม่ เพราะมีเครื่องมือที่ใช้กันก่อนหน้านี้อยู่แล้ว เช่น MVDream, 3DTopia, LGM, and ATT3D (ซึ่งข้อมูลเหล่านี้บางตัว ก็เป็นพื้นฐานของ LATTE3D ที่ว่านี้)

แต่เครื่องมือเหล่านี้ ใช้เวลาในการสร้างนานกว่า LATTE3D มาก และบางครั้งยังสร้างโมเดลได้ไม่ตรงกับคำสั่ง

โดย LATTE3D นี้ออกแบบมาเพื่อแก้ไขปัญหาหลัก ๆ 4 อย่าง ที่เครื่องมืออื่น ๆ ไม่สามารถทำได้คือ

1. โมเดล 3D ที่มีคุณภาพสูง

เครื่องมืออื่น ๆ มักใช้เวลานาน และคุณภาพของโมเดลนั้นไม่มีความละเอียด การนำไปใช้งานต่อ จึงเป็นเรื่องที่เป็นไปได้ยาก

แต่หากเทียบด้วยระยะเวลาในการประมวลผลที่เท่ากัน LATTE3D จะให้โมเดลที่ได้มีคุณภาพสูง สามารถนำไปต่อยอดได้ง่าย

2. การสร้างโมเดลที่รวดเร็ว

LATTE3D สามารถสร้างโมเดล 3 มิติ ด้วยระยะเวลาเริ่มต้นเพียงแค่ 0.4 วินาที เท่านั้น

หากต้องการโมเดล 3 มิติ ที่มีรายละเอียดเพิ่มมากขึ้น สามารถใช้ตัวเลือกเพิ่มเวลาในการประมวลผลได้
ซึ่งยิ่งระยะเวลาในการประมวลผลนาน ก็จะได้โมเดลที่มีรายละเอียดเพิ่มมากขึ้น

3. รองรับคำสั่งการสร้างที่หลากหลาย

LATTE3D รองรับคำสั่งที่หลากหลายกว่าเครื่องมือชนิดอื่น ๆ ยกตัวอย่าง เช่น “DSLR photo of a penguin”

โดย LATTE3D จะสามารถสร้างโมเดลนกเพนกวิน ที่มีลักษณะของสีและผิวที่ถูกต้องสมจริง

4. สามารถออกแบบฉากได้อย่างรวดเร็ว เพียงแค่ใช้ชุดคำสั่งแค่ชุดเดียว

LATTE3D สามารถสร้างโมเดล 3 มิติ ได้หลายโมเดล ลงไปในหนึ่งฉาก ซึ่งช่วยให้การสร้างฉากสำหรับการพัฒนาเกม เป็นเรื่องง่ายมากขึ้นกว่าเดิมอย่างมาก

ซึ่งการมาของ LATTE3D ช่วยให้ประหยัดเวลาในการพัฒนาเกม และการออกแบบอนิเมชันให้สามารถทำได้อย่างรวดเร็วยิ่งขึ้น

เพราะเพียงแค่พิมพ์คำสั่งลงไป ก็จะสามารถสร้างโมเดลของสิ่งที่ต้องการได้เลย..

อ้างอิง :
-https://research.nvidia.com/labs/toronto-ai/LATTE3D/