หัวข้อข่าว

NVIDIA Lyra 2.0 ใช้ AI สร้างโลก 3 มิติที่สำรวจได้จากภาพเดียว

NVIDIA Lyra 2.0

NVIDIA Lyra 2.0 เป็นระบบ AI ที่สร้างฉากสามมิติจากภาพเดียว ให้ผู้ใช้กำหนดเส้นทางกล้องเพื่อสำรวจ พร้อมรักษาความต่อเนื่องของพื้นที่เดิม
หน้าโครงการวิจัยออนไลน์ของ NVIDIA ระบุว่าเผยแพร่เอกสาร โมเดล และโค้ดประมวลผลเมื่อ 15 เมษายน 2569

Lyra 2.0 สร้างพื้นที่นอกกรอบภาพ

ระบบสร้างวิดีโอมุมมองใหม่ตามเส้นทางกล้อง แล้วแปลงเป็นข้อมูลสามมิติสำหรับแสดงผลและจำลองสภาพแวดล้อม ผู้ใช้จึงสำรวจบริเวณที่ขยายออกไปจากภาพตั้งต้นได้ อย่างไรก็ตาม พื้นที่เหล่านี้เป็นสิ่งที่ AI สังเคราะห์ ไม่ใช่ข้อมูลยืนยันรายละเอียดของสถานที่จริง

ภาพเปรียบเทียบฉากถนนและอาคารของ Lyra 2.0 ระหว่าง 3D Gaussian Splatting กับวิดีโอ
ภาพเปรียบเทียบฉากแบบ 3DGS กับวิดีโอของ Lyra 2.0 — ที่มา: NVIDIA

ลดปัญหาฉากเปลี่ยนเมื่อย้อนกลับ

ระบบใช้ข้อมูลเรขาคณิตเรียกคืนภาพก่อนหน้าที่เกี่ยวข้องกับมุมมองใหม่ เพื่อลดการลืมพื้นที่เดิม พร้อมฝึกโมเดลด้วยผลลัพธ์ที่มีข้อผิดพลาดจากตัวเอง เพื่อลดความคลาดเคลื่อนสะสมระหว่างสร้างภาพต่อเนื่อง

อย่างไรก็ตาม งานวิจัยยังเน้นฉากที่อยู่นิ่ง และอาจพบความไม่สม่ำเสมอของแสงหรือรายละเอียดภาพ จึงยังมีข้อจำกัดสำหรับสภาพแวดล้อมที่วัตถุเคลื่อนไหว

แผนภาพ Lyra 2.0 แสดงการสร้างวิดีโอจากภาพและเส้นทางกล้อง พร้อมระบบความจำเชิงพื้นที่และการสร้างฉากสามมิติ
กระบวนการสร้างวิดีโอและฉากสามมิติ พร้อมระบบความจำเชิงพื้นที่ — ที่มา: NVIDIA

แสดงผลเรียลไทม์ไม่ได้แปลว่าสร้างฉากทันที

ผลทดสอบในงานวิจัยระบุว่า รุ่นเร่งความเร็วสร้างวิดีโอช่วงละ 80 เฟรม ใช้ประมาณ 15 วินาที บน NVIDIA GB200 หนึ่งตัว ตัวเลขนี้เป็นเวลาประมวลผลต่อช่วงภายใต้เงื่อนไขทดสอบ ไม่ใช่เวลาสร้างฉากทั้งหมด

การแสดงผลฉากที่สร้างแล้วแบบเรียลไทม์จึงต้องแยกจากความเร็วในการสร้างเนื้อหาใหม่ เพื่อประเมินความสามารถของระบบอย่างถูกต้อง

ผลกระทบต่อธุรกิจไทย

ในเชิงประยุกต์ ธุรกิจไทยอาจศึกษาแนวทางสร้างฉากจำลองและต้นแบบสื่อเสมือน โดยประเมินคุณภาพและต้นทุนประมวลผลก่อน หน้ารุ่นโมเดลระบุให้ใช้เพื่อวิจัยและพัฒนาทางวิทยาศาสตร์ภายใน และห้ามใช้ในระบบผลิตจริงหรือสร้างผลงานเพื่อขายหรือแจกจ่าย จึงต้องตรวจสิทธิ์ให้ตรงกับวัตถุประสงค์ก่อนใช้งาน

ภาพสาธิตฉากจาก Lyra 2.0 ใน NVIDIA Isaac Sim พร้อมหุ่นยนต์สี่ขาภายในห้อง
ตัวอย่างฉากจาก Lyra 2.0 ที่นำไปใช้ใน NVIDIA Isaac Sim — ที่มา: NVIDIA

สรุป

Lyra 2.0 เชื่อมการสร้างภาพด้วย AI กับฉากสามมิติที่สำรวจได้ โดยให้ความสำคัญกับการรักษาความต่อเนื่องของพื้นที่ แต่การนำไปใช้ต้องพิจารณาข้อจำกัดของฉาก เวลาในการประมวลผล และสิทธิ์ใช้งานควบคู่กัน

แหล่งที่มา: โครงการ Lyra 2.0 — NVIDIA · งานวิจัย — arXiv · รายละเอียดและเงื่อนไขโมเดล — NVIDIA · ข่าวอ้างอิง — Wccftech

ติดตามข่าว AI และเทคโนโลยีสำหรับธุรกิจเพิ่มเติมได้ที่ หมวดเทคโนโลยีและนวัตกรรมของ KDC SOLUTION