01
สร้าง
สร้างเฟรมและวิดีโอใหม่ตามตำแหน่งและเส้นทางกล้องที่กำหนด
Atlas คือ World Model แบบ omni รุ่นถัดไปของ World Labs รวมการสร้างที่ควบคุมด้วยกล้อง การสร้างใหม่เชิงพื้นที่ ซิมูเลชันปริภูมิ-เวลา และเอาต์พุต 3D ชัดเจนไว้ในสถาปัตยกรรมเดียวที่สร้างรอบบริบทเชิงพื้นที่ร่วม
Atlas คืออะไร
Atlas พิจารณาบริบทภาพ ตำแหน่งกล้อง และความลึกไปพร้อมกัน
Atlas ยึดรูปภาพและแผนที่ความลึกกับตำแหน่งกล้อง แล้วใช้บริบทเชิงพื้นที่นั้นสร้างมุมมองใหม่ สร้างเรขาคณิตขึ้นใหม่ และจำลองการเคลื่อนผ่านฉาก
01
สร้างเฟรมและวิดีโอใหม่ตามตำแหน่งและเส้นทางกล้องที่กำหนด
02
แปลงรูปภาพหรือเฟรมวิดีโอจำนวนน้อยให้เป็นมุมมองใหม่และการแทนค่า 3D ชัดเจน
03
โมเดลปริภูมิและเวลาสำหรับช็อต VFX ที่จัดเฟรมใหม่ และเวิร์กโฟลว์หุ่นยนต์ Real-to-Sim
ความสามารถหลัก
สื่อเปิดตัวครอบคลุมงานสร้างสรรค์และซิมูเลชันทางกายภาพ นี่คือการสาธิตและข้อกล่าวอ้างของ World Labs ไม่ใช่เกณฑ์วัดอิสระของ Topview
Atlas รับเรขาคณิตกล้องเป็นอินพุตเนทีฟ แทนการพึ่งพาคำอย่าง pan crane หรือ orbit อย่างเดียว World Labs แสดงเส้นทางกล้องที่ออกแบบด้วยมือผ่านฉากที่สร้างขึ้นอย่างสอดคล้อง
เดโม: สูงสุด 1 นาที ที่ 1440p
เริ่มจากรูปภาพหนึ่งหรือหลายภาพ สร้างมุมมองที่ยังไม่เห็น ประมาณเรขาคณิต และเพิ่มมุมมองเมื่อการสร้างใหม่ให้ตรงโลกจริงสำคัญกว่าการแต่งที่ดูสมจริง
จากมุมมองเบาบางสู่ 3D ชัดเจน
สร้างการเคลื่อนไหวใหม่จากกล้องธรรมดาจำนวนน้อย จัดเฟรมเหตุการณ์จากมุมใหม่ หรือสร้างค่าสังเกต RGB และความลึกที่หุ่นยนต์จำลองจะเห็น
VFX การนำทาง และการจัดการวัตถุ
การสร้าง World Model คือจุดเน้นหลัก แต่ World Labs ยังสาธิตการสร้างรูปตามพรอมต์ การเรนเดอร์ข้อความ สไตล์ภาพหลากหลาย และรูป 360 องศาจากพรอมต์ข้อความหรือรูปภาพ
ทุกเฟรมคือมุมมองเข้าสู่โลกที่ถูกโมเดล
โมเดลทำงานอย่างไร
Atlas ประมวลผลลำดับมัลติโมดัลทีละองค์ประกอบ โดยผูกอินพุตรูปภาพและความลึกกับโพสกล้องที่ระบุชัด
แนวคิดที่ใช้จริงนั้นเรียบง่าย มุมมองจริงแต่ละมุมที่เพิ่มมาบอกโมเดลเกี่ยวกับฉากมากขึ้น เมื่อสังเกตได้น้อย Atlas มีพื้นที่จินตนาการมากขึ้น เมื่อสังเกตได้มาก การสร้างใหม่จึงอาศัยหลักฐานมากขึ้น
ใส่ข้อความ รูปภาพหนึ่งหรือหลายภาพ ลำดับรูปภาพ โพสกล้อง หรือข้อมูลความลึกตามงาน
วางแต่ละเฟรมที่ตำแหน่งกล้องที่ทราบ เพื่อให้โมเดลเชื่อมลักษณะภายนอกกับปริภูมิได้
การทำนายแบบออโตรีเกรสซีฟและดิฟฟิวชันสร้างองค์ประกอบมัลติโมดัลใหม่ โดยมีเงื่อนไขจากทุกอย่างที่อยู่ในบริบทแล้ว
คืนมุมมองใหม่ วิดีโอที่ควบคุมได้ ความลึก พอยต์คลาวด์ หรือฉาก Gaussian Splat สำหรับงานขั้นถัดไป
Atlas อาจสำคัญตรงไหน
Atlas ถูกวางเป็นรากฐานทั่วไปสำหรับฉากที่ต้องการมากกว่าหนึ่งเฟรมสวย ค่าของมันอยู่ที่การเชื่อมลักษณะภายนอก เรขาคณิต มุมมอง และการเปลี่ยนแปลงตามเวลา
ออกแบบเส้นทางกล้องที่แม่นยำ สร้างมุมมองใหม่รอบการแสดง และใช้ความลึกหรือโครงสร้าง 3D ที่สร้างใหม่เพื่อรองรับการจัดเฟรมใหม่และการคอมโพสิต
จัดข้อมูลอ้างอิงเป็นจุดยึดในปริภูมิ สำรวจการเปลี่ยนผ่านระหว่างไอเดีย และทดสอบการเคลื่อนกล้องผ่านสภาพแวดล้อมที่เสนอ
สร้างตัวแทนฉากที่สำรวจได้และมุมมองที่สอดคล้องหลายมุม เพื่อประกอบแนวคิดสภาพแวดล้อม เลย์เอาต์ และการทำต้นแบบ
สร้างสภาพแวดล้อมจริงขึ้นใหม่ ปรับเงื่อนไข และสร้างมุมมองเซ็นเซอร์จำลองสำหรับฝึกและประเมินการนำทางหรือการจัดการวัตถุ
ใช้บริบทที่รู้เรื่องโลกชุดเดียวกันสำหรับรูปสไตล์ ฉาก 360 องศา และลำดับที่ควบคุมด้วยกล้องยาวขึ้น
Atlas vs Marble
Atlas กับ Marble สัมพันธ์กัน แต่ไม่ใช่ชื่อที่ใช้แทนกันได้ ข้อแตกต่างนี้สำคัญเมื่อตัดสินใจว่าวันนี้ใช้อะไรได้
World Model แบบ omni รุ่นถัดไปสำหรับสร้าง สร้างใหม่ และจำลอง ครอบคลุมงานสร้างสรรค์และหุ่นยนต์
ตระกูลโมเดลที่พร้อมใช้งานวันนี้ สำหรับสร้างและสำรวจโลก 3D ใน Topview Canvas
เข้าถึงล่วงหน้ากับพาร์ทเนอร์ที่คัดสรรของ World Labs ยังไม่ประกาศราคาสาธารณะและการเข้าถึงทั่วไป
Marble 1.1 และ Marble 1.1 Plus เลือกได้ในเวิร์กโฟลว์ 3D World ของ Topview
World Labs อธิบายบริบทร่วมที่ครอบคลุมข้อความ รูปภาพ โพสกล้อง ความลึก และวิดีโอที่แทนด้วยลำดับรูปภาพ
Topview รับพรอมต์ข้อความบวกรูปภาพหนึ่งภาพหรือวิดีโอสั้นหนึ่งคลิปเป็นอ้างอิง รูปภาพกับวิดีโอใช้พร้อมกันไม่ได้
เอาต์พุตที่สาธิต ได้แก่ เฟรม วิดีโอ ความลึก พอยต์คลาวด์ และ 3D Gaussian splats
Topview คืนการ์ดโลก Gaussian Splat ที่สำรวจได้ และให้ครีเอเตอร์จับมุมมองกลับเข้า Canvas
World Labs ระบุว่า Atlas จะขับเคลื่อน Marble รุ่นถัดไปและผลิตภัณฑ์อื่นของ World Labs
การเชื่อมต่อ Topview ปัจจุบันยังผูกกับ Marble 1.1 และ Marble 1.1 Plus ไม่ใช่ Atlas
Topview เป็นผลิตภัณฑ์อิสระ และไม่ใช่เว็บไซต์อย่างเป็นทางการของ World Labs ความพร้อมใช้งานอาจเปลี่ยน จึงควรตรวจตัวเลือกโมเดลจริงและช่องทางอย่างเป็นทางการของ World Labs ก่อนวางแผนพึ่งพาในงานโปรดักชัน
รายละเอียดทางเทคนิค
มุมมองย่อของสิ่งที่ World Labs บันทึกไว้สาธารณะ โดยไม่เติมช่องว่างด้วยขนาดโมเดล ราคา หรือพารามิเตอร์ API ที่สันนิษฐาน
คำถามที่พบบ่อย
คำตอบตรงๆ เกี่ยวกับโมเดล อินพุตและเอาต์พุต การเข้าถึง Atlas และสิ่งที่ Topview รองรับวันนี้
สร้างด้วยสิ่งที่มีวันนี้
Atlas ยังอยู่ในช่วงเข้าถึงล่วงหน้าสำหรับพาร์ทเนอร์ที่คัดสรร สำหรับเวิร์กโฟลว์ครีเอเตอร์ที่ใช้งานได้วันนี้ ใช้ Marble 1.1 หรือ Marble 1.1 Plus เพื่อสร้างโลกที่สำรวจได้แล้วจับมุมมองกลับเข้า Canvas
ปลายทาง Topview ใช้โมเดล Marble ปัจจุบัน และไม่ได้สื่อว่าเข้าถึง Atlas ได้หรือมีความเกี่ยวข้องกับ World Labs