01
Tạo
Tạo khung hình và video mới dọc theo vị trí và quỹ đạo camera đã chỉ định.
Atlas là mô hình thế giới omni thế hệ tiếp theo của World Labs. Nó đưa tạo sinh điều khiển camera, tái tạo không gian, mô phỏng không-thời gian và đầu ra 3D tường minh vào một kiến trúc xây quanh ngữ cảnh không gian dùng chung.
Hình ảnh tham chiếu
Tải lênMô tả ý tưởng video của bạn
Atlas là gì?
Atlas suy luận đồng thời về ngữ cảnh hình ảnh, vị trí camera và độ sâu.
Atlas neo hình ảnh và bản đồ độ sâu vào vị trí camera, rồi dùng ngữ cảnh không gian đó để tạo góc nhìn mới, dựng lại hình học và mô phỏng chuyển động xuyên qua cảnh.
01
Tạo khung hình và video mới dọc theo vị trí và quỹ đạo camera đã chỉ định.
02
Biến hình ảnh thưa hoặc khung video thành góc nhìn mới và biểu diễn 3D tường minh.
03
Mô hình hóa không gian và thời gian cho shot VFX được dựng lại khung và quy trình robot Real-to-Sim.
Năng lực cốt lõi
Tài liệu ra mắt trải rộng từ sản xuất sáng tạo đến mô phỏng vật lý. Đây là phần trình diễn và tuyên bố của World Labs, không phải benchmark độc lập của Topview.
Atlas nhận hình học camera như đầu vào gốc thay vì chỉ dựa vào từ như pan, crane hay orbit. World Labs đã trình diễn đường camera thiết kế thủ công xuyên qua một cảnh được tạo một cách mạch lạc.
Demo: tối đa 1 phút ở 1440p
Bắt đầu với một hoặc nhiều hình ảnh, tạo góc nhìn chưa thấy, ước lượng hình học và thêm góc khi việc tái tạo trung thực thế giới thực quan trọng hơn sự bịa đặt hợp lý.
Từ góc thưa đến 3D tường minh
Tái tạo chuyển động từ một nhóm nhỏ camera thông thường, dựng lại khung sự kiện từ góc mới, hoặc tạo quan sát RGB và độ sâu mà robot mô phỏng sẽ thấy.
VFX, điều hướng và thao tác
Mô hình hóa thế giới là trọng tâm chính, nhưng World Labs cũng trình diễn tạo hình ảnh theo câu lệnh, kết xuất chữ, nhiều phong cách hình ảnh và ảnh 360 độ từ câu lệnh văn bản hoặc hình ảnh.
Mỗi khung hình là một góc nhìn vào thế giới được mô hình hóa
Mô hình hoạt động như thế nào
Atlas xử lý chuỗi đa phương thức từng phần tử một, với đầu vào hình ảnh và độ sâu gắn với tư thế camera tường minh.
Ý tưởng thực tế rất đơn giản: mỗi góc nhìn thực thêm vào cho mô hình biết thêm về cảnh. Khi quan sát được ít, Atlas có nhiều chỗ để tưởng tượng hơn; khi quan sát được nhiều, việc tái tạo có thể dựa trên nhiều bằng chứng hơn.
Cung cấp văn bản, một hoặc nhiều hình ảnh, chuỗi hình ảnh, tư thế camera hoặc thông tin độ sâu tùy theo tác vụ.
Đặt mỗi khung hình ở vị trí camera đã biết để mô hình liên hệ hình dạng với không gian.
Dự đoán tự hồi quy và khuếch tán tạo ra phần tử đa phương thức mới, có điều kiện trên mọi thứ đã có trong ngữ cảnh.
Trả về góc nhìn mới, video được điều khiển, độ sâu, đám mây điểm hoặc cảnh Gaussian Splat cho công việc tiếp theo.
Atlas có thể hữu ích ở đâu
Atlas được định vị như nền tảng chung cho những cảnh cần nhiều hơn một khung hình đẹp. Giá trị nằm ở mối liên hệ giữa hình dạng, hình học, góc nhìn và sự thay đổi theo thời gian.
Thiết kế đường camera chính xác, tạo góc nhìn mới quanh một phần trình diễn, và dùng độ sâu hoặc cấu trúc 3D đã tái tạo để hỗ trợ dựng lại khung và compositing.
Sắp xếp tham chiếu như mốc neo trong không gian, khám phá chuyển tiếp giữa các ý tưởng, và kiểm tra cách camera di chuyển qua môi trường đề xuất.
Tạo biểu diễn cảnh có thể khám phá và nhiều góc nhìn nhất quán để hỗ trợ ý tưởng môi trường, bố cục và làm nguyên mẫu.
Tái tạo môi trường thật, thay đổi điều kiện, và tạo góc nhìn cảm biến mô phỏng để huấn luyện cũng như đánh giá điều hướng hoặc thao tác.
Dùng cùng ngữ cảnh hiểu thế giới cho hình ảnh stylized, cảnh 360 độ và chuỗi điều khiển camera dài hơn.
Atlas vs Marble
Atlas và Marble có liên quan, nhưng không phải tên có thể thay thế nhau. Sự phân biệt này quan trọng khi quyết định hôm nay bạn dùng được gì.
Mô hình thế giới omni thế hệ tiếp theo cho tạo sinh, tái tạo và mô phỏng trên các tác vụ sáng tạo và robot.
Họ mô hình hiện có để tạo và khám phá thế giới 3D trong Topview Canvas.
Truy cập sớm với các đối tác được chọn của World Labs; giá công khai và quyền truy cập đại trà chưa được công bố.
Marble 1.1 và Marble 1.1 Plus có thể chọn trong quy trình 3D World của Topview.
World Labs mô tả ngữ cảnh dùng chung gồm văn bản, hình ảnh, tư thế camera, độ sâu và video được biểu diễn dưới dạng chuỗi hình ảnh.
Topview nhận câu lệnh văn bản cộng một hình ảnh hoặc một video ngắn làm tham chiếu; hình ảnh và video loại trừ lẫn nhau.
Đầu ra đã trình diễn gồm khung hình, video, độ sâu, đám mây điểm và 3D Gaussian splats.
Topview trả về thẻ thế giới Gaussian Splat có thể khám phá và cho phép người sáng tạo bắt góc nhìn trở lại Canvas.
World Labs cho biết Atlas sẽ cung cấp sức mạnh cho các phiên bản Marble tương lai và các sản phẩm World Labs khác.
Tích hợp Topview hiện tại vẫn gắn với Marble 1.1 và Marble 1.1 Plus, không phải Atlas.
Topview là sản phẩm độc lập và không phải trang web chính thức của World Labs. Tình trạng sẵn có có thể thay đổi, vì vậy hãy kiểm tra bộ chọn mô hình đang chạy và kênh chính thức của World Labs trước khi lập kế hoạch phụ thuộc sản xuất.
Chi tiết kỹ thuật
Góc nhìn ngắn gọn về những gì World Labs đã ghi nhận công khai, không lấp chỗ trống bằng kích thước mô hình, giá hay tham số API giả định.
Câu hỏi thường gặp
Câu trả lời thẳng về mô hình, đầu vào và đầu ra, quyền truy cập Atlas, và những gì Topview hỗ trợ hôm nay.
Tạo với những gì sẵn có hôm nay
Atlas vẫn ở giai đoạn truy cập sớm cho đối tác được chọn. Để có quy trình sáng tạo đang chạy hôm nay, dùng Marble 1.1 hoặc Marble 1.1 Plus để tạo thế giới có thể khám phá và bắt góc nhìn trở lại Canvas.
Đích đến Topview dùng các mô hình Marble hiện tại và không hàm ý quyền truy cập Atlas hay liên kết với World Labs.