L3G-World tạo thế giới 3D vô hạn theo thời gian thực bằng bộ nhớ Gaussian 3D tiềm ẩn
L3G-World là một hệ thống nghiên cứu nhằm tạo ra các thế giới ảo có thể khám phá theo thời gian thực, đồng thời duy trì tính nhất quán về vị trí của các địa điểm và vật thể qua những chuỗi hành động kéo dài của người dùng. Thành phần cốt lõi là Latent 3D Gaussian Memory (L3G), lưu cảnh dưới dạng tập hợp nhỏ gọn các phần tử Gaussian 3D có thể kết xuất nhanh, thay vì liên tục mã hóa lại toàn bộ hình ảnh RGB. Một bộ cập nhật bộ nhớ sẽ thêm Gaussian cho các khu vực mới được quan sát và tinh chỉnh những phần tử hiện có, trong khi một video diffusion transformer luân phiên hoạt động với bộ cập nhật để tạo nội dung hình ảnh tiếp theo. Cách tiếp cận này được thiết kế để bộ nhớ tăng theo quy mô khu vực đã khám phá thay vì tăng theo từng khung hình được tạo, qua đó có thể cải thiện khả năng mở rộng của các world model tương tác.
Đây là hướng nghiên cứu đáng chú ý cho game, mô phỏng và các tác nhân AI cần khám phá không gian dài hạn mà vẫn nhớ được bố cục trước đó. Nhà phát triển chưa thể dùng ngay như một sản phẩm hoàn chỉnh, nhưng có thể theo dõi công trình này nếu quan tâm đến world model, video sinh hoặc biểu diễn cảnh 3D hiệu quả.
Đọc bài gốc