World Labs ra mắt Marble: Công cụ AI giúp tạo và chỉnh sửa thế giới 3D từ văn bản, hình ảnh và video

Công ty tình báo không gian Phòng thí nghiệm thế giới đã ra mắt Marble, một mô hình thế giới đa phương thức tiên phong, cho phép người dùng tạo môi trường 3D từ các gợi ý văn bản hoặc hình ảnh. Ban đầu chỉ dành cho một nhóm người dùng beta được chọn lọc, Marble hiện hỗ trợ nhiều loại đầu vào, bao gồm văn bản, hình ảnh, video và bố cục 3D thô, đồng thời cho phép chỉnh sửa tương tác, mở rộng và kết hợp các thế giới 3D. Sau khi tạo, các thế giới này có thể được xuất ra dưới các định dạng như biểu đồ Gauss, lưới hoặc video, mang đến cho người dùng khả năng kiểm soát và linh hoạt hơn đối với các sáng tạo của mình.

Bên cạnh công cụ Marble, World Labs còn giới thiệu Marble Labs, một nền tảng sáng tạo khuyến khích sự hợp tác và thử nghiệm trên nhiều lĩnh vực như trò chơi, hiệu ứng hình ảnh (VFX), thiết kế và robot. Marble Labs cung cấp các nghiên cứu điển hình, hướng dẫn và tài liệu, cung cấp cho người dùng các nguồn lực để tìm hiểu và chia sẻ thế giới 3D của riêng họ. Khả năng đa phương thức của công cụ mới này bắt nguồn từ ý tưởng rằng nhận thức của con người về thế giới tích hợp nhiều giác quan—thị giác, thính giác, xúc giác và ngôn ngữ—thành một mô hình tinh thần gắn kết. Tương tự, các mô hình thế giới của Marble được thiết kế để tổng hợp các loại dữ liệu đầu vào khác nhau nhằm tạo ra các thế giới 3D toàn diện, phát triển khi thông tin mới được thêm vào.

Marble là mô hình thế giới thế hệ tiếp theo, cung cấp khả năng sáng tạo mở rộng bằng cách cho phép người dùng dễ dàng tạo ra thế giới 3D chi tiết và tinh chỉnh chúng theo từng bước một cách chính xác, từ lời nhắc đơn giản đến các chỉnh sửa tương tác phức tạp.

World Labs cho phép người dùng tạo, tùy chỉnh và mở rộng thế giới 3D từ lời nhắc văn bản, hình ảnh và video 

Marble cho phép người dùng tạo ra thế giới 3D hoàn chỉnh từ một hình ảnh hoặc lời nhắc văn bản ngắn, mang đến một cách trực quan và đơn giản để tạo ra nhiều cảnh theo nhiều phong cách nghệ thuật khác nhau. Bằng cách sử dụng lời nhắc hình ảnh, người dùng có thể tích hợp Marble với các công cụ AI khác, tạo ra môi trường 3D từ hình ảnh được tạo ra. Tuy nhiên, mặc dù lời nhắc văn bản và hình ảnh rất mạnh mẽ, nhưng chúng lại hạn chế khả năng sáng tạo, đòi hỏi Marble phải tự tạo ra bất kỳ chi tiết nào còn thiếu trong cảnh, điều này đôi khi có thể dẫn đến những kết quả không mong muốn.

Đối với người dùng muốn kiểm soát nhiều hơn, Marble cũng hỗ trợ nhắc nhở nhiều hình ảnh, cho phép kết hợp nhiều hình ảnh khác nhau để tạo ra một thế giới 3D thống nhất. Phương pháp này cho phép người dùng đạt được độ chính xác cao hơn bằng cách defiMô phỏng hình ảnh thế giới từ nhiều góc độ khác nhau. Lời nhắc nhiều hình ảnh cũng có thể được sử dụng để tái tạo không gian thực tế, trong đó Marble tổng hợp nhiều ảnh hoặc video từ nhiều góc nhìn khác nhau thành mô hình 3D của địa điểm thực tế.

Quy trình sáng tạo của Marble được thiết kế theo hướng lặp lại, cho phép người dùng tinh chỉnh thế giới của mình sau mỗi lần tạo. Nền tảng này bao gồm các công cụ chỉnh sửa gốc để thực hiện cả những điều chỉnh nhỏ và lớn cho thế giới 3D, từ việc loại bỏ hoặc sửa đổi các đối tượng đến việc thay đổi hoàn toàn phong cách hoặc cấu trúc hình ảnh. Để kiểm soát chi tiết hơn, Marble giới thiệu Chisel, một công cụ điều khiển bằng AI dành cho người dùng nâng cao, cho phép trực tiếp tạo hình thế giới 3D. Sử dụng các hình dạng 3D đơn giản hoặc các tài nguyên được nhập, người dùng có thể cấu trúc cảnh và thêm lời nhắc văn bản để quyết định phong cách hình ảnh, mang đến một cấp độ linh hoạt mới trong việc tạo thế giới.

Đối với những thế giới lớn hơn và rộng lớn hơn, Marble cung cấp các công cụ để tăng kích thước của thế giới được tạo ra. Người dùng có thể mở rộng các vùng cụ thể, cải thiện độ chi tiết và độ rõ nét ở những khu vực trước đây có thể còn thiếu độ chính xác. Ngoài ra, Chế độ Composer cho phép người dùng kết hợp nhiều thế giới được tạo ra thành không gian lớn hơn, mang lại khả năng kiểm soát hoàn toàn bố cục và sắp xếp các cảnh.

Sau khi tạo xong thế giới, Marble cung cấp nhiều tùy chọn xuất. Các mảng Gaussian cung cấp khả năng thể hiện cảnh 3D với độ trung thực cao nhất, trong khi các lưới tam giác có thể được xuất để sử dụng trong nhiều công cụ tiêu chuẩn công nghiệp khác nhau. Marble cũng hỗ trợ kết xuất video với khả năng điều khiển camera hoàn hảo đến từng pixel, cho phép người dùng ghi lại và chia sẻ thế giới của họ dưới dạng video, đồng thời tùy chọn nâng cao các video này bằng các chi tiết bổ sung hoặc các yếu tố động.

Marble Labs cung cấp một nền tảng để khám phá và thử nghiệm xây dựng thế giới, giới thiệu các dự án sáng tạo và kỹ thuật từ các nghệ sĩ, kỹ sư và nhà thiết kế trên khắp các ngành. Marble Labs đang ngày càng phát triển và hướng đến việc mở rộng sang các trải nghiệm tương tác hơn, có khả năng hỗ trợ mô phỏng, robot và các ứng dụng tiên tiến khác.

Mặc dù trò chơi điện tử và thực tế ảo thường là những ngành công nghiệp đầu tiên xuất hiện trong tâm trí, nhưng tiềm năng ứng dụng của các mô hình thế giới rất rộng lớn và vượt xa những lĩnh vực này. Những mô hình này có khả năng biến đổi nhiều lĩnh vực, bao gồm mô phỏng robot, thiết kế kiến ​​trúc và xây dựng thế giới điện ảnh. Tương tự như các mô hình tạo hình ảnh và video, mô hình thế giới đang nhanh chóng trở thành những công cụ giá trị, được kỳ vọng sẽ tích hợp vào quy trình làm việc của nhiều ngành công nghiệp trong tương lai gần.