Meta ra mắt hệ thống thực tế hỗn hợp Meta Reality

Tính năng chuyển màu lập thể, neo không gian và hiểu cảnh sẽ mang lại trải nghiệm thực tế hỗn hợp chân thực hơn.

Theo Sarthak Ray, giám đốc sản phẩm tại Meta, khả năng nhìn và tương tác với thế giới xung quanh bạn thông qua thực tế hỗn hợp mở ra những cơ hội mới cho VR. “Bạn có thể chơi với bạn bè trong cùng một phòng vật lý hoặc trải nghiệm năng suất kết hợp màn hình ảo khổng lồ với các công cụ vật lý và đó là một bước tiến tới tầm nhìn dài hạn của chúng tôi đối với thực tế tăng cường.”

Trái ngược với suy nghĩ của nhiều người, trải nghiệm thực tế hỗn hợp sẽ hiệu quả nhất nếu thiết bị VR/AR có thể kết hợp thế giới thực và ảo một cách thuyết phục. Điều này có nghĩa là tai nghe phải làm nhiều việc hơn là chỉ cung cấp nguồn cấp dữ liệu video 2D, theo một bài blog gần đây on oculus.com.

Để tiếp tục cam kết phát triển các công nghệ VR tiên tiến, Meta đã công bố ra mắt Meta Reality, một hệ thống thực tế hỗn hợp mới cung cấp cái nhìn sâu sắc về những gì tạo ra trải nghiệm đặc biệt.

Truyền màu lập thể cho nhận thức không gian

Meta nhận ra tầm quan trọng của công nghệ truyền màu và 3D lập thể khi nói đến việc mang lại trải nghiệm thực tế hỗn hợp thoải mái và đắm chìm.

“Meta Quest Pro kết hợp hai chế độ xem máy ảnh để tái tạo độ sâu thực tế, đảm bảo trải nghiệm thực tế hỗn hợp được xây dựng bằng cách sử dụng tính năng Truyền màu tạo cảm giác thoải mái cho mọi người,” Giám đốc Kỹ thuật Tầm nhìn Máy tính Meta, Ricardo Silveira Cabral giải thích. “Ngoài ra, các tín hiệu kết cấu âm thanh nổi cho phép bộ não của người dùng thực hiện phần còn lại và suy ra độ sâu ngay cả khi việc tái tạo độ sâu không hoàn hảo hoặc nằm ngoài phạm vi của hệ thống.”

Ví dụ: khi sử dụng tính năng Truyền qua, bộ não của bạn biết rằng cốc cà phê cách xa tay bạn bằng khoảng cách từ chiếc bút nằm ngay bên cạnh bạn.

Oculus Insight, chỉ có thể nắm bắt 100 điểm quan tâm để xác định vị trí của tai nghe trong phòng, là công nghệ cung cấp hệ thống theo dõi độc lập đầu tiên cho thiết bị VR tiêu dùng. Kể từ đó, nó đã được nâng cấp để cho phép cảm biến sâu. Để so sánh, Meta Quest Pro có thể tạo ra tới 10,000 điểm quan tâm mỗi giây trong các điều kiện ánh sáng khác nhau, cho phép bạn tạo bản trình diễn 3D cải tiến cho không gian vật lý của mình trong thời gian thực.

Thông qua quá trình này, Meta có thể tạo mô hình 3D của thế giới vật chất được cập nhật liên tục. Sau đó, bạn có thể sử dụng dữ liệu này để tạo khung kết xuất dự đoán có thể tạo ra hình ảnh về môi trường trong thế giới thực của bạn. Để bù đắp cho độ trễ kết xuất, quá trình tái tạo được điều chỉnh theo chế độ xem mắt trái và phải của người dùng thông qua TimeWarp không đồng bộ thuật toán.

Theo Silveira Cabral, việc sử dụng máy ảnh lập thể màu cho phép nhóm đưa ra cách giải thích chân thực hơn về thế giới thực.

Hiểu cảnh để trộn nội dung ảo vào thế giới thực

Thành phần Hiểu bối cảnh của Nền tảng hiện diện đã được giới thiệu trong sự kiện Connect 2021. Công nghệ này cho phép các nhà phát triển tạo ra những trải nghiệm thực tế hỗn hợp phức tạp và theo bối cảnh. Theo Wei Lyu, giám đốc sản phẩm của Meta Quest Pro, thành phần Hiểu bối cảnh của công ty được thiết kế để giúp các nhà phát triển tập trung vào việc xây dựng doanh nghiệp và trải nghiệm của họ..

Lyu cho biết: “Chúng tôi đã giới thiệu Hiểu cảnh như một giải pháp hệ thống.

Hiểu cảnh được chia thành ba lĩnh vực:

• Mô hình cảnh – Một đại diện duy nhất, toàn diện, cập nhật và được quản lý bởi hệ thống của môi trường bao gồm thông tin hình học và ngữ nghĩa. Các yếu tố cơ bản của Mô hình cảnh là các Điểm neo. Mỗi Anchor có thể được gắn vào các thành phần khác nhau. Ví dụ: phòng khách của người dùng được sắp xếp xung quanh các Điểm cố định riêng lẻ với các nhãn ngữ nghĩa, chẳng hạn như sàn, trần, tường, bàn và đi văng. Các neo được gắn với một biểu diễn hình học đơn giản: đường bao 2D hoặc hộp giới hạn 3D.
• Chụp cảnh – Một quy trình do hệ thống hướng dẫn cho phép người dùng đi bộ xung quanh và nắm bắt kiến ​​trúc và đồ đạc trong phòng của họ để tạo Mô hình cảnh. Trong tương lai, mục tiêu sẽ là cung cấp một phiên bản Chụp cảnh tự động không yêu cầu mọi người chụp cảnh xung quanh theo cách thủ công.
• API cảnh – Giao diện mà ứng dụng có thể sử dụng để truy cập thông tin không gian trong Mô hình cảnh cho các trường hợp sử dụng khác nhau, bao gồm vị trí nội dung, vật lý, điều hướng, v.v. Với API cảnh, nhà phát triển có thể sử dụng Mô hình cảnh để tạo ra một quả bóng ảo nảy ra khỏi bề mặt vật lý trong căn phòng thực tế hoặc một rô-bốt ảo có thể mở rộng các bức tường vật lý.

Ray cho biết thêm: “Hiểu biết về cảnh làm giảm ma sát cho các nhà phát triển, cho phép họ xây dựng trải nghiệm MR đáng tin cậy và đắm chìm nhất có thể với các hiệu ứng va chạm và tắc nghẽn trong thời gian thực”.

Neo không gian cho vị trí đối tượng ảo

Các nhà phát triển có thể dễ dàng tạo trải nghiệm thực tế hỗn hợp hạng nhất bằng Spatial Anchors, đây là khả năng cốt lõi của nền tảng Meta Quest Pro. Chẳng hạn, một nhà thiết kế sản phẩm có thể dễ dàng neo nhiều mô hình 3D trong một không gian vật lý bằng cách sử dụng một nền tảng như Phác thảo trọng lực để tạo ra một môi trường liền mạch cho sản phẩm của họ.

Laura Onu, Giám đốc Sản phẩm Meta, cho biết: “Nếu Truyền màu lập thể và Hiểu cảnh thực hiện công việc nặng nhọc để cho phép trải nghiệm MR hòa trộn thế giới thực và ảo, thì khả năng neo của chúng tôi cung cấp mô liên kết giữ tất cả lại với nhau,” Laura Onu, Giám đốc Sản phẩm Meta cho biết.

Cùng với Mô hình cảnh, Điểm neo không gian có thể được sử dụng để tạo môi trường phong phú và tự động cho nhiều trải nghiệm và tình huống khác nhau. Chẳng hạn, bạn có thể tạo một cánh cửa ảo được kết nối với một bức tường vật lý. Đây sẽ là một bước tiến lớn đối với các công ty đang xem xét công nghệ XR cho các giải pháp doanh nghiệp của họ trong kết hợp kỹ thuật số, tự động hóa kho hàng và thậm chí cả người máy.

Hiện tại, có vẻ như Meta tập trung hơn vào trải nghiệm xã hội. “Bằng cách kết hợp Hiểu cảnh với Neo không gian, bạn có thể pha trộn và điều chỉnh trải nghiệm MR của mình với môi trường của người dùng để tạo ra một thế giới mới đầy khả năng,” theo Onu, người cho biết thêm, “Bạn có thể trở thành một đặc vụ bí mật trong chính phòng khách của mình , đặt đồ nội thất ảo trong phòng của bạn hoặc phác thảo phần mở rộng cho ngôi nhà của bạn, tạo trò chơi vật lý, v.v.”

Điểm neo không gian được chia sẻ cho trải nghiệm cùng vị trí

Ngoài ra, Meta đã thêm tính năng Điểm neo không gian được chia sẻ vào Nền tảng hiện diện. Điều này cho phép bạn tạo trải nghiệm nhiều người chơi cục bộ bằng cách chia sẻ điểm neo của mình với những người dùng khác trong cùng một không gian. Điều này sẽ cho phép bạn và những người bạn khác chơi trò chơi board VR trên bàn vật lý giống như cách mà Nghiêng Năm mang lại trải nghiệm chơi trò chơi của họ.

Một sự kết hợp chiến thắng cho thực tế hỗn hợp

Sự kết hợp của Neo không gian, Truyền qua và Hiểu cảnh có thể giúp tạo ra một môi trường tương tác và phong phú được thiết kế để trông giống như thế giới thực. Avinav Pashine, giám đốc sản phẩm của Meta Quest Pro, lưu ý rằng có nhiều sự đánh đổi liên quan đến việc tạo ra một môi trường thực tế hỗn hợp tuyệt vời và thoải mái cho người dùng.

Tương lai của Meta Reality vẫn đang phát triển khi công ty liên tục cải tiến nền tảng thông qua các bản cập nhật phần mềm và đổi mới phần cứng sẽ được cung cấp trong thế hệ sản phẩm tiếp theo của họ. Silveira Cabral, giám đốc sản phẩm của Meta Quest Pro, lưu ý rằng sản phẩm đầu tiên của công ty là một bước quan trọng trong quá trình phát triển của Meta Reality.

“Chúng tôi muốn học hỏi cùng với các nhà phát triển khi họ xây dựng những trải nghiệm hấp dẫn giúp xác định lại những gì có thể với tai nghe VR. Câu chuyện này vẫn chưa hoàn thành—đây mới chỉ là trang một.”

Tín dụng hình ảnh: Meta