Làm cách nào để điều khiển trò chơi trên kính Orion

Phương pháp kiểm soát

1. Theo dõi mắt:
- Mắt người dùng đóng vai trò như một con trỏ, cho phép điều hướng trong giao diện. Điều này có nghĩa là bạn có thể nhìn vào các mục trên màn hình để chọn hoặc tương tác với chúng.

2. Cử chỉ tay:
- Người dùng có thể thực hiện các cử chỉ cụ thể để điều khiển các chức năng khác nhau:
- Chụm ngón trỏ và ngón cái: Chọn mục.
- Chụm ngón giữa và ngón cái: Mở hoặc đóng trình khởi chạy ứng dụng.
- Chuyển động lật đồng xu bằng ngón tay cái vào lòng bàn tay: Cuộn qua các tùy chọn.
- Phản hồi xúc giác từ dây đeo tay xác nhận khi một cử chỉ được xác nhận, nâng cao trải nghiệm tương tác[1] [4].

3. Lệnh bằng giọng nói:
- Người dùng cũng có thể ra lệnh bằng giọng nói để điều khiển các chức năng, giúp tương tác dễ dàng hơn mà không cần cử chỉ vật lý[5] [6].

4. Vòng tay thần kinh:
- Vòng đeo tay này diễn giải các tín hiệu liên quan đến chuyển động của tay bằng phương pháp đo điện cơ (EMG). Nó chuyển các tín hiệu này thành đầu vào gần như ngay lập tức, cho phép tương tác liền mạch ngay cả khi cảm biến của kính không nhìn thấy bàn tay[1] [3].

Trải nghiệm chơi game

Trong các tình huống chơi trò chơi, chẳng hạn như chơi phiên bản Pong 3D, người dùng có thể kiểm soát hành động của mình bằng các phương pháp sau:
- Tính năng theo dõi bằng mắt giúp nhắm mục tiêu hoặc điều hướng trong trò chơi.
- Cử chỉ tay kích hoạt các chức năng trò chơi như bắn súng hoặc di chuyển đồ vật.
- Vòng đeo tay cho phép thực hiện các cử chỉ một cách kín đáo, chẳng hạn như điều khiển trò chơi trong khi đút tay vào túi hoặc tựa lên chân[2] [4].

Nhìn chung, kính Orion thể hiện sự tiến bộ đáng kể trong công nghệ thực tế tăng cường, nhằm tạo ra trải nghiệm sống động và tương tác, kết hợp nội dung số với thế giới thực.

Trích dẫn:
[1] https://www.theverge.com/24253908/meta-orion-ar-glasses-demo-mark-zuckerberg-interview
[2] https://www.youtube.com/watch?v=reeBoSK_YLQ
[3] https://www.youtube.com/watch?v=ynLm-QvsW0Q
[4] https://www.youtube.com/watch?v=ZiJp3oitdNs
[5] https://www.tomsguide.com/computing/smart-glasses/meta-orion-everything-you-need-to-know-about-the-ar-holographic-glasses
[6] https://about.meta.com/realitylabs/orion/
[7] https://about.fb.com/news/2024/09/introducing-orion-our-first-true-augmented-reality-glasses/
[8] https://www.reddit.com/r/ThrillOfTheFight/comments/1fpql04/meta_orion_ar_glasses_or_any_other_to_play_the/

Tính năng theo dõi mắt và theo dõi tay phối hợp với nhau như thế nào trên kính Orion

Các tính năng theo dõi mắt và theo dõi tay của kính Meta Orion hoạt động song song để tạo ra trải nghiệm người dùng liền mạch và trực quan. Đây là cách các công nghệ này cộng tác:

Theo dõi mắt

- Chức năng: Kính Orion được trang bị đầy đủ camera theo dõi mắt để theo dõi ánh nhìn của người dùng. Điều này cho phép người dùng điều hướng giao diện bằng cách chỉ cần nhìn vào các phần tử trên màn hình, sử dụng mắt của họ như một con trỏ một cách hiệu quả.
- Chính xác: Tính năng theo dõi bằng mắt nâng cao độ chính xác của các tương tác, cho phép lựa chọn nhanh các tùy chọn mà không cần phải chạm vào bất cứ thứ gì. Điều này đặc biệt hữu ích trong các ứng dụng thực tế tăng cường (AR) nơi người dùng có thể tương tác với các lớp phủ kỹ thuật số trong môi trường thế giới thực của họ[1] [4].

Theo dõi bàn tay

- Nhận dạng cử chỉ: Việc theo dõi tay được hỗ trợ bởi nhiều camera được gắn trong kính, giúp phát hiện các cử chỉ tay có thể nhìn thấy được. Người dùng có thể thực hiện các hành động cụ thể, chẳng hạn như chụm các ngón tay lại với nhau để chọn mục hoặc vuốt để cuộn qua menu[2] [3].
- Dây đeo cổ tay thần kinh: Bổ sung cho tính năng theo dõi bàn tay là dây đeo cổ tay thần kinh giúp diễn giải các xung điện từ chuyển động của cơ. Công nghệ này cho phép thực hiện các cử chỉ bổ sung, chẳng hạn như cuộn bằng chuyển động của ngón tay cái, ngay cả khi bàn tay không nằm trong tầm nhìn của máy ảnh của kính[1] [2]. Vòng đeo tay cung cấp phản hồi xúc giác khi cử chỉ được nhận dạng, tăng cường tương tác của người dùng.

##Tương tác kết hợp

- Trải nghiệm tích hợp: Sự kết hợp giữa theo dõi mắt và tay cho phép người dùng tương tác với nội dung AR một cách trôi chảy. Ví dụ: khi nhìn vào một đối tượng kỹ thuật số, người dùng có thể chụm ngón tay của họ để chọn nó, kết hợp hiệu quả ánh nhìn và cử chỉ thành một hành động duy nhất[4] [5].
- Tính linh hoạt: Phương thức nhập liệu kép này cho phép thực hiện các tương tác phức tạp mà không yêu cầu người dùng phải liên tục điều chỉnh tay hoặc duy trì khả năng hiển thị trực tiếp. Người dùng có thể điều khiển ứng dụng bằng mắt trong khi thực hiện cử chỉ bằng tay, giúp trải nghiệm tự nhiên hơn và bớt rườm rà hơn[2][3].

Tóm lại, kính Orion sử dụng tính năng theo dõi bằng mắt để điều hướng và lựa chọn trong khi tính năng theo dõi bằng tay—được tăng cường bởi dây đeo cổ tay thần kinh—cho phép điều khiển dựa trên cử chỉ. Cùng với nhau, các tính năng này tạo ra một giao diện sống động và trực quan, phù hợp chặt chẽ với tầm nhìn của Meta về các công nghệ AR trong tương lai.