Hands-Free Interaction: Eye Tracking and Voice Commands on HoloLens 2 (bằng tiếng Anh).

Tạo ra các ứng dụng tính toán không gian trực quan đòi hỏi vượt qua các bộ điều khiển vật lý và cử chỉ tay. Thiết kế cho môi trường không cần dùng tay mở ra các tùy chọn truy cập mạnh mẽ và các luồng công việc tối ưu cho người lao động tuyến đầu và người dùng hàng ngày. Lớp học viết này hướng dẫn bạn qua các khái niệm cơ bản và thực hiện thực tế của theo dõi mắt và lệnh giọng nói trên HoloLens 2. Bạn sẽ chuyển từ việc hiểu lý thuyết đầu vào không gian để cấu hình hoàn toàn phản ứng, nhận thức ánh nhìn, và các đối tượng ảo được kích hoạt bằng giọng nói. Bạn sẽ học được: - Hiểu về các khái niệm cơ bản của theo dõi mắt và cơ chế chọn lọc dựa trên ánh nhìn - Cấu hình lệnh giọng nói và hệ thống nhận diện giọng để nhập ngôn ngữ tự nhiên - Thực hiện hành vi đối tượng nhận biết ánh nhìn phản ứng khi người dùng nhìn vào chúng - Apply modern Mixed Reality Toolkit (MRTK) interaction profiles to streamline setup - Thiết kế giao diện người dùng dễ tiếp cận, không cần dùng tay sử dụng các thực tiễn tốt nhất trong UX không gian - Khắc phục sự cố thông thường và thách thức theo dõi môi trường trong thực tế hỗn hợp Bạn sẽ bắt đầu bằng cách học thuật ngữ và cấu hình cơ bản của máy tính không gian cốt lõi trước khi chuyển sang các chiến lược triển khai từng bước. Các bài học dựa trên văn bản sau đó hướng dẫn bạn qua các cấu trúc mã và cài đặt cấu hình để kết nối các đầu vào nhìn và nói với các hành động đối tượng. Lớp học này được thiết kế cho các nhà phát triển mới, nhà thiết kế UX, và người đam mê tính toán không gian. Không cần kinh nghiệm trước đó với việc phát triển HoloLens, mặc dù một sự quen thuộc cơ bản với các khái niệm lập trình hướng đối tượng là hữu ích. Bắt đầu đọc hôm nay để xây dựng các trải nghiệm tương tác tự nhiên và dễ tiếp cận hơn trong thực tế hỗn hợp.