XÂY DỰNG HỆ THỐNG ĐIỀU KHIỂN TRÌNH CHIẾU SLIDE BẰNG CỬ CHỈ TAY SỬ DỤNG MEDIAPIPE HANDS

Abstract

Luận văn này trình bày quá trình xây dựng hệ thống điều khiển trình chiếu slide thời gian thực bằng cử chỉ tay tĩnh. Hệ thống sử dụng MediaPipe Hands để trích xuất 21 điểm mốc ba chiều của bàn tay, kết hợp mô hình học máy để phân loại các cử chỉ đã được định nghĩa. Mỗi cử chỉ được ánh xạ sang một lệnh điều khiển PowerPoint tương ứng, cho phép người thuyết trình bắt đầu, kết thúc, chuyển tiếp hoặc lùi slide mà không cần chạm vào thiết bị. Hai phương pháp phân loại được triển khai gồm Support Vector Machine (SVM) với kernel RBF và Multilayer Perceptron (MLP). Tập dữ liệu được thu thập từ webcam ở nhiều khoảng cách và điều kiện khác nhau, sau đó được chuẩn hóa về vị trí và tỉ lệ bàn tay. Kết quả thực nghiệm cho thấy mô hình SVM đạt độ chính xác 99,7%, cao hơn so với MLP ở mức 97%. Hệ thống hoạt động ổn định trên phần cứng phổ thông, không yêu cầu cảm biến chuyên dụng, và đáp ứng tốt trong môi trường trình bày thực tế. Nghiên cứu khẳng định tính khả thi của phương pháp và tạo nền tảng để mở rộng sang nhận diện cử chỉ động, hỗ trợ đa tay và triển khai trên thiết bị di động.