XÂY DỰNG ỨNG DỤNG CHUYỂN ẢNH 2D THÀNH MÔ HÌNH 3D VÀ HIỂN THỊ TRÊN HOLOGRAM.

Abstract

Chuyển đổi ảnh 2D thành mô hình 3D là một bài toán sử dụng mô hình học sâu, với đầu vào là một tấm hình chứa chủ thể người và đầu ra là một mô hình 3D với hình dáng tương ứng với chủ thể. Điều này giúp giải quyết vấn đề thời gian và chi phí để xây dựng mô hình mà vẫn tạo ra được sản phẩm chất lượng. Mục tiêu của đề tài luận văn này là xây dựng một hệ thống với mô hình mạng nơ-ron dựa trên cấu trúc của PIFu (Pixel-aligned Implicit Function), kết hợp cùng với thư viện OpenPose để xử lý bộ dữ liệu hình ảnh được thu thập từ nhiều nguồn và có điều kiện ngoại cảnh khác nhau. Với OpenPose được sử dụng để xác định được các trọng điểm trên cơ thể người ở trong ảnh, cung cấp thêm dữ liệu đầu vào cho mô hình. Từ đó, hệ thống sử dụng kết hợp ảnh đầu vào cùng với những đặc điểm được cung cấp từ OpenPose tiến hành xử lý và cho ra được một mô hình 3D có cấu trúc giống với ảnh đã cho. Và cuối cùng sử dụng sản phẩm được tạo ra biểu diễn trên máy chiếu Hologram. Kết quả đánh giá cho thấy, đề tài luận văn đạt được hiệu suất cao với khả năng tạo ra mô hình trong thời gian chỉ khoảng 65 giây và hệ số IOU đối với mô hình đạt kết quả tốt nhất là 0.8354. Điều này cho thấy đề tài luận văn tạo khả năng giúp mọi người có thể tiếp cận dễ dàng hơn trong lĩnh vực đồ hoạ 3D, đồng thời cũng mang lại nhiều hứa hẹn trong việc phát triển mô hình chất lượng cao hơn cũng như có thể xử lý dữ liệu đầu vào linh hoạt hơn trong tương lai.