HỆ THỐNG PHÁT HIỆN VĂN BẢN TIẾNG VIỆT TƯƠNG ĐỒNG

Abstract

Trong thời đại phát triển của công nghệ 4.0, khoa học kỹ thuật ngày càng trở nên tiên tiến, chúng ta xem nó như một yếu tố rất cần thiết cho cuộc sống, nó góp phần thay đổi lối sống của con người trở nên tiên tiến và phát triển về nhu cầu vật chất và tinh thần khá lớn. Trong việc học tập cũng như thế, sự phát triển vượt bật của Internet cùng với các thiết bị nghệ cao góp phần làm cho việc học tập được nâng cao. Không thiếu bắt gặp vô số các tài liệu, các văn bản, bài báo khoa học phục vụ cho học sinh, sinh viên trong quá trình học tập. Tuy nhiên bên cạnh sự phát triển tích cực giúp ít cho nhu cầu học tập của sinh viên vẫn còn tồn tại khá nhiều mặt tiêu cực như: Chủ quan trong việc học tập do có các bài tham khảo trên iInternet hoặc sinh viên sao chép chỉnh sửa ít hoặc nhiều,... các việc làm như thế làm ảnh hưởng rất nhiều đối với nhu cầu giảng dạy và học tập của học sinh, sinh viên. Thấu hiểu được vấn đề trên, đề tài “Hệ thống phát hiện văn tiếng Việt tương đồng” được đề xuất để khắc phục tình trạng sao chép ý tưởng của người khác, chủ quan sao chép hoàn toàn các bài trên Internet mà không quan tâm đến tác giả,... đề tài ra đời nhằm khắc phục các tình trạng trên. Việc nghiên cứu thực hiện sử dụng phương pháp Cosine kết hợp TFIDF cùng với sự kết hợp với việc tách câu và xét ngữ nghĩa do tiếng Việt là một phương pháp vô cùng đa dạng và phong phú nên việc kết hợp trên sẽ nâng cao quá trình tìm kiếm và phát hiện văn bản chính xác. Thông qua kết quả thực nghiệm để chứng minh rằng phương pháp nghiên cứu thực hiện hoàn toàn là phù hợp đúng với các yêu cầu đặt ra khi sử dụng phương pháp tô màu để nhận biết các câu đã sao chép. Khi đề xuất và nhận về kết quả kiểm thử để chứng minh phương pháp Cosine kết hợp TFIDF hoàn toàn có thể đưa vào hệ thống để áp dụng vào thực tiễn chúng ta bắt đầu tiến hành tích hợp và xấy dựng hệ thống trên nền tảng Website. Những kết quả cho việc nghiên cứu mang tính thử nghiệm nhằm góp phần áp dụng trí tuệ nhân tạo vào trong lĩnh việc học tập, kiểm tra và nghiên cứu của sinh viên đi theo chiều hướng tích cực hơn, phát triển hơn thay vì lạm dụng vào sự phát triển của Internet. Hỗ trợ cho nhu cầu giảng dạy được hiệu quả hơn và phát triển hơn, chất lượng của việc giảng dạy được đảm bảo và nâng cao lên.