Giới thiệu về Luận văn
Tên đề tài: Xây dựng bộ ngữ liệu để đánh giá bằng tiếng Việt và chương trình trợ giúp đánh giá các hệ tìm kiếm thông tin
Ngành: Khoa học Máy tính
Tóm tắt nội dung tài liệu:
Luận văn này tập trung vào việc xây dựng một bộ ngữ liệu tiếng Việt và phát triển một chương trình hỗ trợ đánh giá hiệu quả của các hệ thống tìm kiếm thông tin (Information Retrieval - IR). Nghiên cứu được chia thành hai phần chính:
- Phần 1: Xây dựng bộ ngữ liệu đánh giá cho hệ thống tìm kiếm thông tin tiếng Việt. Quá trình này bao gồm ba giai đoạn: xây dựng kho ngữ liệu mẫu tiếng Việt, xây dựng tập câu truy vấn mẫu tiếng Việt, và xây dựng bảng đánh giá liên quan thủ công.
- Phần 2: Xây dựng chương trình trợ giúp đánh giá. Chương trình này nhận đầu vào là ngữ liệu mẫu, câu truy vấn mẫu và hệ thống tìm kiếm thông tin. Đầu ra bao gồm kết quả truy vấn, kết quả đánh giá, nội dung tập tài liệu và câu truy vấn.
Luận văn cũng đề cập đến các thuật toán và phương pháp nghiên cứu liên quan, bao gồm tìm hiểu về Information Retrieval (IR) và Evaluation of Information Retrieval Systems, cấu trúc và phương pháp xây dựng bộ ngữ liệu theo chuẩn TREC (Text Retrieval Conference), cũng như tìm hiểu và sử dụng các hệ thống tìm kiếm phổ biến như SMART, IOTA, Lucene, Terrier. Đặc biệt, luận văn nhấn mạnh việc xây dựng bộ ngữ liệu kiểm tra bằng tiếng Việt, một lĩnh vực còn mới mẻ và đầy tiềm năng tại Việt Nam.
Chương trình được xây dựng nhằm mục đích kiểm tra và đánh giá các hệ thống tìm kiếm thông tin, có khả năng hoạt động trên cả hai hệ điều hành Windows và Linux, được viết bằng ngôn ngữ Java.
Mục lục chi tiết:
- MỞ ĐẦU
- Chương 1: TỔNG QUAN
- 1.1. Tổng quan về tìm kiếm thông tin và hệ thống tìm kiếm thông tin
- 1.2. Tổng quan về đánh giá các hệ thống tìm kiếm thông tin
- 1.2.1. Lý do để tiến hành đánh giá các hệ thống tìm kiếm thông tin
- 1.2.2. Các tiêu chuẩn được dùng để đánh giá
- 1.2.3. Các mô hình đánh giá
- 1.2.4. Các độ đo dùng để đánh giá
- 1.2.5. Các phương pháp xây dựng bộ ngữ liệu dùng để đánh giá
- 1.2.6. Phương pháp xây dựng bộ ngữ liệu được chọn
- Chương 2 : CƠ SỞ LÝ THUYẾT
- 2.1. Tìm kiếm thông tin và các hệ thống tìm kiếm thông tin
- 2.2. Đánh giá các hệ thống tìm kiếm thông tin
- 2.2.1. Nền tảng đánh giá các hệ thống tìm kiếm thông tin
- 2.2.2. Mô hình đánh giá hướng hệ thống
- 2.2.3. Thực hiện đo khả năng tìm kiếm
- 2.2.4. TREC và đánh giá theo chuẩn TREC
- 2.3. Ngữ liệu tiếng Việt
- Chương 3 : THIẾT KẾ VÀ CÀI ĐẶT
- 3.1. Xây dựng bộ ngữ liệu dùng để đánh giá
- 3.2. Phân tích hệ thống đánh giá các hệ thống tìm kiếm thông tin
- 3.3. Thiết kế hệ thống đánh giá
- 3.3.1. Các chức năng của chương trình
- 3.3.2. Thiết kế hệ thống
- 3.3.2.1. Sơ đồ kiến trúc tổng thể
- 3.3.2.2. Sơ đồ kiến trúc tổng quát cho từng chức năng của chương trình
- 3.3.2.3. Thiết kế dữ liệu – tổ chức lưu trữ
- 3.3.2.4. Tổ chức lưu trữ dữ liệu
- 3.3.2.5. Thiết kế giao diện
- 3.3.2.6. Thiết kế màn hình
- 3.3.2.7. Thiết kế hệ thống lớp đối tượng
- Chương 4 : KẾT QUẢ ĐÁNH GIÁ
- 4.1. Ngưỡng đánh giá
- 4.2. Đánh giá hệ thống tìm kiếm thông tin search4VN
- 4.3. So sánh hệ thống tìm kiếm search4VN và hệ thống Lucene
- 4.4. Nhận xét chương trình hỗ trợ đánh giá hệ thống tìm kiếm thông tin
- Chương 5 : KẾT LUẬN
- Chương 6 : HƯỚNG PHÁT TRIỂN
- PHỤ LỤC
- Tài liệu tham khảo