Evaluasi metode pencocokan pola untuk sistem tanya jawab pertanyaan non-factoid menggunakan dokumen bahasa Indonesia

Abstract

Sistem tanya-jawab adalah sistem otomatis yang memberikan jawaban dari masukan berupa pertanyaan. Sistem tanya jawab dengan jenis pertanyaan nonfactoid mengakomodasi jawaban berupa definisi, alasan, dan metode. Penelitian ini bertujuan untuk mengevaluasi metode pencocokan pola untuk sistem tanya-jawab dengan jenis pertanyaan non-factoid yang memiliki lebih dari satu jawaban benar. Setiap pertanyaan diambil kata kunci dan ditentukan jenis pertanyaan. Sepuluh dokumen teratas yang relevan dengan kata kunci diambil dengan pemeringkatan statistik BM25. Dokumen-dokumen tersebut digunakan untuk mencari jawaban dengan pencocokan pola berdasarkan aturan pola kalimat dan kata khusus. Hasil evaluasi berupa nilai harapan dan nilai evaluasi menggunakan Total Reciprocal Rank (TRR). Nilai TRR evaluasi tidak nol dan nilai harapan sama dengan nilai evaluasi paling banyak dimiliki pertanyaan yang jenis jawabannya alasan…