Itqualityassurance
- Bagaimana Anda memeriksa keakuratan mesin rekomendasi?
- Bagaimana Anda menguji sistem rekomendasi?
- Bagaimana Anda mengevaluasi kode sistem rekomendasi berbasis konten?
Bagaimana Anda memeriksa keakuratan mesin rekomendasi?
Tingkat klik-tayang (CTR) adalah metrik yang mengukur berapa banyak orang yang mengklik rekomendasi. Gagasan dasarnya adalah bahwa jika lebih banyak orang mengklik hal -hal yang disarankan, rekomendasinya lebih relevan bagi mereka. Dalam rekomendasi berita, CTR adalah metrik yang banyak digunakan.
Bagaimana Anda menguji sistem rekomendasi?
Untuk sistem rekomendasi, solusinya adalah evaluasi offline, di mana data historis digunakan untuk memperkirakan bagaimana pengguna mungkin bereaksi terhadap serangkaian rekomendasi yang berbeda yang ditempatkan di depannya pada titik waktu tertentu, dengan menggunakan pengetahuan tentang apa yang sebenarnya mereka lakukan bereaksi nanti.
Bagaimana Anda mengevaluasi kode sistem rekomendasi berbasis konten?
Dokumen Top-N dengan skor kesamaan tertinggi adalah daftar yang disarankan untuk pengguna berdasarkan kueri tertentu. Setelah itu, Anda dapat mengidentifikasi nilai untuk setiap dokumen dalam daftar rekomendasi baik yang relevan atau tidak relevan berdasarkan kesamaan dengan konten kueri dan dokumen yang disarankan.
