Qual a melhor forma de testar o mecanismo de recomendação resulta em um estudo de usuário?

1. Como você verifica a precisão de um mecanismo de recomendação?
2. Como você testar um sistema de recomendação?
3. Como você avalia um código do sistema de recomendação baseado em conteúdo?

Como você verifica a precisão de um mecanismo de recomendação?

A taxa de cliques (CTR) é uma métrica que mede quantas pessoas clicam nas recomendações. A noção básica é que, se mais pessoas clicarem nas coisas recomendadas, as recomendações serão mais relevantes para elas. Nas recomendações de notícias, o CTR é uma métrica amplamente usada.

Como você testar um sistema de recomendação?

Para sistemas de recomendação, a solução é uma avaliação offline, onde dados históricos são usados ​​para estimar como um usuário pode ter reagido a um conjunto diferente de recomendações colocadas na frente deles em um determinado momento, usando o conhecimento do que eles realmente fizeram reaja a mais tarde.

Como você avalia um código do sistema de recomendação baseado em conteúdo?

Os documentos NOP-N com as maiores pontuações de similaridade são a lista recomendada para um usuário com base em uma consulta específica. Depois disso, você pode identificar um valor para cada documento na lista de recomendação relevante ou não relevante com base na semelhança com o conteúdo da consulta e o documento recomendado.