Recuperación de Información:
Evaluación de Buscadores

Secciones del Tema:

• Introducción a la Evaluación.
• Necesidad de evaluación.
• Metodo de evaluación.
• Aspectos de evaluacion
• TREC
• Enlaces de interes.

Método de Evaluación

En esta sección se expondrá un método para la evaluación de un conjunto de buscadores Web. Para ello se deberán seguir los siguientes pasos:

• Se escogen los buscadores a evaluar.
• La evaluación se realizará en base a una batería de consultas. Resulta crítico la elección de las mismas, pues de ellas dependerá el resultado de la evaluación. Se recomienza escoger consultas que abarquen las siguientes posibilidades:
  
  • Consultas con una única palabra no ambigua.
  • Consultas con varias palabras.
  • Consultas con varias palabras, de las cuales al menos una resulta por sí misma ambigua pero tiene sentido con el resto de la consulta. Por ejemplo la palabra "paris" puede referirse a un nombre de persona o de ciudad, y los resultados deberían depender del resto de palabras de la búsqueda.

• Realizar las consultas: Se deberá realizar la batería de consultas anterior contra todos los buscadores web sujetos a evaluación.

  
  

• Evaluación de resultados de las consultas:

  
  Cada páginas recibirá un peso según su relevancia con la consulta realizada.

• Índice.
• Accesibilidad y Usabilidad.
• Introducción a la Evaluación de buscadores.
• Modelos de Recuperacion
• Procesamiento del Lenguaje Natural.
• Sistemas de Question-Answering.