Evaluación de sistemas de búsqueda de respuestas con restricción de tiempo
Por favor, use este identificador para citar o enlazar este ítem:
http://hdl.handle.net/10045/2937
| Título: | Evaluación de sistemas de búsqueda de respuestas con restricción de tiempo |
|---|---|
| Autor/es: | Llopis, Fernando | Noguera Robles, Elisa | Ferrández, Antonio | Escapa, Alberto |
| Palabras clave: | Evaluación | Búsqueda de respuestas | Evaluation | Question answering |
| Fecha de publicación: | sep-2007 |
| Editor: | Sociedad Española para el Procesamiento del Lenguaje Natural |
| Cita bibliográfica: | LLOPIS PASCUAL, Fernando, et al. "Evaluación de sistemas de búsqueda de respuestas con restricción de tiempo". Procesamiento del lenguaje natural. N. 39 (sept. 2007). ISSN 1135-5948, pp. 45-52 |
| Resumen: | Las investigaciones sobre la evaluación de los sistemas de Búsqueda de Respuestas (BR) sólo se han centrado en la evaluación de la precisión de los mismos. En este trabajo se desarrolla un procedimiento matemático para explorar nuevas medidas de evaluación en sistemas de BR considerando el tiempo de respuesta. Además, hemos llevado a cabo un ejercicio para la evaluación de sistemas de BR en la campaña CLEF-2006 usando las medidas propuestas. La principal conclusión es que la evaluación del tiempo de respuesta puede ser un nuevo escenario para la evaluación de los sistemas de BR. | Previous works on evaluating the performance of Question Answering (QA) systems are focused in the evaluation of the precision. Nevertheless, the importance of the answer time never has been evaluated. In this paper, we developed a mathematic procedure in order to explore new evaluation measures in QA systems considering the answer time. Also, we carried out an exercise for the evaluation of QA systems within a time constraint in the CLEF-2006 campaign, using the proposed measures. The main conclusion is that the evaluation of QA systems in realtime can be a new scenario for the evaluation of QA systems. |
| URI: | http://hdl.handle.net/10045/2937 |
| ISSN: | 1135-5948 |
| Idioma: | spa |
| Tipo: | info:eu-repo/semantics/article |
| Aparece en las colecciones: | Procesamiento del Lenguaje Natural - Nº 39 (septiembre 2007) INV - GPLSI - Artículos de Revistas INV - GEDE - Artículos de Revistas INV - I+GE - Artículos de Revistas |
Archivos en este ítem:
| Archivo | Descripción | Tamaño | Formato | |
|---|---|---|---|---|
 PLN_39_06.pdf | 750,48 kB | Adobe PDF | Abrir Vista previa | |
Ver citas en Google Académico
Todos los documentos en RUA están protegidos por derechos de autor. Algunos derechos reservados.