Resumen de Be4SeD: Benchmarking para evaluación de técnicas de descubrimiento de servicios

Luís Suárez Meza, Luis Antonio Rojas Potosí, Juan Corrales, Oscar Caicedo

• español

  Actualmente, el creciente número de procesos de negocio y servicios ofrecidos, es fuente de innumerables proyectosde investigación, orientados a generar mecanismos de descubrimiento; teniendo como resultado un sinnúmero dealgoritmos para recuperar servicios. Sin embargo, dichos proyectos no utilizan una base común para evaluar sustécnicas de búsqueda, impidiendo que las evaluaciones sean objetivas. Por lo tanto, se hace necesaria una herramientapública, que proporcione una referencia común, que permita comparar y valorar los resultados de los diferentesalgoritmos utilizados en el emparejamiento de servicios, con el fin de mejorar la calidad de las técnicas dedescubrimiento propuestas. Este artículo presenta una aplicación pública, que implementa una metodología debenchmarking para evaluar la calidad de recuperación de las técnicas de emparejamiento de servicios. Estebenchmarking está compuesto de un mecanismo de evaluación intuitivo, de un módulo de ingreso de los datoscorrespondientes al algoritmo a evaluar y un componente que entrega resultados estadísticos: recall, precision,overall, k-precision y p-precision. Sus funcionalidades se ofrecen como servicio web para facilitar la integración conlas implementaciones de algoritmos a evaluar. Finalmente se evalúa un algoritmo de emparejamiento, el cualevidencia el uso de la plataforma Be4SeD en este contexto.

• English

  The growing number of business processes and services, has resulted countless develop research projects, aimed at generating discovery mechanisms. While there are a number of algorithms to retrieve services, such work does not use a common basis to evaluate the used search techniques, preventing objective evaluations. Therefore, it is necessary a public tool that provides a common reference for comparing and evaluating the results of the algorithms used in the matching of services, in order to improve the quality of the proposed discovery techniques. This article presents a public application, which implementing a benchmarking methodology to evaluate the quality of recovery of service matching techniques. This benchmarking is comprised of an intuitive assessment mechanism, an input module data for the algorithm to evaluate and a component that provides statistical results: recall, precision, overall, k-precision and p-precision. Its features are offered as a web service to facilitate integration with the implementations of algorithms to evaluate. Finally a matching algorithm is evaluated for evidence the use of Be4SeD platform in this context.