ResumenSe presenta la evaluación de desempeño de un Sistema Multi-Agente Ubicuo (U-SMA) de aprendizaje electrónico (e-learning). La metodología de evaluación está basada en cuatro ejes correspondientes a las inferencias ontológicas, los servicios de conocimiento sensibles al contexto (awareness), la aplicación móvil y el desempeño general del U-SMA utilizando métricas cualitativas y cuantitativas. Los resultados permiten concluir que las recomendaciones realizadas a partir de inferencias ontológicas son muy acertadas, que los servicios de conocimiento sensibles al contexto tuvieron gran aceptación dentro de la población encuestada, que la funcionalidad de la aplicación móvil fue muy satisfactoria, y que la evaluación del desempeño general del U-SMA arrojó altos índices de escalabilidad para un número de usuarios concurrentes en aumento y un tiempo de respuesta con crecimiento lineal. Los resultados evidencian las bondades de integrar computación ubicua, sensibilidad al contexto, adaptación al perfil del estudiante, servicios de conocimiento sensibles al contexto, así como, una representación basada en ontologías.
Palabras clave: evaluación del desempeño; aprendizaje electrónico; SMA ubicuos y pedagógicos; sistemas sensibles al contexto; métricas cuantitativas
Evaluation of Metrics-based Performance of a Ubiquitous E-Learning Multi-Agent Context-Aware System, using Ontologies AbstractThe performance evaluation of a ubiquitous e-learning multi-agent system (U-MAS) is presented. The methodology is mainly based on four axes corresponding to ontological inferences, the context-awareness services, the mobile application and the overall performance of the U-MAS using qualitative and quantitative metrics. The results obtained suggest that the recommendations from ontological inferences are very successful, that the awareness services had great acceptance within the surveyed population of students, that the functionality concerning the mobile application was very satisfactory, and that the general performance evaluation of the U-SMA offers high levels of scalability for an increase number of concurrent users and with linear growth response. The results demonstrate the benefits of integrating ubiquitous computing, context-awareness services, adaptation to the student profile, as well as, a knowledge representation based on ontologies.