Perspectives on how to evaluate augmented reality technology tools for education: a systematic review

Abstract

Education has benefited from augmented reality's (AR) potential to promote interactive experiences both inside and outside the classroom. A systematic review was conducted on how AR's impact in the learning process has been evaluated. We selected papers from 2009 to 2017 in three databases, IEEE, ACM, and Science Direct, using an open-source crawler, and in one Brazilian Conference, SBIE. We followed the PRISMA protocol. Forty-five works were selected and used to extract data for our research. They were also analyzed according to quantitative and qualitative criteria. The results from all the papers are available in an online database. Results evidenced an increase in the number of papers evaluating the AR's impact in education. They also showed that AR has been applied in different areas and contexts. Most papers reported positive outcomes as a result of AR insertion. However, most studies lacked the involvement of the teacher and the use of multiple metrics to evaluate educational gains.

AR Graphic Representation of Musical Notes for Self-Learning on Guitar

“…Finally, the results and findings of this study open a door for developers to create applications in which AR interacts directly with the physical guitar. Even they provide a guide to develop this type of application, which cannot follow the common design standards [46].…”

Augmented reality and learning in organic chemistry

“…Este estudio utilizó una rúbrica que permitió valorar el proyecto de RA articulado con la interfaz de la aplicación que, en este caso, fue HP Reveal®. La evaluación que hicimos a los alumnos arrojó datos de tipo cuantitativo, los cuales podrían ser solo una aproximación numérica, pero de alta significancia para los alumnos, como lo explica Da Silva et al (2019) en su revisión sistemática de las perspectivas de cómo evaluar las herramientas tecnológicas de RA empleadas en la educación.…”

“…El diseño del sistema de evaluación resultó complejo, pues en la literatura se sugiere la inclusión de instrumentos con naturaleza variada (cuali-y cuanti-) (Da Silva et al, 2019); en este trabajo, recurrimos a dos instrumentos de ambas naturalezas (rúbrica y examen rápido); sin embargo, se requiere mejorar la consistencia interna de los instrumentos como recomendación para intervenciones futuras con RA, ya que, así, la emisión de los resultados tendrá una mayor solidez.…”

“…El uso de RA en la educación, y específicamente en las ciencias, se ha incrementado en los últimos años; sin embargo, la metodología, el enfoque, la instrumentación y las interpretaciones no han sido homogéneas (Da Silva et al 2019), situación que suma importancia y pertinencia a nuestro estudio. Actualmente, la RA figura como una de las tecnologías emergentes con mayor proyección hacia el futuro, no solo en el campo educativo de las ciencias, sino también en el de la química industrial (Ministère de L´Économie et des Finances, 2019).…”

Project Management’s Triple Constraints Mapping on Augmented Reality based Learning System for Improved Quality

“…LITERATURE REVIEW Manola m.o. desilva [6] supervised a systematic review on how the impact of augmented reality in education has been evaluated over time. The study followed PRISMA protocol for analyzing the papers.…”