Evolutionary approach for crowdsourcing quality control

Yung, Duncan; Li, Maolin; Chang, Shi-Kuo

doi:10.1016/j.jvlc.2014.11.002

Cited by 6 publications

(1 citation statement)

References 17 publications

Supporting

Mentioning

Contrasting

Unclassified

Order By: Relevance

“…Otra propuesta es la agregación de resultados que busca aprovechar la inteligencia colectiva que resulta del concurso de la multitud, en este enfoque se busca llegar a un consenso a partir de las diferentes respuestas entregadas por los trabajadores. Aquí se espera que al agregar las respuestas se mejore la calidad de los resultados [62], para el caso de magnitudes numéricas esto es sencillo pero muy complejo cuando se deben agregar entradas de texto. El enfoque de revisiones multinivel, que como se indica en [65] es también un mecanismo que presenta buenos resultados y es de fácil implementación, en dicho estudio se emplea el crowdsourcing en la transcripción de información y para el control de la calidad se define un nivel llamado "arbitraje" donde llegan los registros y las entradas que transcriben independientemente dos voluntarios para que se seleccione una de ellas.…”

Section: Propuestaunclassified

Control de calidad en sistemas crowdsourcing: un mapeo sistemático

Vélez

Piedrahita

2017

Sci. tech

View full text Add to dashboard Cite

Resumen-En el ámbito de la Web 2.0 se ha facilitado la implementación de un modelo efectivo en la solución de problemas denominado crowdsourcing que pretende aprovechar las capacidades y competencias de un grupo grande de individuos para resolver una determinada tarea. El crowdsourcing no es un concepto nuevo, pero gracias a las nuevas tecnologías de la información y la comunicación está evolucionando a medida que se emplea en nuevas investigaciones y aplicaciones. Actualmente, el crowdsourcing es utilizado, entre otros, en procesos de adquisición y tratamiento de información estableciendo un nuevo enfoque en el campo de la gestión del conocimiento. Este artículo presenta los resultados de un mapeo sistemático realizado a la literatura con el propósito de conocer los diferentes mecanismos propuestos para asegurar la calidad de los resultados en los sistemas crowdsourcing y las oportunidades de investigación se encuentran en torno a este tema.Palabras clave-Aseguramiento de calidad, Control de calidad, Crowdsourcing, Mapeo sistemático. Abstract-The web 2.0 have been easing the implementation of an effective model denominated crowdsourcing to find solutions for given situations. This model pretend to take the advantages, capacities and proficiency of a group of people (from few ones to thousands of peoples) to solve some tasks. The crowdsourcing is not a new concept, but thanks to information and communications technologies (ICT) it is evolving in the same way as the new ICT have been develop and applied. Currently, the crowdsourcing is using in data acquiring process and information generation, establishing a new perspective in the knowledge management field. The present work shows the results of a systematic mapping did to literature review, with the purpose to recognize or learn about several proposed mechanisms to ensure quality results within crowdsourcing systems and research opportunities around this topic.Key Word -Crowdsourcing, Quality assurance, Quality control, Systematic mapping. I. INTRODUCCIÓNEl crowdsourcing puede ser visto como un nuevo modelo o paradigma emergente para la solución de problemas, donde se usan las capacidades y competencias de un grupo grande de individuos (multitud) para resolver una determinada tarea [1]. A diferencia de la externalización (outsourcing) no se requiere de una contratación formal y en algunos casos las soluciones aportadas por la multitud superan las dadas por pequeños grupos de expertos [2], por ello se considera particularmente útil en tareas que requieren un gran número de puntos de vista o diferentes soluciones a un mismo problema [3].El término crowdsourcing vio la luz por primera vez en el año 2006 en la revista Wired donde Jeff Howe lo definió como "el acto de externalización por parte de una empresa o institución, de una función realizada normalmente por un empleado, a un grupo indefinido (y por lo general grande) de personas mediante una convocatoria abierta" [1]. Desde ese momento han surgido nuevas definiciones que han ido recogiendo la evolución y aplic...

show abstract

Section: Propuestaunclassified

Control de calidad en sistemas crowdsourcing: un mapeo sistemático

Vélez

Piedrahita

2017

Sci. tech

View full text Add to dashboard Cite

show abstract

Crowdsourcing Controls: A Review and Research Agenda for Crowdsourcing Controls Used for Macro-tasks

Robert

2019

Human–Computer Interaction Series

View full text Add to dashboard Cite

Crowdsourcing-the employment of ad hoc online labor to perform various tasks-has become a popular outsourcing vehicle. Our current approach to crowdsourcing-focusing on micro-tasks-fails to leverage the potential of crowds to tackle more complex problems. To leverage crowds to tackle more complex macrotasks requires a better comprehension of crowdsourcing controls. Crowdsourcing controls are mechanisms used to align crowd workers' actions with predefined standards to achieve a set of goals and objectives. Unfortunately, we know very little about the topic of crowdsourcing controls directed at accomplishing complex macrotasks. To address issues associated with crowdsourcing controls for macro-tasks, this chapter has several objectives. First, it presents and discusses the literature on control theory. Second, this chapter presents a scoping literature review of crowdsourcing controls. Finally, the chapter identifies gaps and puts forth a research agenda to address these shortcomings. The research agenda focuses on understanding how to employ the controls needed to perform macro-tasking in crowds and the implications for crowdsourcing system designers. 3.1 Introduction Crowdsourcing-the employment of ad hoc online labor to perform various tasks-has become a popular outsourcing vehicle. Digital platforms like Mechanical Turk (http://www.mturk.com), CrowdFlower (http://www.crowdflower.com), MobileWorks (http://www.mobileworks.com), and Crowdcrafting (http://crowdcrafting.org) are in part responsible for the emergence and popularity of crowdsourcing. These popular platforms have been dominated by micro-tasks-standalone decomposed tasks (Schmitz and Lykourentzou 2018). This arrangement-microtasking through digital platforms-has been successful at providing organizations with access to affordable labor available 24 h a day (Ye et al. 2017).

show abstract

Who is in Control in Crowdsourcing Initiatives? An Examination of the Case of Crowdmapping

Shahid¹,

Elbanna²

2016

Lecture Notes in Business Information Processing

View full text Add to dashboard Cite

Evolutionary approach for crowdsourcing quality control

Cited by 6 publications

References 17 publications

Control de calidad en sistemas crowdsourcing: un mapeo sistemático

Control de calidad en sistemas crowdsourcing: un mapeo sistemático

Crowdsourcing Controls: A Review and Research Agenda for Crowdsourcing Controls Used for Macro-tasks

Who is in Control in Crowdsourcing Initiatives? An Examination of the Case of Crowdmapping

Contact Info

Product

Resources

About