Compelling experiences in mixed reality interactive storytelling

Charles, Fred; Cavazza, Marc; Mead, Steven J.; Martin, Olivier; Nandi, Alok; Marichal, Xavier

doi:10.1145/1067343.1067347

Cited by 21 publications

(8 citation statements)

References 20 publications

(26 reference statements)

Supporting

Mentioning

Contrasting

Unclassified

Order By: Relevance

“…The installation utilises a marker-driven Augmented Reality system, the ARToolkit, [11,12,13] that displays the naturalistic tree situated in the environment of the participants, following a "magic mirror" [14,15] paradigm for AR, using a 30' monitor.…”

Section: E-tree Artworkmentioning

confidence: 99%

An affective model of user experience for interactive art

Gilroy

Cavazza

Chaignon

et al. 2008

Proceedings of the 2008 International Conference on Advances in Computer Entertainment Technology

Self Cite

View full text Add to dashboard Cite

The development of Affective Interface technologies makes it possible to envision a new generation of Digital Arts and Entertainment applications, in which interaction will be based directly on the analysis of user experience. In this paper, we describe an approach to the development of Multimodal Affective Interfaces that supports real-time analysis of user experience as part of an Augmented Reality Art installation. The system relies on a PAD dimensional model of emotion to support the fusion of affective modalities, each input modality being represented as a PAD vector. A further advantage of the PAD model is that it can support a representation of affective responses that relate to aesthetic impressions.

show abstract

Section: E-tree Artworkmentioning

confidence: 99%

An affective model of user experience for interactive art

Gilroy

Cavazza

Chaignon

et al. 2008

Proceedings of the 2008 International Conference on Advances in Computer Entertainment Technology

Self Cite

View full text Add to dashboard Cite

show abstract

“…Podemos encontrar diversos ejemplos de piezas de realidad aumentada y realidad mezclada en el ámbito del arte, como por ejemplo en (Shaw, 1989;Hoberman et al, 1998;Koleva et al, 2001;Paul, 2003;Wagner et al, 2004a;Paulos et al, 2005;Torpus, 2005;Levin, 2006;Díaz, 2007 (Bobick et al, 1999;Badiqué et al, 2002;Cheok et al, 2002b;Cooper et al, 2004;Charles et al, 2004;Matysczok et al, 2004;Romero et al, 2004;Avery et al, 2005;Barakonyi et al, 2005;Bimber et al, 2005b;Benford et al, 2006;Brandt, 2006;Lam et al, 2006;Park et al, 2006;Peitz et al, 2006;Rashid et al, 2006). No es de extrañar el creciente interés que despiertan estas aplicaciones en este campo; basta con tener en cuenta la gran industria del videojuego que existe en la actualidad con los sistemas de realidad virtual, y las grandes posibilidades que puede ofrecer la realidad aumentada como tecnología novedosa.…”

Section: Arteunclassified

“…Recientemente, y gracias a los avances en la inteligencia artificial, han surgido algunas aplicaciones de realidad mezclada en el ámbito del entretenimiento en las que se ha incluido la interacción con personajes virtuales y narrativas no lineales, como en (Charles et al, 2004;Dow et al, 2006). La narrativa interactiva consiste en la generación en tiempo real de acciones narrativas que toman en consideración las consecuencias de las intervenciones del usuario, mediante la regeneración de la historia a medida que el entorno se modifica por las acciones del usuario, basándose para ello en técnicas de inteligencia artificial.…”

unclassified

“…La narrativa interactiva consiste en la generación en tiempo real de acciones narrativas que toman en consideración las consecuencias de las intervenciones del usuario, mediante la regeneración de la historia a medida que el entorno se modifica por las acciones del usuario, basándose para ello en técnicas de inteligencia artificial. En (Charles et al, 2004) el escenario narrativo está basado en una aventura de James Bond, en la que el usuario juega el papel activo del Profesor (Figura 153). Este sistema soporta tres componentes de actuación: la actitud del protagonista mediante el reconocimiento de sus gestos; palabras habladas al conversar con los personajes virtuales, mediante el uso de sistemas de reconocimiento del habla; interacción física del usuario sobre objetos o personajes virtuales.…”

unclassified

See 1 more Smart Citation

Entornos multimedia de realidad aumentada en el campo del arte.

Portalés¹

View full text Add to dashboard Cite

RESUM DE LA TESI La relació entre la ciència i l'art ha tingut al llarg de la història moments de proximitat o distanciament, i s'ha arribant a entendre-les com dues cultures diferents 2 , però també s'han produït situacions interdisciplinàries de col·laboració i intercanvi que en els nostres dies mantenen com a nexe comú la cultura digital i l'ús de l'ordinador. Segons (Berenguer, 2002), des de l'aparició de l'ordinador, científics i artistes han trobat un espai comú de treball i d'entesa. Mitjançant l'ús de les noves tecnologies, la distància que separa ambdues disciplines és cada vegada més curta. En aquesta tesi, el títol de la qual és Entorns multimèdia de realitat augmentada en el camp de l'art, es presenta una investigació teoricopràctica de la tecnologia de realitat augmentada aplicada a l'art i a camps afins a aquest, com ara l'entreteniment educatiu (edutainment). La investigació s'ha realitzat en dos blocs: en el primer es tracta de la tecnologia des de distints punts de vista que s'han considerat rellevants per a entendre-la i per al mateix funcionament d'aquesta, i en el segon es presenta un total de sis assajos que constitueixen la part pràctica d'aquesta tesi.El primer capítol del primer bloc comença amb una definició de la tecnologia de realitat augmentada (RA) i les tecnologies afins, a partir de les aportades per diversos autors en períodes distints; es pot veure com el terme ha evolucionat per a abraçar un camp molt més extens, en el qual s'inclouen dispositius multimodals; s'enumera un seguit 2 En 1956 C. P. Snow ja va asenyalar el problema en el seu article -The Two Cultures‖ publicat en la revista anglesa New Statesman. ENTORNOS MULTIMEDIA DE REALIDAD AUMENTADA EN EL CAMPO DEL ARTEde característiques que defineixen aquesta tecnologia, a partir de les quals es posen les bases del concepte considerat en aquesta tesi. També es presenta una evolució històrica des de principis del segle XX de les tecnologies pròximes que han portat a l'actualitat de la RA, així com diversos exemples d'aplicacions i desenvolupaments portats a terme per investigadors en diferents camps, a banda de l'art, com són l'educació, l'entreteniment, l'enginyeria o la medicina, amb la finalitat de descriure la utilitat d'aquesta tecnologia nova i aportar-ne una visió general. En els capítols següents es parla de les relacions espacials entre l'entorn físic 3D i la imatge capturada per la càmera en temps real, així com de les transformacions que relacionen aquest entorn amb l'homòleg virtual, elements que serveixen per a construir una escena augmentada que siga consistent, és a dir, versemblant. També s'ha fet una revisió bibliogràfica dels dispositius fonamentals en aquesta tecnologia: els sensors i els displays. Amb aquesta finalitat es mostra una classificació dels dispositius esmentats, aportant diversos exemples tant de desenvolupaments com d'aplicacions de RA que en fan ús. S'ha considerat també rellevant referir-se als diversos programes que hi ha en l'actualitat per a la generació d'escenes de realitat augmentada, ce...

show abstract

“…• Según el tipo de colaboración establecida (para sistemas colaborativos), podemos distinguir entre sistemas presenciales o cara a cara (face--to--face) vs. remotos (remote). En las • A parte de estos conceptos, en (Mackay, 1998) • Entretenimiento: Dentro del campo del entretenimiento existe una gran diversidad de sistemas de realidad aumentada.Podemos encontrar algunos ejemplos en (Bobick et al, 1999;Badiqué et al, 2002;Cheok et al, 2002;Charles et al, 2004;Cooper et al, 2004;Matysczok et al, 2004;Romero et al, 2004;Avery et al, 2005;Barakonyi et al, 2005;Bimber et al, 2005a;Benford et al, 2006;Brandt, 2006;Lam et al, 2006;Park et al, 2006;Peitz et al, 2006;Rashid et al, 2006). No es de extrañar el creciente interés que despiertan estas aplicaciones en este campo; basta con tener en cuenta la gran industria del videojuego que existe en la actualidad con los sistemas de realidad virtual, y las grandes posibilidades que Electroacústica: la expresión del gesto sonoro 194 puede ofrecer la realidad aumentada como tecnología novedosa.…”

unclassified

Electroacústica: la expresión del gesto sonoro

Cejudo¹,

David²

View full text Add to dashboard Cite

RESUMEN DE LA TESISEl vínculo que existe entre la percepción sonora y la visual en entornos de creación musical ha constituido uno de los argumentos más recurrentes y naturales en cuanto a comprensión, análisis y valoración estética de una obra musical. Desde el origen de la más remota producción sonora se encuentra el factor humano y por tanto, la expresión gestual que de esta se desprende. Desde la aparición de los primeros dispositivos que permitieron el desarrollo de la música producida mediante medios mecánicos, la figura del intérprete pasó de ser una prima donna a un mero tramoyista entre bambalinas. En el caso preciso de la música electroacústica que no está asociada a este componente interpretativo humano -a través de instrumentos acústicos o mediante intervenciones visuales asociadas - el oyente se encuentra en un nuevo estadio de percepción y cognición. Parámetros referentes al espacio, manipulación sensorial y cognitiva y gestualidad interpretativa, a través de dispositivos de registro e interacción, como sensores, establecen un marco renovado en los planteamientos de expresión musical. En cualquier caso y dada la multidisciplinariedad a Electroacústica: la expresión del gesto sonoro 4 la que viene asociado el arte que tiene que ver con el sonido en el último siglo, sigue habiendo correspondencias sonido--imagen que propician una semántica renovada respecto a la herencia musical y la interpretación con los instrumentos acústicos decimonónicos que aún conforman la mayor parte de plantillas orquestales.En esta tesis, cuyo título es 'Electoacústica: la expresión del gesto sonoro' se exploran los nuevos brotes que han salido durante los últimos 70 años a raíz de la aparición de los primeros experimentos de Pierre Schaefer en el Groupe de Recherche de Musique Concrète (GRMC) en la radio francesa y la fundación del Estudio de Música Electrónica de la radio de Colonia en la década de los 50 donde Karlheinz Stockhausen exploró las posibilidades de expresión sonora a partir de sistemas de producción electrónica. La investigación se ha realizado en 6 partes: en el ensayo O se presenta el contexto teórico, que definirá los caminos por los que discurrirá la investigación y en el que se acotarán los conceptos y planteamientos que servirán como cimiento en los siguientes 5 capítulos. En este tema se hace una panorámica en la definición y la terminología de este lenguaje así como una revisión de los principales descubrimientos y avances que han propiciado el estadio actual de la música electroacústica. Los siguientes 5 capítulos conforman la parte práctica. En cada uno de ellos se aborda un planteamiento específico y concreto que permite investigar y extraer conclusiones en los diferentes perfiles que plantea el título de esta tesis.En el primer ensayo titulado Contrapunto Acusmático en Vivo se aborda el diseño y composición de una obra para soporte grabado (cinta) de tipo abierto en el que se cuestiona la flexibilidad y adaptabilidad de los medios fijados (fixed media) y el análisis de Resumen de la tesis 5 paráme...

show abstract

Compelling experiences in mixed reality interactive storytelling

Cited by 21 publications

References 20 publications

An affective model of user experience for interactive art

An affective model of user experience for interactive art

Entornos multimedia de realidad aumentada en el campo del arte.

Electroacústica: la expresión del gesto sonoro

Contact Info

Product

Resources

About