Using multi-dimensional correlation for matching and alignment of MoCap and video signals

Buccoli, Michele; Giorgi, Bruno Di; Zanoni, Massimiliano; Antonacci, Fabio; Sarti, Augusto

doi:10.1109/mmsp.2017.8122222

Cited by 6 publications

(3 citation statements)

References 17 publications

Supporting

Mentioning

Contrasting

Order By: Relevance

“…They are measures of the complexity of dynamical systems and the randomness of the observations. The correlation dimension was applied for instance in the following studies: analysis of heart rate variability in patients with dilated cardiomyopathy (Carvajal et al, 2005 ), assessment of EEG signals of patients with epileptic seizures (Silva et al, 1999 ), predicting bispectral index based on EEG (Ahmadi et al, 2010 ), measuring dynamics of dyad synchrony for mocap data (Buccoli et al, 2017 ) and decoding hand movements carried out for EMG signals (Namazi and Jafari, 2019 ). There are also numerous applications of approximate and sample entropies in the description of biological time-series data.…”

Section: Introductionmentioning

confidence: 99%

Correlation dimension and entropy in the assessment of sex differences based on human gait data

Świtoński,

Josiński,

Polański

et al. 2024

Front. Hum. Neurosci.

View full text Add to dashboard Cite

IntroductionIt is proved that there are differences between gait performed by females and males, which appear in movements of selected body parts. Despite numerous state-of-the-art studies related to the discriminative analysis of motion capture data, the question of whether measures of signal complexity and uncertainty can extract valuable features for the problem of sex distinction still remains open. It is the subject of the paper.MethodsCorrelation dimension, as well as approximate and sample entropies, are selected to describe motion data. In the numerical experiments, the collected dataset with 884 samples of 25 females and 30 males was used. The measurements took place in the Human Motion Laboratory (HML), equipped with a highly precise motion capture system. Two variants of data representation were investigated-time series that contain joint rotations of taken skeleton model as well as positions of the markers attached to the human body. Finally, a comparative analysis between the populations of females and males using descriptive statistics, non-parametric estimation, and statistical hypotheses verification was carried out.ResultsThere are statistically significant sex differences extracted by the taken measures. In general, the movements of lower limbs result in greater values of correlation dimension and entropies for females, while selected upper body parts play a similar role for males. The dissimilarities are mainly observed in hip, ankle, shoulder, and head movements.DiscussionCorrelation dimension and entropy measures provide robust and explainable features of motion capture data with a valuable description of the human locomotion system. Thus, beyond the importance of discovered differences between females and males, their interpretation and understanding are also known.

show abstract

Section: Introductionmentioning

confidence: 99%

Correlation dimension and entropy in the assessment of sex differences based on human gait data

Świtoński,

Josiński,

Polański

et al. 2024

Front. Hum. Neurosci.

View full text Add to dashboard Cite

show abstract

“…A viewer has been integrated so as to allow the synchronized playback of a video, as well as its corresponding motion capture file. The synchronization of the two formats [5], as well as the development of the 3D visualizer, falls out of the scope of this paper and is not reported here.…”

Section: Introductionmentioning

confidence: 99%

A Web-based system for annotation of dance multimodal recordings by dance practitioners and experts

Raheb

Kasomoulis

Katifori

et al. 2018

Proceedings of the 5th International Conference on Movement and Computing

View full text Add to dashboard Cite

Recent advances in technologies for capturing, analyzing and visualizing movement can revolutionize the way we create, practice, learn dance, and transmit bodily knowledge. The need for creating meaningful, searchable and re-usable libraries of motion capture and video movement segments can only be fulfilled through the collaboration of both technologists and dance practitioners. Towards this direction, manual annotations of these segments by dance experts can play a four-fold role: a) enrich movement libraries with expert knowledge, b) create "groundtruth" datasets for comparing the results of automated algorithms, c) fertilize a dialogue across dance genres and disciplines on movement analysis and conceptualization, and d) raise questions on the subjectivity and diversity of characterizing movement segments using verbal descriptions. The web-based application presented in this work, is an archival system with, browsing, searching, visualization, personalization and textual annotation functionalities. Its main objective is to provide access to a repository of multimodal dance recordings including motion capture data, video, and audio, with the aim to also support dance education. The tool has been designed and developed within an interdisciplinary project, following a user-centered, iterative design approach involving dance researchers and practitioners of four different dance genres.

show abstract

“…A player has been developed so as to allow the synchronized playback of a video, as well as its corresponding motion capture file. The synchronisation of the two types of formats [38], as well as the development of the 3D visualizer, falls out of the scope of this thesis and is not reported here.…”

Section: A Web-based System For Annotation Of Dance Multimodal Recordings By Dance Practitioners and Expertsmentioning

confidence: 99%

Conceptual and experiential dance languages

Raheb¹,

Ράχεμπ²

View full text Add to dashboard Cite

Η κίνηση και ο χορός αποτελούν ένα αναπόσπαστο κομμάτι της ανθρώπινης κοινωνικής και καλλιτεχνικής έκφρασης, σε κάθε ιστορική περίοδο και γεωγραφικό πλάτος. Tα σύγχρονα ψηφιακά μέσα προσφέρουν σημαντικές δυνατότητες καταγραφής της κίνησης του σώματος ανοίγοντας νέους δρόμους στη μελέτη και έρευνα του χορού, τη διατήρηση της άυλης πολιτιστικης κληρονομιάς αλλά και την εκπαιδευτική και τη δημιουργική διαδικασία. Ωστόσο, όσο τα ψηφιακά δεδομένα που αφορούν στην κίνηση όπως βίντεο, αρχεία σύλληψης κίνησης κ.α. αυξάνονται, δημιουργείται η έντονη ανάγκη για μεθοδολογικά πλαίσια και τεχνολογικά εργαλεία τα οποία θα επιτρέπουν την αναπαράσταση της κίνησης και τη διαχείριση σχετικών αρχείων. Στόχος είναι τα δεδομένα αυτά να είναι αναζητήσιμα, προσβάσιμα και επαναχρησιμοποιήσιμα. Παράλληλα, δημιουργείται η ανάγκη για σχεδιαστικά πλαίσια και διαγράμματα ροής για την ανάπτυξη διεπαφών με απώτερο σκοπό να έχουν νόημα τόσο στης έρευνα και όσο και στην πρακτική του χορού.Το ερώτημα που πραγματεύεται η παρούσα διατριβή επικεντρώνεται στο πώς μπορούμε να αναπαραστήσουμε την κίνηση, έτσι ώστε να επιτυγχάνεται αποτελεσματική επικοινωνία τόσο των Εννοιολογικών όσο και των Βιωματικών γλωσσών του χορού, μέσα από την ψηφιακή διάδραση. Η δυσκολία στο να απαντήσουμε στην παραπάνω ερώτημα έγκειται αφενός στην πολυπλοκότητα και πολυμορφία της ανθρώπινης κίνησης αλλά και του ορισμού του ίδιου του χορού. Αφετέρου οφείλεται στο γεγονός ότι ο χορός, βασίζεται κυρίως στην ενσώματη γνώση, και στην έλλειψη μιας ενιαίας γλώσσας αναπαράστασης, η οποία να χρησιμοποιείται στην πράξη τόσο από τους ερευνητές όσο και από τους δημιουργούς, εκπαιδευτικούς, και πρακτικούς του χορού. Στην παρούσα διατριβή, βασιζόμενοι σε υπάρχοντα συστήματα σημειογραφίας και χορολογικές μεθοδολογίες χορού, αλλά και μέσα από ένα συνεχή διάλογο με την χορευτική πράξη αναπτύξαμε ένα σημασιολογικό και μεθοδολογικό πλαίσιο το οποίο αφορά τόσο στις Εννοιολογικές όσο και στα Βιωματικές Γλώσσες του Χορού. Το πλαίσιο αυτό, αξιολογήθηκε μέσα από τη σχεδίαση, ανάπτυξη και χρήση εφαρμογών.Η συνεισφορά της διδακτορικής διατριβής συνοψίζεται στα εξής αποτελέσματα: oτην ανάπτυξη εννοιολογικών μοντέλων και οντολογιών για τη σημασιολογική αναπαράσταση της χορευτικής κίνησης. Για την ανάπτυξη του εννοιολογικού μοντέλου βασιζόμαστε στη χορολογική και μορφολογική ανάλυση του χορού, καθώς και στο σύστημα σημειογραφίας της κίνησης του Λάμπαν (Labanotation). Το σκέλος αυτό αφορά στη μελέτη των Εννοιολογικών γλωσσών του χορού.oτην επέκταση και εφαρμογή των σημασιολογικών αναπαραστάσεων για τη σχεδίαση και ανάπτυξη των διεπαφών χρήστη για την επισημείωση της κίνησης καθώς και την ανάπτυξη διαδικτυακών συστημάτων για τη διαχείριση πληροφορίας σχετικής με το χορό και την κίνηση. oτην ανάπτυξη διαγράμματος ροής καθώς και εφαρμογών που αφορούν στην ενσώματη διάδραση μέσω κίνησης. Με γνώμονα το αρχικό σημασιολογικό μοντέλο, την χαρτογράφηση της υπάρχουσας κατάστασης, προτείνεται διάγραμμα ροής για τη σχεδίαση αντίστοιχων εικονικών και διαδραστικών διεπαφών. Το διάγραμμα αυτό, αξιολογείται μέσα από τη σχεδίαση και ανάπτυξη διαδραστικών εφαρμογών για την πρακτική του χορού. Τα δύο τελευταία σκέλη εστιάζουν στη μελέτη των Βιωματικών γλωσσών του χορού.H διατριβή προτείνει τη μοντελοποίηση της κίνησης για την διατύπωση και επαύξηση μεταδεδομένων για το χορό, και καθώς και ιεραρχικά λεξιλόγια για την επισημείωση των κινήσεων και των χαρακτηριστικών τους, με σκοπό την αναζήτηση αρχείων με γνώση που αφορά απευθείας στην κίνηση. Το προτεινόμενο μοντέλο αναπαράστασης χρησιμοποιείται ως μεθοδολογία για την εξαγωγή πληροφορίας μέσα από σύνολα δεδομένων καταγραφής κίνησης. Τέλος τα μοντέλα αυτά εφαρμόζονται μέσα σε τέτοιες ψηφιακές διαδικτυακές εφαρμογές και εξετάζονται ως προς τη χρηστοκεντρική τους αξία για την κοινότητα των χορευτών, αλλά και διερευνάται η χρήση ψηφιακών μέσων για την υποστήριξη της έρευνας, εκπαίδευσης και της δημιουργικής διαδικασίας του χορού.

show abstract

Using multi-dimensional correlation for matching and alignment of MoCap and video signals

Cited by 6 publications

References 17 publications

Correlation dimension and entropy in the assessment of sex differences based on human gait data

Correlation dimension and entropy in the assessment of sex differences based on human gait data

A Web-based system for annotation of dance multimodal recordings by dance practitioners and experts

Conceptual and experiential dance languages

Contact Info

Product

Resources

About