Η μηχανική μάθηση στην ηχοποίηση εκφραστικής χειρονομίας με τη χρήση στοχαστικών μοντέλων

Περίληψη

Ευρύτερο αντικείμενο της παρούσας διδακτορικής διατριβής αποτελεί η διερεύνηση της χειρονομιακής τεχνογνωσίας του μουσικού και συγκεκριμένα του πιανίστα, η οποία περιλαμβάνει την απόκτηση όχι μόνο θεωρητικών γνώσεων αλλά και πρακτικών δεξιοτήτων. Στη συγκεκριμένη διατριβή, έμφαση δίνεται κυρίως στην εκφραστική χειρονομία και στις διακυμάνσεις της. Η αναγνώριση της χειρονομίας επιτυγχάνεται με τη χρήση αλγορίθμων μηχανικής μάθησης και τεχνολογιών αναγνώρισης της κίνησης. Σύμφωνα με τη βιβλιογραφική επισκόπηση, αρκετές έρευνες που έχουν διεξαχθεί στοχεύουν όχι μόνο στην αναγνώριση της χειρονομίας που εκτελείται από το χρήστη αλλά και στην ηχοποίηση αυτής. Μια αδυναμία όμως που αναδύεται, έγκειται στο ότι οι υπάρχουσες μεθοδολογίες αδυνατούν να λάβουν υπόψη τους πιθανές εκφραστικές διακυμάνσεις και μεταβολές που μπορεί να συμβούν κατά τη διάρκεια εκτέλεσης της εισερχόμενης χειρονομίας του χρήστη σε σχέση με τη χειρονομία πρότυπο του ειδικού. Αυτό έχει ως συνέπεια η αναγνώριση να μην είναι ...
περισσότερα

Περίληψη σε άλλη γλώσσα

A wider scope of this thesis is to investigate the gestural know-how of a musician and specifically of a pianist, which includes not only the acquisition of theoretical knowledge but also that of practical skills. Emphasis is given, in this thesis, in the expressive gesture and its variations. The gesture recognition is accomplished by using machine-learning algorithms and motion capture technologies. According to the literature review, several research approaches have been conducted aiming not only at the recognition of the performed gesture but also at the sonification of the gesture. However, a weakness that emerges is that the existing methodologies fail to take into account expressive variations that may occur during the performance of the incoming gesture with respect to the template gesture. This results in the recognition not being correct throughout the performance of the expressive gesture and in overlaps occurring between the different classes of classification. As a consequ ...
περισσότερα

Όλα τα τεκμήρια στο ΕΑΔΔ προστατεύονται από πνευματικά δικαιώματα.

DOI
10.12681/eadd/42382
Διεύθυνση Handle