Kinecthesis: το ταξίδι στην Ιθάκη

Το Kinecthesis είναι μια διαδραστική οπτικοακουστική εγκατάσταση παραγωγής δυναμικού κειμένου και ήχου, που διερευνά τη σύμπραξη ανθρώπου και μηχανής. Το όνομα του έργου προκύπτει από τον αισθητήρα κίνησης Kinect και τις έννοιες Thesis (θέμα) και Ecthesis (έκθεση), υποδηλώνοντας τη σύνδεση σώματος, λόγου και δημόσιας παρουσίας.

Με κεντρικό κείμενο το ποίημα «Ιθάκη» του Κ.Π. Καβάφη, το έργο εφαρμόζει τη μέθοδο cut-up μέσω αλγορίθμων Generative Art σε περιβάλλον Processing. Η μηχανή αποδομεί το αρχικό κείμενο, κατηγοριοποιώντας το γραμματικά με τη χρήση Τεχνητής Νοημοσύνης, και το ανασυνθέτει σε πραγματικό χρόνο εισάγοντας το στοιχείο της τυχαιότητας,  προσφέροντας ένα νέο ποίημα σε κάθε αλληλεπίδραση.

Η εγκατάσταση λειτουργεί μέσω του αισθητήρα κίνησης Kinect, ο οποίος ανιχνεύει τους επισκέπτες σε απόσταση 40–80 εκατοστών και μετατρέπει την παρουσία τους σε ψηφιακή σιλουέτα από λευκά σημεία (dots), μέσα σε ένα οπτικό μεταβαλλόμενο περιβάλλον Perlin Noise Flow Field. Όταν το περίγραμμα της φιγούρας αγγίζει τις αιωρούμενες λέξεις, ενεργοποιείται η ηχητική τους αναπαραγωγή μέσω text-to-speech και οι λέξεις σταδιακά σβήνουν. Το σύστημα επανεκκινείται αυτόματα σε περίπτωση απουσίας κίνησης για περισσότερα από πέντε δευτερόλεπτα ή μόλις σβηστούν όλες οι λέξεις από την οθόνη.

Το ηχητικό περιβάλλον συντίθεται από τέσσερα επίπεδα. Tο «θαλάσσιο» υπόστρωμα της Ιθάκης, τον glitch ήχο της μηχανικής αναζήτησης, το μελωδικό «κλείδωμα» ενός τσέλου και τη φωνητική απόδοση των λέξεων που ξεκλειδώνουν μέσω της κίνησης. Στο Kinecthesis, η ανάγνωση μετατρέπεται από παθητική σε σωματική διαδικασία, αναδεικνύοντας τη σημασία της διαδρομής έναντι του προορισμού.