Οι κρυφές δυνάμεις και οι συρόμενες οθόνες ξεγελούν τις αισθήσεις για να κάνουν το VR να αισθάνεται πιο αληθινό

Το επόμενο μεγάλο

Το πράγμα στο VR μπορεί να μην είναι υψηλότερη ανάλυση ή πιο καθηλωτικός ήχος, αλλά μια εμπειρία επαυξημένη από φυσικές αισθήσεις ή κινούμενα μέρη που ξεγελούν τις αισθήσεις σας και μπερδεύουν το εικονικό με την πραγματικότητα. Ερευνητές στο

SIGGRAPH

από το

Meta

έως τις διεθνείς φοιτητικές ομάδες, επισήμαναν τις τελευταίες προσπάθειές τους να κάνουν το VR και το AR πιο πειστικά.

Το συνέδριο για τα γραφικά υπολογιστών και τους σχετικούς τομείς πραγματοποιείται αυτή την εβδομάδα στο Λος Άντζελες και όλοι από το Meta έως την Epic μέχρι τα πανεπιστήμια και τα κινηματογραφικά στούντιο παρουσίαζαν τα προϊόντα τους.

Είναι το 50ο SIGGRAPH, επομένως ένας δυσανάλογος αριθμός της εκδήλωσης αφιερώθηκε σε αναδρομικά και άλλα παρόμοια, αν και η αίθουσα της έκθεσης ήταν γεμάτη από το πιο πρόσφατο VFX, την εικονική παραγωγή και το υλικό και το λογισμικό λήψης κίνησης.

Στην αίθουσα των «αναδυόμενων τεχνολογιών», ή στο σπήλαιο όπως το σκοτεινό δωμάτιο με μαύρο ντραπέ, δεκάδες πειραματικές προσεγγίσεις στα σύνορα του VR έμοιαζαν να περιγράφουν την κατάσταση της τέχνης: οπτικά εντυπωσιακές, αλλά με τη βύθιση να βασίζεται σχεδόν εξ ολοκλήρου σε αυτό. Τι θα μπορούσε να γίνει για να γίνει πιο ολοκληρωμένη η ψευδαίσθηση; Για πολλούς, η απάντηση δεν βρίσκεται στον εικονικό κόσμο με καλύτερο ήχο ή γραφικά, αλλά στον φυσικό κόσμο.

Το σετ μικροφώνου-ακουστικού VR της Meta αλλάζει την οπτική σας, κυριολεκτικά

Η Meta είχε μεγάλη παρουσία στην αίθουσα, με την πρώτη της επίδειξη

δύο πειραματικά ακουστικά, που ονομάστηκαν Butterscotch και Flamera

. Το Flamera υιοθετεί μια ενδιαφέρουσα προσέγγιση στο βίντεο “διέλευσης”, αλλά είναι η “varifocal” προσέγγιση της Butterscotch που αλλάζει πραγματικά τα πράγματα στον εικονικό κόσμο.

Τα ακουστικά εικονικής πραγματικότητας περιλαμβάνουν γενικά ένα ζευγάρι μικροσκοπικών οθονών υψηλής ανάλυσης στερεωμένες σε μια στοίβα φακών που τους κάνουν να φαίνονται να γεμίζουν το οπτικό πεδίο του χρήστη. Αυτό λειτουργεί αρκετά καλά, όπως μπορεί να επιβεβαιώσει οποιοσδήποτε έχει δοκιμάσει ένα πρόσφατο ακουστικό. Αλλά υπάρχει ένα μειονέκτημα στο απλό γεγονός ότι η μετακίνηση των πραγμάτων πιο κοντά δεν σας επιτρέπει πραγματικά να τα δείτε καλύτερα. Παραμένουν στην ίδια ανάλυση, και ενώ μπορεί να μπορείτε να διακρίνετε λίγο περισσότερο, δεν είναι σαν να σηκώνετε ένα αντικείμενο και να το επιθεωρείτε προσεκτικά στην πραγματική ζωή.

Το πρωτότυπο Butterscotch της Meta, για το οποίο δοκίμασα και έψαξα τους ερευνητές, αναπαράγει αυτή την εμπειρία παρακολουθώντας το βλέμμα σου μέσα στο ακουστικό και όταν το βλέμμα σου πέφτει σε κάτι πιο κοντά,

σωματικά ολισθαίνοντας

οι οθόνες πιο κοντά στα μάτια σας. Το αποτέλεσμα είναι συγκλονιστικό για όποιον έχει συνηθίσει στην κακή προσέγγιση του «κοιτάζοντας από κοντά» κάτι σε VR.

Η οθόνη κινείται μόνο σε ένα εύρος περίπου 14 χιλιοστών, μου είπε ένας ερευνητής στο περίπτερο Meta, και αυτό είναι υπεραρκετό σε αυτό το εύρος όχι μόνο για να δημιουργήσετε μια πιο καθαρή εικόνα του αντικειμένου από κοντά — εντυπωσιακά καθαρή, πρέπει να πω — αλλά για να επιτρέψει στα μάτια να αλλάξουν πιο φυσικά την «κατασκευή» και τη «σύγκλισή» τους, τους τρόπους με τους οποίους φυσικά παρακολουθούν και εστιάζουν σε αντικείμενα.

Αν και η διαδικασία λειτούργησε εξαιρετικά καλά για μένα, απέτυχε τελείως για έναν συμμετέχοντα (που υποπτεύομαι ότι ήταν ανώτερος στο τμήμα VR της

Sony

, αλλά η εμπειρία του φαινόταν αληθινή) που είπε ότι η οπτική προσέγγιση ήταν σε αντίθεση με τη δική του διαταραχή όρασης. και η ενεργοποίηση της λειτουργίας έκανε τα πάντα να φαίνονται χειρότερα. Είναι ένα πείραμα, τελικά, και άλλοι με τους οποίους μίλησα το βρήκαν πιο συναρπαστικό. Δυστυχώς, οι εναλλασσόμενες οθόνες μπορεί να είναι κάπως μη πρακτικές σε ένα καταναλωτικό μοντέλο, καθιστώντας το χαρακτηριστικό απίθανο να έρθει σύντομα στο Quest.

Ρουμπλ (και πέφτουν) πακέτα

Αλλού στο πάτωμα επίδειξης, άλλοι δοκιμάζουν πολύ πιο περίεργες φυσικές μεθόδους για να ξεγελάσουν την αντίληψή σας.

Ένα από ερευνητές της Sony

φέρνει την έννοια του rumble

pack

στα άκρα: ένας ελεγκτής τοποθετημένος σε ένα είδος σκυτάλης, μέσα στο οποίο υπάρχει ένα βάρος που μπορεί να οδηγηθεί πάνω-κάτω από κινητήρες για να αλλάξει το κέντρο βάρους ή να προσομοιώσει την κίνηση.

Σύμφωνα με τα άλλα απτικά πειράματα που δοκίμασα, δεν φαίνεται πολύ έξω από το πλαίσιο του VR, αλλά όταν συνδυάζεται με ένα οπτικό ερέθισμα είναι πολύ πειστικό. Ένα σετ επιδείξεων ταχείας πυρκαγιάς με έβαλε αρχικά να ανοίξω μια εικονική ομπρέλα — προφανώς όχι ένα παιχνίδι που θα παίζατε για πολύ, αλλά ένας εξαιρετικός τρόπος για να δείξετε πώς μια αλλαγή στο κέντρο βάρους μπορεί να κάνει ένα προσποιούμενο αντικείμενο να φαίνεται πραγματικό. Η κίνηση του ανοίγματος της ομπρέλας ήταν σωστή και μετά το βάρος (στο πιο απομακρυσμένο όριο) το έκανε να νιώθει ότι η μάζα είχε πράγματι μετακινηθεί στο άκρο της λαβής.

Στη συνέχεια, μια δεύτερη σκυτάλη επικολλήθηκε στην πρώτη κάθετα, σχηματίζοντας ένα σχήμα σαν όπλο, και πράγματι η επίδειξη με έκανε να ανατινάξω εξωγήινους με κυνηγετικό όπλο και πιστόλι, καθένας από τους οποίους είχε μια ξεχωριστή «αίσθηση» λόγω του τρόπου με τον οποίο προγραμμάτιζαν το βάρη για μετακίνηση και προσομοίωση ανάκρουσης και επαναφόρτωσης. Τελευταία, χρησιμοποίησα ένα εικονικό σπαθί φωτός σε ένα κοντινό τέρας, το οποίο παρείχε απτική ανάδραση όταν η δέσμη έρχεται σε επαφή. Ο ερευνητής με τον οποίο μίλησα είπε ότι δεν υπάρχουν σχέδια για εμπορευματοποίηση του, αλλά ότι η ανταπόκριση ήταν πολύ θετική και εργάζονται σε βελτιώσεις και νέες εφαρμογές.

Μια ασυνήθιστη και έξυπνη αντίληψη αυτής της ιδέας της αλλαγής βαρών ήταν

SomatoShift

, που εκτίθεται σε περίπτερο από ερευνητές του Πανεπιστημίου του Τόκιο. Εκεί μου τοποθέτησαν ένα ηλεκτρικό βραχιολάκι, στο οποίο δύο περιστρεφόμενοι γύροι αντιπαρατίθενται ο ένας στον άλλον, αλλά μπορούσαν να αλλάξουν τον προσανατολισμό τους ώστε να παράγουν μια δύναμη που είτε αντίθετο είτε επιτάχυνε την κίνηση του χεριού.

Συντελεστές εικόνας:

Devin Coldewey / TechCrunch

Ο μηχανισμός είναι λίγο δύσκολο να γίνει κατανοητός, αλλά τα περιστρεφόμενα βάρη όπως αυτό ουσιαστικά θέλουν να παραμείνουν «όρθια» και αλλάζοντας τον προσανατολισμό τους σε σχέση με τη βαρύτητα ή το αντικείμενο στο οποίο είναι τοποθετημένα, αυτή η τάση να διορθώνονται μόνα τους μπορεί να παράγει αρκετά ακριβή διανύσματα δύναμης. Η τεχνολογία χρησιμοποιείται σε δορυφόρους εδώ και δεκαετίες, όπου είναι γνωστοί ως «τροχοί αντίδρασης», και η αρχή λειτούργησε και εδώ, καθυστερώντας ή βοηθώντας τις κινήσεις του χεριού μου καθώς κινούνταν ανάμεσα σε δύο κουμπιά. Οι δυνάμεις που εμπλέκονται είναι μικρές αλλά αντιληπτές και μπορεί κανείς να φανταστεί την έξυπνη χρήση του γυροσκοπίου που δημιουργεί κάθε είδους λεπτές αλλά πειστικές ωθήσεις και έλξεις.

Η ιδέα μεταφέρθηκε σε ένα τοπικό άκρο λίγα μέτρα μακριά στο περίπτερο του Πανεπιστημίου του Σικάγο, όπου οι παρευρισκόμενοι είχαν ένα μεγάλο μηχανοκίνητο σακίδιο πλάτης με μηχανοκίνητο βάρος που μπορούσε να κινηθεί γρήγορα πάνω-κάτω. Αυτό χρησιμοποιήθηκε για να παρέχει την ψευδαίσθηση ενός υψηλότερου ή χαμηλότερου άλματος, καθώς μετατοπίζοντας το βάρος την κατάλληλη στιγμή φαίνεται να ελαφρύνεται ή να επιταχύνεται προς τα πάνω ή εναλλάξ να σπρώχνεται προς τα κάτω — εάν γίνει λάθος στο σχετικό παιχνίδι άλματος.

Οι συνάδελφοί μας στο Engadget

έγραψε τα στοιχεία της τεχνολογίας πριν από το ντεμπούτο της την περασμένη εβδομάδα.

Ενώ ο ογκώδης μηχανισμός και η στενή θήκη χρήσης το χαρακτηρίζουν όπως τα άλλα ως απόδειξη της ιδέας, δείχνει ότι η αντίληψη της σωματικής κίνησης, όχι μόνο ενός αντικειμένου ή ενός εξαρτήματος, μπορεί να επηρεαστεί από τη συνετή χρήση βίας.

Θεωρία χορδών

Όσον αφορά την αίσθηση του να κρατάς πράγματα, οι τρέχοντες ελεγκτές VR επίσης υστερούν. Ενώ οι δυνατότητες παρακολούθησης κίνησης των τελευταίων ακουστικών Quest και

PlayStation

VR2 δεν είναι τίποτα λιγότερο από εκπληκτικές, ποτέ δεν αισθάνεται κανείς ότι αλληλεπιδρά πραγματικά με τα αντικείμενα σε ένα εικονικό περιβάλλον. Η ομάδα του Ινστιτούτου Τεχνολογίας του Τόκιο δημιούργησε μια έξυπνη – και ξεκαρδιστικά αστεία – μέθοδο

προσομοίωση της αίσθησης να αγγίζετε ή να κρατάτε ένα αντικείμενο με τα δάχτυλά σας

.

Ο χρήστης έχει τέσσερις μικροσκοπικούς δακτυλίους σε κάθε χέρι, έναν για κάθε δάχτυλο εκτός από το ροζ. Κάθε δακτύλιος είναι εφοδιασμένο με ένα μικροσκοπικό μοτέρ στην κορυφή, και από κάθε κινητήρα εξαρτάται ένας μικρός βρόχος κλωστής, ο οποίος τοποθετείται γύρω από το μαξιλάρι κάθε άκρου δακτύλου. Οι θέσεις των χεριών και των δακτύλων παρακολουθούνται με έναν αισθητήρα βάθους συνδεδεμένο (μόλις μόλις) στο ακουστικό.

Σε μια προσομοίωση VR, μια επιφάνεια εργασίας καλύπτεται με διάφορους κύβους και άλλα σχήματα. Όταν ο ιχνηλάτης ανιχνεύσει ότι το εικονικό σας χέρι τέμνεται με την άκρη ενός εικονικού μπλοκ, ο κινητήρας περιστρέφεται λίγο και τραβιέται στον βρόχο — κάτι που μοιάζει πολύ με κάτι που αγγίζει τα μαξιλαράκια των δακτύλων σας!

Συντελεστές εικόνας:

Devin Coldewey / TechCrunch

Όλα ακούγονται πολύ φανταχτερά, και σίγουρα ήταν — αλλά η βασική ιδέα και η αίσθηση άξιζε να βιώσετε και η ρύθμιση σαφώς δεν ήταν πολύ ακριβή. Τα απτικά γάντια που μπορούν να προσομοιώσουν την αντίσταση είναι λίγα και αρκετά περίπλοκα στην εκκίνηση (στην πραγματικότητα ένας άλλος ερευνητής που ήταν παρών εργάστηκε στα

αυτή η συσκευή

, μια πιο σύνθετη εκδοχή μιας παρόμοιας αρχής). Μια εκλεπτυσμένη έκδοση αυτού του συστήματος μπορεί να κατασκευαστεί για λιγότερο από $100 και να παρέχει μια βασική εμπειρία που εξακολουθεί να είναι μεταμορφωτική.

Το SIGGRAPH και ειδικά αυτή η αίθουσα ήταν γεμάτη από αυτές και περισσότερες εμπειρίες που οδήγησαν τη γραμμή μεταξύ του φυσικού και του ψηφιακού. Ενώ το VR δεν έχει ακόμη απογειωθεί στην επικρατούσα τάση, πολλοί το θεωρούν ότι σημαίνει ότι θα πρέπει να διπλασιάσουν τις προσπάθειες για να το βελτιώσουν και να το επεκτείνουν, αντί να το εγκαταλείψουν ως νεκρή πλατφόρμα.

Το συνέδριο παρουσίασε επίσης μεγάλη αλληλεπικάλυψη μεταξύ

gaming

, VFX, τέχνης, εικονικής παραγωγής και πολλών άλλων τομέων – οι εγκέφαλοι πίσω από αυτά τα πειράματα και τα πιο καθιερωμένα προϊόντα στον όροφο της έκθεσης αισθάνονται ξεκάθαρα ότι η βιομηχανία συγκλίνει ενώ διαφοροποιείται, και Η πολυτροπική, πολυμέτρια, πολυαισθητηριακή εμπειρία είναι το μέλλον.

Αλλά δεν είναι αναπόφευκτο – κάποιος πρέπει να τα καταφέρει. Άρα πιάνουν δουλειά.