- Η Epic Games εξαγοράζει τη Meshcapade και ανοίγει παρουσία στο Cyber Valley του Tübingen.
- Η τεχνολογία της Meshcapade ανακατασκευάζει ανθρώπινη κίνηση από απλό βίντεο, μειώνοντας χρόνο και κόστος παραγωγής.
- Στόχος είναι πιο ρεαλιστικοί ψηφιακοί άνθρωποι για Unreal Engine και MetaHuman, με έμφαση σε κίνηση και φυσική.
Η Epic Games απέκτησε τη Meshcapade και φέρνει ρεαλιστικούς ψηφιακούς ανθρώπους πιο κοντά στο real time
Η αμερικανική εταιρεία ανάπτυξης παιχνιδιών Epic Games (Fortnite) εξαγοράζει το start-up τεχνητής νοημοσύνης Meshcapade από το Tübingen.
Παράλληλα, η Epic ανοίγει δική της παρουσία στο Cyber Valley, ένα περιφερειακό ερευνητικό cluster για την τεχνητή νοημοσύνη.
Οι οικονομικές λεπτομέρειες της συναλλαγής δεν έγιναν γνωστές, σύμφωνα με τις διαθέσιμες πληροφορίες.
Το Cyber Valley είναι ένα οικοσύστημα έρευνας και επιχειρηματικότητας γύρω από την AI στην περιοχή της Βάδης-Βυρτεμβέργης, με επίκεντρο το Tübingen.
Τι είναι η Meshcapade και πώς δένει με Unreal Engine και MetaHuman
Η Meshcapade προέρχεται από το περιβάλλον του Max-Planck-Institut für Intelligente Systeme.
Στο εξής θα συνεργάζεται με το τμήμα AI research της Epic Games, πάνω σε τεχνολογίες για την Unreal Engine και το σύστημα avatars MetaHuman.
Στον πυρήνα των τεχνολογιών της Meshcapade βρίσκεται το λεγόμενο SMPL μοντέλο σώματος.
Πρόκειται για μια δεδομενοκεντρική 3D περιγραφή του ανθρώπινου σώματος, η οποία μπορεί να υποστηρίξει πιο πειστική κίνηση.
Το SMPL είναι μοντέλο 3D σώματος που βοηθά να περιγραφούν με συνέπεια σχήμα, στάση και κίνηση σε ψηφιακούς χαρακτήρες.
Από motion capture με στολές σε κίνηση από απλό βίντεο
Αντί να καταγράφονται οι ηθοποιοί με κλασικό motion capture μέσω στολών και αισθητήρων, η Meshcapade ανακατασκευάζει την κίνηση από συνηθισμένα βίντεο.
Ως βάση εκπαίδευσης χρησιμοποιούνται χιλιάδες 3D scans, ώστε να υπολογίζονται αυτόματα στάση, βάδισμα, χειρονομίες και σωματότυπος.
Έτσι, μπορεί να προκύψει ένας ψηφιακός άνθρωπος που είναι έτοιμος για animation, ακόμη και από ένα απλό βίντεο.
Που στοχεύει η τεχνολογία στην πράξη
Ο βασικός στόχος είναι η εξοικονόμηση χρόνου και κόστους στην παραγωγή.
Σε παιχνίδια, ταινίες και virtual production, οι πειστικοί χαρακτήρες αποτελούν από τα πιο απαιτητικά στάδια.
Η Meshcapade επιχειρεί να αυτοματοποιήσει μεγάλο μέρος της διαδικασίας, ώστε οι δημιουργοί να παίρνουν γρήγορα avatars που κινούνται φυσικά.
Φυσική αντί για κείμενο ή βίντεο
Ο Michael J. Black, διευθυντής στο Max-Planck-Institut für Intelligente Systeme, εξηγεί σε blog ότι μεγάλο μέρος της γενετικής AI εστιάζει σήμερα σε κείμενο, εικόνες ή βίντεο.
Ωστόσο, η φυσική πραγματικότητα είναι τρισδιάστατη, ενώ τα σύγχρονα παιχνίδια κατασκευάζονται σε 3D και τα ρομπότ δρουν επίσης σε 3D.
Άρα και οι πειστικοί ψηφιακοί άνθρωποι πρέπει να κινούνται σε μια 3D σκηνή με κανόνες κίνησης και φυσικής.
Σύμφωνα με τον ίδιο, η Meshcapade αναπτύσσει foundation models που κατανοούν δομή, κίνηση και φυσική αυτού του 3D κόσμου.
Στη συνέχεια, αυτή η γνώση μεταφράζεται σε άμεσα αξιοποιήσιμα εργαλεία για developers και δημιουργούς.
Ο ρόλος της Max-Planck-Gesellschaft και ο στόχος της Epic
Η Epic Games παρέχει ήδη μέσω της Unreal Engine τη τεχνική βάση για πολλά παιχνίδια και παραγωγές.
Το MetaHuman λειτουργεί ως «εργαλειοθήκη» για τη δημιουργία ψηφιακών χαρακτήρων, με ισχυρή έμφαση στην εμφάνιση.
Η Meshcapade έρχεται να συμπληρώσει την εικόνα με την σωματική αξιοπιστία, δηλαδή με το πώς ένα σώμα κινείται και στέκεται στον χώρο.
Η Max-Planck-Gesellschaft παραμένει εμπλεκόμενη μέσω του οργανισμού μεταφοράς τεχνολογίας της, σε ό,τι αφορά την αδειοδότηση.
Για την Epic, η εξαγορά σημαίνει και πρόσβαση σε ερευνητική τεχνογνωσία, ενώ για το Tübingen σημαίνει εγκατάσταση ενός μεγάλου παίκτη της βιομηχανίας.
Ο στόχος είναι οι ψηφιακοί άνθρωποι να γίνονται γρηγορότερα, φθηνότερα και να είναι αξιοποιήσιμοι σε πραγματικό χρόνο.
| Προσέγγιση | Τι απαιτεί | Τι προσφέρει | Κύριος περιορισμός |
| Παραδοσιακό motion capture | Στολές, αισθητήρες, setup στούντιο | Ακριβής κίνηση, έλεγχος παραγωγής | Υψηλό κόστος και οργάνωση |
| Ανακατασκευή από βίντεο | Συνηθισμένες λήψεις βίντεο | Ταχύτερο pipeline και κλιμάκωση | Εξάρτηση από ποιότητα λήψης και ορατότητα σώματος |
Οι τεχνολογίες που παράγουν ρεαλιστικούς ψηφιακούς ανθρώπους απαιτούν σαφείς κανόνες για συναίνεση και δικαιώματα εικόνας.
Τι σημαίνει αυτό για game dev και virtual production
Η συγκεκριμένη εξαγορά δείχνει ότι η Epic επενδύει στη «γέφυρα» ανάμεσα σε οπτικό ρεαλισμό και κινησιολογική αξιοπιστία.
Για τις ομάδες ανάπτυξης, αυτό μπορεί να σημαίνει λιγότερα bottlenecks στη δημιουργία χαρακτήρων και γρηγορότερο iteration.
Για τις κινηματογραφικές παραγωγές, μπορεί να σημαίνει πιο γρήγορη μεταφορά performance σε ψηφιακά doubles και καλύτερη συνέπεια σε σκηνές.
Πρακτικές συμβουλές για καλύτερα αποτελέσματα από βίντεο
- Καταγράψτε ολόκληρο το σώμα σε σταθερό κάδρο, ώστε να φαίνονται καθαρά χέρια και πόδια.
- Επιλέξτε ομοιόμορφο φωτισμό και αποφύγετε βαριές σκιές που κρύβουν αρθρώσεις.
- Προτιμήστε ρούχα που δεν «μπερδεύουν» το περίγραμμα, ώστε να διευκολύνεται η εκτίμηση πόζας.
Φυλάξτε το πρωτότυπο βίντεο και τις άδειες χρήσης, ώστε να είναι ξεκάθαρο ποιος έχει δικαιώματα σε κίνηση και ψηφιακή περσόνα.
Που μπορεί να οδηγήσει η ενσωμάτωση της Meshcapade στο οικοσύστημα της Epic
Αν η τεχνολογία της Meshcapade «κουμπώσει» βαθιά στο Unreal Engine, είναι πιθανό να αλλάξει το πώς χτίζονται pipelines χαρακτήρων σε μικρές και μεγάλες ομάδες.
Σήμερα, πολλοί δημιουργοί έχουν ένα ισχυρό εργαλείο για την εμφάνιση μέσω του MetaHuman, αλλά χρειάζονται ξεχωριστές λύσεις για κίνηση, retargeting και καθαρισμό animation.
Ένα πιο ενιαίο workflow μπορεί να μειώσει τα σημεία τριβής, ειδικά όταν οι παραγωγές απαιτούν πολλούς NPCs με πειστική συμπεριφορά.
Πιθανές χρήσεις πέρα από τα games
Η αξία των ρεαλιστικών ψηφιακών ανθρώπων δεν περιορίζεται στα παιχνίδια, γιατί η ανάγκη για «πιστευτή» κίνηση εμφανίζεται παντού.
- Εκπαίδευση και προσομοιώσεις, όπου η στάση σώματος και οι αντιδράσεις έχουν σημασία για σενάρια ασφάλειας.
- Εικονική παραγωγή, όπου οι σκηνοθέτες θέλουν γρήγορο blocking σκηνών με χαρακτήρες πριν το τελικό γύρισμα.
- XR εφαρμογές, όπου η καθυστέρηση και η ασυνέπεια κίνησης «σπάνε» άμεσα την αίσθηση παρουσίας.
| Τομέας | Τι κερδίζει από 3D κίνηση | Παράδειγμα εφαρμογής |
| Games | Πιο φυσικές αντιδράσεις χαρακτήρων και συνέπεια animation | Crowds και NPCs με ρεαλιστικό βάδισμα |
| Ταινίες | Γρήγορη μεταφορά performance σε ψηφιακά doubles | Previs και virtual camera με avatars |
| XR | Πειστική παρουσία σε πραγματικό χρόνο | Virtual meetings με σωστή γλώσσα σώματος |
Σημεία προσοχής για ομάδες παραγωγής
Παρότι η ανακατασκευή κίνησης από βίντεο είναι ελκυστική, δεν εξαφανίζει την ανάγκη για σωστό production planning.
Οι λήψεις με απόκρυψη άκρων, έντονο motion blur ή περίπλοκο φόντο μπορούν να μειώσουν την αξιοπιστία της εκτίμησης πόζας.
Επίσης, η συνέπεια ανάμεσα σε διαφορετικές σκηνές απαιτεί προτυποποίηση, ώστε τα δεδομένα κίνησης να παραμένουν συγκρίσιμα.
Για τον λόγο αυτό, βοηθά να οριστούν από την αρχή κανόνες για κάμερα, φωτισμό και ρυθμό κίνησης, ειδικά σε παραγωγές με πολλούς συντελεστές.
Ηθική και ασφάλεια με ρεαλιστικούς ψηφιακούς ανθρώπους
Όσο πιο εύκολο γίνεται να δημιουργούνται ρεαλιστικοί χαρακτήρες, τόσο αυξάνεται και η ευθύνη γύρω από την κατάχρηση.
Οι ομάδες που δουλεύουν με ψηφιακές περσόνες χρειάζεται να τηρούν διαδικασίες για συναίνεση, ιχνηλασιμότητα και σαφή συμβόλαια χρήσης.
Αυτό είναι κρίσιμο, επειδή η «κίνηση» μπορεί να θεωρηθεί δημιουργικό υλικό, όπως ακριβώς μια ηχογράφηση ή μια ερμηνεία.
Σε πρακτικό επίπεδο, η καλύτερη άμυνα είναι η τεκμηρίωση, η αποθήκευση των πρωτογενών δεδομένων και ο ξεκάθαρος ορισμός δικαιωμάτων σε κάθε στάδιο.
