Τεχνολογία

Mocha AI: Το νέο μοντέλο της Meta μετατρέπει την ομιλία σε ρεαλιστικούς χαρακτήρες που μιλάνε

Η Meta σε συνεργασία με το Πανεπιστήμιο του Waterloo αποκάλυψε το MoCha, ένα πρωτοποριακό AI σύστημα το οποίο μπορεί να δημιουργεί full-body character animations, με συγχρονισμένο λόγο, εκφράσεις, χειρονομίες και ρεαλιστική κίνηση.

Πρόκειται για ένα σημαντικό βήμα στον τομέα των κινούμενων εικόνων που βασίζονται στην τεχνητή νοημοσύνη, υπερβαίνοντας τα όρια του τι είναι δυνατό με τη δημιουργία κειμένου σε βίντεο.

Σε αντίθεση με προηγούμενα μοντέλα που εστίαζαν μόνο στο πρόσωπο ή στο lip-sync, το MoCha αποδίδει την κίνηση ολόκληρου του σώματος και υποστηρίζει λήψεις από διαφορετικές γωνίες κάμερας. Μπορεί να αναπαραστήσει φυσικές κινήσεις, διαλόγους, ακόμα και αλληλεπιδράσεις μεταξύ πολλών χαρακτήρων ταυτόχρονα.

Η ομάδα εκπαίδευσε το MoCha με πάνω από 300 ώρες επιλεγμένου video υλικού, ενώ πρόσθεσε και text-based sequences για να δώσει στο σύστημα τη δυνατότητα να αποδίδει πιο σύνθετες αφηγηματικές σκηνές. Έτσι, ο χρήστης μπορεί να δημιουργήσει μία ρεαλιστική σκηνή animation απλώς δίνοντας ένα γραπτό prompt.

Το MoCha φέρνει την AI παραγωγή video πιο κοντά στην πλήρως αυτοματοποιημένη μορφή της, με δυνατότητες που αναμένεται να βρουν εφαρμογή σε gaming, VR, ταινίες και ψηφιακούς βοηθούς. Είναι ένα εργαλείο που μπορεί να αλλάξει ριζικά τον τρόπο με τον οποίο δημιουργείται ψηφιακό περιεχόμενο.

Πηγή: unboxholics.com

Related posts

Samsung Galaxy S22: Χρήστες αναφέρουν τεράστια προβλήματα με το τελευταίο update One UI 6.1

TEO

Η Poco επιστρέφει με 120Hz οθόνη και μπαταρία 2 ημερών

TEO

Αυτό το λουράκι μπορεί να πραγματοποιήσει “FaceTime” κλήσεις από το Apple Watch σας

TEO

Αυτός ο ιστότοπος χρησιμοποιεί cookies για να βελτιώσει την εμπειρία σας. Θα υποθέσουμε ότι είστε εντάξει με αυτό, αλλά μπορείτε να εξαιρεθείτε εάν το επιθυμείτε. Αποδέχομαι Διαβάστε περισσότερα

Πολιτική Απορρήτου & Cookies