Ερευνητές δημιούργησαν λογισμικό για υψηλής ανάλυσης αυτόματη αλλαγή προσώπου σε βίντεο και φωτογραφίες!
Από τον κόσμο της επιστήμης του Imaging μας έρχεται η επόμενη είδηση και συγκεκριμένα από την Disney και την ερευνητική της ομάδα.
Στην περιγραφή του βίντεο διαβάζουμε:
Προτείνουμε έναν αλγόριθμο για την αυτόματη αλλαγή προσώπων σε εικόνες και βίντεο. Από όσα γνωρίζουμε, αυτή είναι η πρώτη μέθοδος που μπορεί να αποδώσει φωτο-ρεαλιστικά και χρονικά συνεκτικά αποτελέσματα σε ανάλυση megapixel. Για το σκοπό αυτό, παρουσιάζουμε ένα προοδευτικά εκπαιδευμένο δίκτυο και μια μέθοδο ανάμειξης που διατηρεί το φως και την αντίθεση. Δείχνουμε επίσης ότι, ενώ η προοδευτική εκπαίδευση επιτρέπει τη δημιουργία εικόνων υψηλής ανάλυσης, η επέκταση των δεδομένων αρχιτεκτονικής και εκπαίδευσης πέρα από δύο άτομα μας επιτρέπει να επιτύχουμε μεγαλύτερη πιστότητα στις παραγόμενες εκφράσεις. Κατά τη σύνθεση της παραγόμενης έκφρασης στο πρόσωπο-στόχο, δείχνουμε πώς προσαρμόζουμε τη στρατηγική ανάμειξης για τη διατήρηση της αντίθεσης και του φωτισμού χαμηλής συχνότητας. Τέλος, ενσωματώνουμε μια στρατηγική βελτίωσης στον αλγόριθμο σταθεροποίησης των ορόσημων του προσώπου για την επίτευξη χρονικής σταθερότητας, ο οποίος είναι ζωτικής σημασίας για τα βίντεο υψηλής ανάλυσης. Πραγματοποιούμε μια εκτεταμένη μελέτη για να δείξουμε την επίδραση των επιλογών σχεδιασμού μας στην ποιότητα της αλλαγής και να συγκρίνουμε τη δουλειά μας με δημοφιλείς μεθόδους τελευταίας τεχνολογίας.
Στην ουσία οι ερευνητές της Disney ανέβασαν την ποιότητα του τελικού αποτελέσματος από τα 256×256 pixels που είχαμε δει από αντίστοιχο λογισμικό στην ανάλυση του 1.05 megapixel (1024×1024).
Τέτοιου είδους λογισμικό μπορεί να χρησιμοποιηθεί σε πολλές εφαρμογές όπως στον κινηματογράφο για την αναβίωση χαρακτήρων των οποίων οι ηθοποιοί δεν βρίσκονται πλέον στην ζωή, κάτι που έχουμε δει στα τελευταία Star Wars και εκτός των άλλων την περίπτωση της Carrie Fisher, ως πριγκίπισσα Λεία στο The Rise of Skywalker.
Μπορείτε να διαβάσετε την εργασία των ερευνητών πίσω από τον νέο αλγόριθμο εδώ.
