Το νέο εργαλείο της NVIDIA μπορεί να δημιουργήσει τρισδιάστατα αντικείμενα από φωτογραφίες!


Το νέο εργαλείο της NVIDIA μπορεί να δημιουργήσει τρισδιάστατα αντικείμενα από φωτογραφίες!

Οι ερευνητές της NVIDIA δημιούργησαν το NVIDIA 3D MoMa, ένα νέο εργαλείο που μπορεί να μετατρέψει τις φωτογραφίες σε τρισδιάστατα αντικείμενα.

Το 3D MoMa, η εταιρεία λέει ότι μπορεί να επιτρέψει σε αρχιτέκτονες, σχεδιαστές, καλλιτέχνες και προγραμματιστές παιχνιδιών, να εισάγουν φωτογραφίες αντικειμένων σε μια μηχανή γραφικών για ψηφιακή επεξεργασία.

Η τεχνολογία λειτουργεί μέσω μιας διαδικασίας που λέγεται inverse rendering, η οποία είναι μια τεχνική που μπορεί να ανασυνθέσει μια σειρά από φωτογραφίες σε ένα τρισδιάστατο μοντέλο ενός αντικειμένου ή μιας σκηνής. Ο David Luebke, αντιπρόεδρος της έρευνας γραφικών της NVIDA, περιγράφει αυτή την ιδέα ως “ιερό δισκοπότηρο” για την εξέλιξη γραφικών μέσω υπολογιστών. Επιπρόσθετα, αναφέρει το εξής:

Με την επεξεργασία κάθε κομματιού μέσω inverse rendering ως διαφοροποιήσιμο στοιχείο GPU-accelerated, το 3D MoMa της NVIDIA χρησιμοποιεί τεχνολογία σύγχρονης τεχνητής νοημοσύνης και την υπολογιστική ισχύ των GPU της NVIDIA, για να παράγει γρήγορα τρισδιάστατα αντικείμενα, που οι δημιουργοί μπορούν να εισάγουν, να επεξεργαστούν, και να επεκτείνουν χωρίς περιορισμούς.

Το 3D MoMa τραβάει μια σειρά από φωτογραφίες και τις χρησιμοποιεί για να δημιουργήσει 3D renders (τρισδιάστατες εκδοχές) του αντικειμένου που σχηματίζεται με ένα σύνθετο πολυγωνικό πλέγμα με υλικά υφής (triangle mesh). Αυτό, η NVIDIA το περιγράφει ως μια κοινή γλώσσα που χρησιμοποιείται από 3D εργαλεία σε διάφορες βιομηχανίες.

Το 3D MoMa λειτουργεί με τα εργαλεία της βιομηχανίας

Τα στούντιο παιχνιδιών για παράδειγμα, συνήθως δημιουργούν τρισδιάστατα αντικείμενα με πολύπλοκες τεχνικές φωτογραμμετρίας (τεχνικές προσδιορισμού διαστάσεων αντικειμένων με χρήση φωτογραφιών), που η NVIDIA λέει ότι απαιτούν σημαντικό χρόνο και προσπάθεια. Νωρίτερα φέτος, η NVIDIA έδειξε έναν τρόπο με τον οποίο ήταν σε θέση να μετατρέψει ένα σύνολο φωτογραφιών σε 3D σκηνές μέσα σε λίγα δευτερόλεπτα. Και ενώ είναι ισχυρό, δεν κατάφερε να δημιουργήσει αυτό το σύνθετο πολυγωνικό πλέγμα (triangle mesh) για εύκολη μετέπειτα επεξεργασία.

Το 3D MoMA της NVIDIA το αλλάζει πλέον αυτό και δημιουργεί triangle mesh μοντέλα μέσα σε μία ώρα σε μία GPU της NVIDIA με Tensor Core (Οι πυρήνες Tensor Core είναι μονάδες επεξεργασίας που επιταχύνουν τη διαδικασία πολλαπλασιασμού, και επιτρέπουν γρήγορους υπολογισμούς μικτής ακρίβειας). Η εταιρεία λέει ότι το αποτέλεσμα είναι συμβατό με τις μηχανές γραφικών 3D και τα εργαλεία μοντελοποίησης (3D modeling), που χρησιμοποιούν ήδη οι δημιουργοί σε μια σειρά βιομηχανιών.

Παράδειγμα triangle mesh, που είναι ένα σύνολο από σύνθετα πολύγωνα που χρησιμοποιούνται για τον καθορισμό σχημάτων σε τρισδιάστατα γραφικά και μοντελοποίηση.

Η NVIDIA αναφέρει:

Με το triangle mesh, οι προγραμματιστές μπορούν να τροποποιήσουν ένα αντικείμενο ώστε να ταιριάζει στο δημιουργικό τους όραμα. Τα υλικά είναι υφές 2D που καλύπτονται στα τρισδιάστατα πλέγματα σαν το δέρμα. Και η εκτίμηση του 3D MoMa για το πώς φωτίζεται η σκηνή, επιτρέπει στους δημιουργούς να τροποποιήσουν αργότερα τον φωτισμό στα αντικείμενα όπως αυτοί επιθυμούν.

Οι ερευνητές παρουσίασαν το νέο αυτό εργαλείο, με ένα σύνολο τζαζ οργάνων στο παραπάνω βίντεο. Η ομάδα της NVIDIA κατέγραψε αρχικά περίπου 100 εικόνες καθενός από τα πέντε όργανα από διαφορετικές οπτικές γωνίες, και στη συνέχεια τροφοδότησε αυτές τις πληροφορίες στο σύστημα 3D MoMa. Έτσι, μπόρεσε να δημιουργήσει τα απαιτούμενα τρισδιάστατα μοντέλα που θα μπορούσαν να εισαχθούν σε ένα πρόγραμμα επεξεργασίας 3D.

Σύμφωνα με την εταιρία, αυτά τα inverse rendered αντικείμενα, μπορούν να χρησιμοποιηθούν ως δομικά στοιχεία για μια περίπλοκη κινούμενη σκηνή (animation).

Η NVIDIA έκανε μια δημοσίευση για το σύστημα 3D MoMa, η οποία είναι μία από τις 38 εργασίες που θα παρουσιαστούν στο Συνέδριο του Computer Vision and Pattern Recognition (CVPR) αυτή την εβδομάδα. Μπορείτε να δείτε τη δημοσίευση αυτή εδώ.

To pttlgr στηρίζεται για την λειτουργία του στους αναγνώστες του!
Μπορείς να βοηθήσεις με μία μικρή δωρεά!
Υποστηρίξτε το pttlgr ακόμα και με μόλις 1€ – χρειάζεται μόνο ένα λεπτό. Εάν μπορείτε, σκεφτείτε να μας υποστηρίξετε με ένα ποσό κάθε μήνα.
Σας ευχαριστούμε.

Στηρίξτε το pttlgr και την προσπάθεια μας για έγκυρη και άμεση ενημέρωση ακολουθώντας μας
σε InstagramYouTube και Facebook!

Ακολουθήστε το pttlgr στα Google News, εδώ!

Δες την εβδομαδιαία μας φωτογραφική εκπομπή Angle of View στο YouTube ή άκουσε την ως Podcast σε Spotify, Google ή Apple!

Κάνε Εγγραφή / Subscribe στο κανάλι μας στο YouTube, αποκλειστικά για φωτογραφία και φωτογραφικό εξοπλισμό!

Πριν φύγετε δείτε

ΔΕΙΤΕ ΑΚΟΜΑ

Ετικέτες:

3d AI NVIDIA

Πηγή:

Petapixel
author
Γιώργος Σπανουδάκης

Είμαι ο Σπανουδάκης Γιώργος, φωτογράφος με έδρα την Αθήνα και έχω σπουδάσει μουσική και φωτογραφία (κάτοχος Bachelor of Arts). Ασχολούμαι επίσης με επεξεργασία φωτογραφιών και βίντεο. Εξειδικεύομαι σε φωτογραφίσεις κάθε είδους καλλιτεχνικών εκδηλώσεων και πορτρέτων. Όταν έχω χρόνο ασχολούμαι επίσης με αστροφωτογραφία, φωτογραφία τοπίου και λατρεύω να εκφράζομαι δημιουργώντας δικά μου φωτογραφικά concept.

Ποιά είναι η γνώμη σου;

Σας παρακαλούμε να σχολιάζετε με σεβασμό στους συνομιλητές σας και να χρησιμοποιείτε την ελληνική γλώσσα και όχι greeklish (παρά μόνο στην περίπτωση που δεν μπορείτε λόγω ρυθμίσεων του Η/Υ). Επίσης αποφεύγετε να γράφετε τα σχόλια σας με κεφαλαία γράμματα. Όλα τα σχόλια περνάνε από έλεγχο πριν την δημοσίευση τους, οπότε πρέπει να περιμένετε για να εγκριθεί το σχόλιο σας.