ΕπόμενοΕπόμενος οδηγός
Συντονισμός ενός βίντεο Μοντάζ
Οπτική τεχνητή νοημοσύνη
ΟΔΗΓΟΣ οπτικού AI
DragGAN Διαδραστική Επεξεργασία
Το DragGAN σάς επιτρέπει να επεξεργάζεστε μια εικόνα σύροντας κυριολεκτικά σημεία: πιάστε ένα σημείο και σύρετέ το σε έναν στόχο και η εικόνα παραμορφώνεται ρεαλιστικά, αλλάζοντας πόζα, σχήμα ή έκφραση.
Ακούστε αυτόν τον οδηγόαφήγηση με AI · ~2 min
Σε αυτήν τη σελίδα2 λεπτά ανάγνωση
Επισκόπηση
It matters because it makes precise, intuitive image manipulation possible without sliders, masks, or text prompts.
Βαθιά κατάδυση
Ο DragGAN, από τους Pan, Tewari, Leimkuhler και συνεργάτες του Max Planck και συνεργατών (SIGGRAPH 2023), εισήγαγε τη διαδραστική επεξεργασία εικόνων που δημιουργούνται από το GAN. Ο χρήστης τοποθετεί ένα ή περισσότερα σημεία «λαβής» σε μια εικόνα και τα αντίστοιχα σημεία «στόχου» όπου πρέπει να κινηθεί. Στη συνέχεια, το DragGAN σπρώχνει επαναληπτικά τον λανθάνοντα κώδικα, έτσι ώστε το περιεχόμενο κάτω από κάθε λαβή να ολισθαίνει προς τον στόχο του, ενώ η υπόλοιπη εικόνα παραμένει συνεκτική. Μπορείτε να επιμηκύνετε τα πόδια ενός ζώου, να κάνετε ένα άτομο να χαμογελάσει, να περιστρέψετε ένα αυτοκίνητο ή να αλλάξετε το περίγραμμα ενός τοπίου, όλα σύροντας. Κυρίως, οι επεξεργασίες σέβονται την πολλαπλότητα της μαθημένης εικόνας, επομένως τα αποτελέσματα παραμένουν ρεαλιστικά αντί να λερώνουν pixel. Μια προαιρετική μάσκα περιορίζει ποιες περιοχές επιτρέπεται να μετακινούνται, παρέχοντας λεπτό εντοπισμένο έλεγχο.
Υλοποίηση σε πραγματικό κόσμο
Προσαρμογή της έκφρασης, της κατεύθυνσης του βλέμματος ή του χτενίσματος ενός πορτρέτου σύροντας σημεία του προσώπου
Αλλαγή της στάσης και του προσανατολισμού ενός ζώου ή ενός οχήματος, όπως η περιστροφή ενός αυτοκινήτου ή η επανατοποθέτηση του κεφαλιού ενός λιονταριού
Αναμόρφωση φωτογραφιών προϊόντων (επιμήκυνση, διεύρυνση ή επανατοποθέτηση αντικειμένων) για μακέτες σχεδίασης
Βελτιώστε το τοπίο ή τις εικόνες μόδας σύροντας τα περιγράμματα, όπως η αλλαγή των σχημάτων των βουνών ή η εφαρμογή ενδυμάτων
Το μέλλον της διαδραστικής επεξεργασίας DragGAN
Το DragGAN πυροδότησε ταχεία εργασία παρακολούθησης, φέρνοντας τον έλεγχο με βάση το drag σε μοντέλα διάχυσης (όπως το DragDiffusion και το FreeDrag), τα οποία χειρίζονται πραγματικές φωτογραφίες και αυθαίρετο περιεχόμενο πιο σθεναρά από τα GAN μόνο. Αναμένετε ότι η επεξεργασία με σύρσιμο θα γίνει ένα τυπικό εργαλείο στο δημιουργικό λογισμικό, σε συνδυασμό με στοιχεία ελέγχου κειμένου και περιοχής και επεκταθεί σε βίντεο και 3D, ώστε οι χρήστες να μπορούν να τοποθετούν αντικείμενα σε καρέ ή να αναδιαμορφώνουν τα πλέγματα διαδραστικά, διατηρώντας παράλληλα τον φωτορεαλισμό.
Κάνοντάς το στην πράξη
Γιατί έχει σημασία
- Ταχύτητα και κλίμακα. Το Visual AI μπορεί να αυτοματοποιήσει εργασίες επιθεώρησης, ανίχνευσης και επισήμανσης σε κλίμακα.
- Δημιουργήστε επιλογές. Οι δημιουργικές ομάδες μπορούν να δημιουργήσουν πρωτότυπες ιδέες γρηγορότερα με λιγότερες μη αυτόματες αναθεωρήσεις.
- Ομάδα και ροή εργασίας. Οι λειτουργίες μπορούν να χρησιμοποιούν σήματα εικόνας και βίντεο που προηγουμένως ήταν δύσκολο να επεξεργαστούν.
Προσέξτε
- Τα δικαιώματα εικόνας και η συναίνεση μπορεί να αποτελέσουν νομικούς κινδύνους εάν η προέλευση είναι ασαφής.
- Η απόδοση του μοντέλου μπορεί να διαφέρει ανάλογα με το φωτισμό, τα δημογραφικά στοιχεία και τα περιβάλλοντα.
- Τα ψευδώς θετικά μπορεί να περάσουν απαρατήρητα εκτός εάν παρακολουθούνται τα όρια εμπιστοσύνης.
Επόμενα βήματα
- Καθορίστε κριτήρια αποδοχής για το κόστος ακρίβειας, ανάκλησης και σφάλματος.
- Δοκιμή με δεδομένα που ταιριάζουν με πραγματικές συνθήκες παραγωγής.
- Προσθέστε ανθρώπινη κριτική για προβλέψεις χαμηλής εμπιστοσύνης ή υψηλού αντίκτυπου.
- Παρακολουθήστε τη μετατόπιση του μοντέλου και επικυρώστε εκ νέου μετά από αλλαγές κάμερας ή δεδομένων.
Συνεχίστε την εξερεύνηση
Δωρεάν ενημερωτικό δελτίο
Λάβετε την καθημερινή ενημέρωση AI
Τρία επαληθευμένα νέα AI κάθε πρωί της εβδομάδας, γραμμένα σε απλή αγγλική. Δωρεάν για πάντα, χωρίς διαφημίσεις.
Ένα email κάθε εργάσιμη ημέρα. Κατάργηση συνδρομής με ένα κλικ. Δεν πουλάμε ή μοιραζόμαστε ποτέ τη διεύθυνσή σας.
Δοκιμάστε τον εαυτό σας
Take the DragGAN Interactive Editing quiz
Άμεση ανάδραση σε κάθε απάντηση, και πιστοποιητικό με επαληθεύσιμο ID μόλις περάσετε το μάθημα.
Υποστηρίξτε τη δωρεάν εκπαίδευση AI. AI Understanding είναι μια μη κερδοσκοπική οργάνωση 501(c)(3) — χωρίς διαφημίσεις, χωρίς τοίχο πληρωμής, ποτέ. Κάντε μια δωρεά
Συχνές ερωτήσεις
What is DragGAN Interactive Editing?
Το DragGAN σάς επιτρέπει να επεξεργάζεστε μια εικόνα σύροντας κυριολεκτικά σημεία: πιάστε ένα σημείο και σύρετέ το σε έναν στόχο και η εικόνα παραμορφώνεται ρεαλιστικά, αλλάζοντας πόζα, σχήμα ή έκφραση. Έχει σημασία γιατί καθιστά δυνατό τον ακριβή, διαισθητικό χειρισμό εικόνας χωρίς ρυθμιστικά, μάσκες ή μηνύματα κειμένου.
Πώς επεξεργάζεται ένας χρήστης μια εικόνα στο DragGAN;
Οι επεξεργασίες DragGAN λειτουργούν τοποθετώντας σημεία λαβής και σύροντάς τα σε στοχευμένες τοποθεσίες, παραμορφώνοντας ανάλογα την εικόνα.
Ποια είναι τα δύο εναλλασσόμενα βασικά βήματα του DragGAN;
Το DragGAN εναλλάσσει την επίβλεψη κίνησης (μετακίνηση χαρακτηριστικών προς στόχους) και την παρακολούθηση σημείων (επανατοποθέτηση λαβών), επαναλαμβάνοντας μέχρι να ολοκληρωθεί.
Γιατί οι επεξεργασίες του DragGAN φαίνονται ρεαλιστικές παρά κηλιδωμένες;
Επειδή ο χειρισμός συμβαίνει στον λανθάνοντα χώρο ενός προεκπαιδευμένου GAN, οι έξοδοι παραμένουν στην πολλαπλότητα των ρεαλιστικών εικόνων.
Τι ελέγχει η προαιρετική μάσκα στο DragGAN;
Μια μάσκα επιτρέπει στους χρήστες να περιορίζουν τις αλλαγές σε επιλεγμένες περιοχές, ώστε η υπόλοιπη εικόνα να παραμένει σταθερή.
Το DragGAN παρουσιάστηκε συγκεκριμένα σε ποιο χώρο το 2023;
Το DragGAN δημοσιεύτηκε στο SIGGRAPH 2023, ένα κορυφαίο συνέδριο γραφικών υπολογιστών.
Συνέχισε να μαθαίνεις
Σχετικοί οδηγοί
Επιλέχθηκαν περισσότεροι οδηγοί για αυτό το θέμα