Η Adobe φέρνει τη γενετική τεχνητή νοημοσύνη της Firefly στο Photoshop

Το Photoshop αποκτά μια έγχυση γενετικής τεχνητής νοημοσύνης σήμερα με την προσθήκη μιας σειράς λειτουργιών που βασίζονται στο Firefly που θα επιτρέψουν στους χρήστες να επεκτείνουν τις εικόνες πέρα ​​από τα σύνορά τους με φόντο που δημιουργείται από το Firefly, να χρησιμοποιούν γενετικό AI για να προσθέτουν αντικείμενα σε εικόνες και να χρησιμοποιούν ένα νέο γενετικό γέμισμα δυνατότητα αφαίρεσης αντικειμένων με πολύ μεγαλύτερη ακρίβεια από το προηγουμένως διαθέσιμο γέμισμα με επίγνωση περιεχομένου.

Προς το παρόν, αυτές οι λειτουργίες θα είναι διαθέσιμες μόνο στην έκδοση beta του Photoshop. Η Adobe καθιστά επίσης διαθέσιμες ορισμένες από αυτές τις δυνατότητες στους χρήστες του Firefly beta στο διαδίκτυο (οι χρήστες του Firefly, παρεμπιπτόντως, έχουν πλέον δημιουργήσει πάνω από 100 εκατομμύρια εικόνες στην υπηρεσία).

Το προσεγμένο εδώ είναι ότι αυτή η ενοποίηση επιτρέπει στους χρήστες του Photoshop να χρησιμοποιούν προτροπές κειμένου σε φυσική γλώσσα για να περιγράψουν το είδος της εικόνας ή του αντικειμένου που θέλουν να δημιουργήσει το Firefly. Όπως συμβαίνει με όλα τα εργαλεία παραγωγής τεχνητής νοημοσύνης, τα αποτελέσματα μπορεί περιστασιακά να είναι κάπως απρόβλεπτα. Από προεπιλογή, η Adobe θα παρέχει στους χρήστες τρεις παραλλαγές για κάθε προτροπή, αν και σε αντίθεση με την εφαρμογή Ιστού Firefly, δεν υπάρχει επί του παρόντος επιλογή επανάληψης σε μία από αυτές για να δείτε παρόμοιες παραλλαγές σε ένα δεδομένο αποτέλεσμα.

Για να τα κάνει όλα αυτά, το Photoshop στέλνει μέρη μιας δεδομένης εικόνας στο Firefly – όχι ολόκληρη την εικόνα, αν και η εταιρεία πειραματίζεται επίσης με αυτό – και δημιουργεί ένα νέο επίπεδο για τα αποτελέσματα.

Η Maria Yap, η αντιπρόεδρος του Digital Imaging στην Adobe, μου έδωσε μια επίδειξη αυτών των νέων δυνατοτήτων πριν από τη σημερινή ανακοίνωση. Όπως συμβαίνει με όλα τα πράγματα που δημιουργούν τεχνητή νοημοσύνη, είναι συχνά δύσκολο να προβλεφθεί τι θα επιστρέψει το μοντέλο, αλλά μερικά από τα αποτελέσματα ήταν εκπληκτικά καλά. Για παράδειγμα, όταν του ζητήθηκε να δημιουργήσει μια λακκούβα κάτω από ένα τρεχούμενο κοργκί, το Firefly φάνηκε να λαμβάνει υπόψη τον συνολικό φωτισμό της εικόνας, δημιουργώντας ακόμη και μια ρεαλιστική αντανάκλαση. Δεν λειτούργησε όλα τα αποτελέσματα εξίσου καλά – μια φωτεινή μοβ λακκούβα ήταν επίσης μια επιλογή – αλλά το μοντέλο φαίνεται να κάνει πολύ καλή δουλειά στην προσθήκη αντικειμένων και ειδικά στην επέκταση των υπαρχουσών εικόνων πέρα ​​από το κάδρο τους.

Δεδομένου ότι το Firefly εκπαιδεύτηκε στις φωτογραφίες που είναι διαθέσιμες στο Adobe Stock (καθώς και σε άλλες εμπορικά ασφαλείς εικόνες), ίσως δεν αποτελεί έκπληξη το γεγονός ότι τα πάει ιδιαίτερα καλά με τα τοπία. Παρόμοια με τις περισσότερες παραγωγικές συσκευές δημιουργίας εικόνων, το Firefly παλεύει με το κείμενο.

Η Adobe διασφάλισε επίσης ότι το μοντέλο επιστρέφει ασφαλή αποτελέσματα. Αυτό οφείλεται εν μέρει στο σετ εκπαίδευσης που χρησιμοποιείται, αλλά η Adobe έχει επίσης εφαρμόσει πρόσθετες διασφαλίσεις. «Το παντρέψαμε με μια σειρά από άμεσες μηχανικές πράγματα που γνωρίζουμε», εξήγησε ο Yap. «Αποκλείουμε ορισμένους όρους, ορισμένες λέξεις που πιστεύουμε ότι δεν είναι ασφαλείς. Και στη συνέχεια, εξετάζουμε ακόμη και μια άλλη ιεραρχία του «αν η Μαρία επιλέξει μια περιοχή που έχει πολύ δέρμα σε αυτήν, ίσως αυτή τη στιγμή — και στην πραγματικότητα θα βλέπετε προειδοποιητικά μηνύματα κατά καιρούς— δεν θα επεκτείνουμε μια προτροπή για αυτό ένα, μόνο και μόνο επειδή είναι απρόβλεπτο. Απλώς δεν θέλουμε να πάμε σε ένα μέρος που δεν αισθάνεται άνετα για εμάς».

Όπως συμβαίνει με όλες τις εικόνες Firefly, η Adobe θα εφαρμόσει αυτόματα τα Διαπιστευτήρια Περιεχομένου της σε οποιεσδήποτε εικόνες χρησιμοποιούν αυτές τις λειτουργίες που βασίζονται σε AI.

Πολλές από αυτές τις δυνατότητες θα ήταν επίσης πολύ χρήσιμες στο Lightroom. Η Yap συμφώνησε και ενώ δεν θα δεσμευόταν για ένα χρονοδιάγραμμα, επιβεβαίωσε ότι η εταιρεία σχεδιάζει να φέρει και το Firefly στο εργαλείο διαχείρισης φωτογραφιών της.