Πώς να χρησιμοποιήσετε το Google VideoPoet: Χαρακτηριστικά και άλλα

Μόλις η Google παρουσίασε το νέο της εργαλείο δημιουργίας βίντεο, το ερώτημα σχετικά με τον τρόπο χρήσης του Google VideoPoet άρχισε να αντηχεί στον κόσμο της τεχνολογίας.

Το

Google VideoPoet είναι μια σημαντική βελτίωση σε σχέση με τα παραδοσιακά μοντέλα παραγωγής βίντεο, προσφέροντας ένα ευρύ φάσμα συναρπαστικών χαρακτηριστικών και δυνατοτήτων. Εκπαιδευμένη στο MAGVIT-2, η Google στοχεύει και πάλι στην

κορυφή

στα εργαλεία τεχνητής νοημοσύνης.

Αλλά πώς να χρησιμοποιήσετε το Google VideoPoet και γιατί θα έπρεπε κάποιος να το δοκιμάσει; Ας εξηγήσουμε.

Πώς να χρησιμοποιήσετε το Google VideoPoet

Δυστυχώς, το Google VideoPoet δεν είναι ακόμα δημόσια διαθέσιμο. Ενώ ανακοινώθηκε και παρουσίασε μερικές εντυπωσιακές δυνατότητες τον Μάιο του 2023, είναι ακόμα υπό ανάπτυξη και δεν είναι προσβάσιμο για γενική χρήση. Επομένως, δεν μπορούμε να σας πούμε ακόμα πώς να χρησιμοποιήσετε το Google VideoPoet.

Ωστόσο, υπάρχουν μερικοί τρόποι για να ανακαλύψετε τι μπορεί να κάνει το Google VideoPoet, αν και δεν θα το δοκιμάσετε μόνοι σας.

Επίδειξη ιστότοπου

Δυστυχώς, το VideoPoet δεν διαθέτει ακόμη δημόσια προσβάσιμη πλατφόρμα. Ωστόσο, η ερευνητική ομάδα κυκλοφόρησε έναν ιστότοπο επίδειξης όπου μπορείτε να γνωρίσετε μερικά από τα χαρακτηριστικά του:

https://sites.research.google/videopoet/

Εδώ, μπορείτε να βρείτε προπαρασκευασμένα δείγματα βίντεο που παρουσιάζουν διαφορετικά στυλ και λειτουργίες.

Ερευνητική εργασία

Για μια βαθύτερη κατανόηση των εσωτερικών λειτουργιών του VideoPoet, μπορείτε να εμβαθύνετε στην ερευνητική εργασία:

https://blog.research.google/2023/12/videopoet-large-language-model-for-zero.html

Αυτό το έγγραφο περιγράφει λεπτομερώς τις τεχνικές πτυχές, τους περιορισμούς και τις δυνατότητες του εργαλείου.

Θυμηθείτε, το VideoPoet είναι ακόμα υπό έρευνα και η προσβασιμότητα και οι δυνατότητές του ενδέχεται να αλλάξουν στο μέλλον. Ωστόσο, εξερευνώντας τους διαθέσιμους πόρους και παραμένοντας ενημερωμένοι, μπορείτε να παραμένετε ενημερωμένοι για αυτήν τη συναρπαστική τεχνολογία AI και τον πιθανό αντίκτυπό της στη δημιουργία βίντεο.

Ποια είναι τα ξεχωριστά χαρακτηριστικά του Google VideoPoet;

Τώρα που τελειώσαμε να εξηγήσουμε πώς να χρησιμοποιήσουμε το Google VideoPoet, ας δούμε αυτό το θαύμα ενός εργαλείου AI.

Το VideoPoet είναι ένα επαναστατικό μοντέλο παραγωγής βίντεο που μπορεί να παράγει βίντεο μεταβλητού μήκους υψηλής κίνησης από ένα απλό μήνυμα κειμένου. Αυτό το ισχυρό εργαλείο έχει τη δυνατότητα να δημιουργεί ήχο που ταιριάζει με ένα βίντεο εισόδου, χωρίς την ανάγκη πρόσθετης καθοδήγησης κειμένου.

Το μυστικό πίσω από τις εντυπωσιακές ικανότητες του VideoPoet βρίσκεται στα απλά αλλά αποτελεσματικά στοιχεία του. Χρησιμοποιεί ένα προεκπαιδευμένο

MAGVIT V2


video

tokenizer και SoundStream audio tokenizer, που μετατρέπουν εικόνες, βίντεο και ηχητικά κλιπ σε ένα ενοποιημένο λεξιλόγιο. Αυτό το λεξιλόγιο χρησιμοποιείται στη συνέχεια από ένα αυτοπαλινδρομικό γλωσσικό μοντέλο, το οποίο μαθαίνει με διάφορους τρόπους, συμπεριλαμβανομένου του κειμένου, για τη δημιουργία βίντεο υψηλής ποιότητας.

Ένα από τα πιο αξιοσημείωτα χαρακτηριστικά του VideoPoet είναι η ικανότητά του να δημιουργεί βίντεο με ένα ευρύ φάσμα μεγάλων, ενδιαφέροντων και

κινήσεις υψηλής πιστότητας

. Αυτό γίνεται εφικτό από την ικανότητα του μοντέλου να μαθαίνει σε διάφορες μορφές, επιτρέποντάς του να συνθέτει και να επεξεργάζεται βίντεο με υψηλό βαθμό χρονικής συνέπειας. Έτσι, το να γνωρίζετε πώς να χρησιμοποιείτε το Google VideoPoet θα σας επιτρέψει να δημιουργήσετε βίντεο υψηλής ποιότητας χωρίς καμία προσπάθεια.

Ένα άλλο συναρπαστικό χαρακτηριστικό του VideoPoet είναι η ικανότητά του να λέει

οπτικές ιστορίες

. Αλλάζοντας τις προτροπές με την πάροδο του χρόνου, οι χρήστες μπορούν να δημιουργήσουν ελκυστικές αφηγήσεις που ξεδιπλώνονται μπροστά στα μάτια τους. Επιπλέον, το VideoPoet υποστηρίζει τη δημιουργία βίντεο σε τετράγωνο προσανατολισμό ή πορτραίτο, καθιστώντας το ιδανικό για περιεχόμενο σύντομης μορφής.

Πόσο καλά λειτουργεί το Google VideoPoet; Δείτε το μόνοι σας στο βίντεο του

YouTube

από

Έρευνα Google

παρακάτω.

Το VideoPoet προσφέρει επίσης δυνατότητες διαδραστικής επεξεργασίας, επιτρέποντας στους χρήστες να επεκτείνουν τα εισερχόμενα βίντεο και να επιλέγουν από μια λίστα παραδειγμάτων για να ελέγχουν με ακρίβεια την επιθυμητή κίνηση. Αυτή η δυνατότητα είναι ιδιαίτερα χρήσιμη για τη δημιουργία προσαρμοσμένων βίντεο που ταιριάζουν με ένα συγκεκριμένο μήνυμα κειμένου.

Οι ελεγχόμενες δυνατότητες επεξεργασίας βίντεο του μοντέλου δεν σταματούν εκεί. Μπορεί επίσης

επεξεργαστείτε ένα θέμα για να ακολουθήσετε διαφορετικές κινήσεις

, όπως στυλ χορού και δημιουργήστε βίντεο που ταιριάζουν με ένα δεδομένο μήνυμα κειμένου. Επιπλέον, το VideoPoet μπορεί να στιλιζάρει βίντεο εισαγωγής καθοδηγούμενα από ένα μήνυμα κειμένου, επιδεικνύοντας στιλιστικά ευχάριστη άμεση τήρηση.

Οι χρήστες μπορούν επίσης να συνθέσουν στυλ και εφέ σε

δημιουργία κειμένου σε βίντεο

απλά προσθέτοντας ένα στυλ σε μια βασική προτροπή. Αυτή η δυνατότητα επιτρέπει ατελείωτες δημιουργικές δυνατότητες, καθιστώντας το VideoPoet ένα ανεκτίμητο εργαλείο για τους δημιουργούς περιεχομένου.

Τέλος, το VideoPoet προσφέρει

μηδενικές ελεγχόμενες κινήσεις κάμερας

, δίνοντας τη δυνατότητα στους χρήστες να καθορίσουν τον τύπο της κάμερας που τραβήχτηκε στο μήνυμα κειμένου. Αυτή η δυνατότητα είναι μια αναδυόμενη ιδιότητα της προ-εκπαίδευσης του VideoPoet και αποτελεί απόδειξη της ικανότητας του μοντέλου να δημιουργεί υψηλής ποιότητας προσαρμογή κίνησης της κάμερας.

Φτάσαμε στο τέλος του άρθρου μας πώς να χρησιμοποιούμε το Google VideoPoet. Οι πρόσφατες επενδύσεις της Google στην τεχνητή νοημοσύνη είναι προφανείς. Αν ενδιαφέρεστε για την τεχνητή νοημοσύνη, σας συνιστούμε να παρακολουθήσετε στενά τη δουλειά του Gemini AI και του DeepMind.

Πίστωση επιλεγμένης εικόνας


:

Google VideoPoet

.