Δευτέρα, 2 Οκτωβρίου, 2023

Τι είναι το μοντέλο γλώσσας BERT και πώς λειτουργεί;

Το BERT είναι ένα μοντέλο γλώσσας AI που ανέπτυξε η πριν από τον Bard. Εξυπηρετεί έναν διαφορετικό σκοπό και λειτουργούσε χρόνια πριν το OpenAI λανσάρει το . Η Google είναι πρωτοπόρος στην τεχνητή νοημοσύνη, ενσωματώνοντας AI σε Android, έξυπνα ηχεία Nest και πολλά άλλα. Κάθε φορά που αποκτάτε πρόσβαση στο Google Assistant, αυτό απαντά με τεχνητή νοημοσύνη.


Τι σημαίνει BERT;

Το BERT σημαίνει Αντιπροσωπείες κωδικοποιητή διπλής κατεύθυνσης από μετασχηματιστές. Το πλήρες όνομα δεν είναι πολύ χρήσιμο, εκτός εάν είστε εξοικειωμένοι με την ορολογία AI. Ο ευκολότερος τρόπος για να το εξηγήσετε είναι να το αναλύσετε έναν όρο κάθε φορά.

  • Αμφίδρομος σημαίνει ότι η διαδικασία λειτουργεί προς δύο κατευθύνσεις. Κατά τη σάρωση μιας πρότασης, ο BERT αναζητά συσχετισμούς λέξεων αριστερά και δεξιά. Ενώ διαβάζουμε από αριστερά προς τα δεξιά, καταλαβαίνουμε ότι οι σχετικές λέξεις μπορούν να υπάρχουν και στις δύο πλευρές. Ο BERT το ξέρει επίσης.
  • Ένας κωδικοποιητής είναι ένας τρόπος ενθυλάκωσης πληροφοριών με συμπαγή και χρήσιμο τρόπο. Το BERT κωδικοποιεί δεδομένα με τρόπο που έχει νόημα για τους μοναδικούς του σκοπούς.
  • Το BERT χρησιμοποιεί μια εσωτερική αναπαράσταση της γλώσσας για την απλοποίηση και την επιτάχυνση της επεξεργασίας. Το Google Translate χρησιμοποιεί παρόμοια διαδικασία κατά τη μετάφραση μεταξύ περισσότερων από εκατό φυσικών γλωσσών. Το AI δημιουργεί μια εσωτερική γλώσσα που διευκολύνει αυτή τη διαδικασία.
  • Μετασχηματιστές αποτελούν μια κρίσιμης σημασίας έννοια AI. Είναι ένα νευρωνικό δίκτυο που αποτελείται από δύο επίπεδα. Τα επίπεδα προσοχής προσδιορίζουν σε τι πρέπει να εστιάσετε, εκχωρώντας βάρη στο πιο σχετικό κομμάτι δεδομένων. Τα επίπεδα προώθησης μεταδίδουν δεδομένα για να μάθουν πολύπλοκα μοτίβα.

Σε τι διαφέρει το BERT από το Bard;

Η Google χρησιμοποιεί τεχνητή νοημοσύνη για πολλά χρόνια, αλλά το BERT ήταν ένα από τα πρώτα μοντέλα γλώσσας που κυκλοφόρησαν ως ανοιχτού κώδικα, μετά το GPT-1 του OpenAI. Το Generative Pre-trained Transformer 1 του OpenAI χρησιμοποίησε την ιδέα του μετασχηματιστή AI 2017 της Google. Το BERT δεν δέχεται στοιχεία χρήστη. Λειτουργεί στα παρασκήνια για τη βελτίωση των αποτελεσμάτων της Αναζήτησης Google.

Το Bard είναι το πιο πρόσφατο AI της Google, ένα chatbot που απαντά σε ερωτήσεις και ακολουθεί τις εντολές των χρηστών. Είναι ένα μεγάλο μοντέλο γλώσσας παρόμοιο με το GPT-4 του OpenAI ή το Bing της Microsoft. Η Google κυκλοφόρησε το Bard τον Φεβρουάριο του . Σε αντίθεση με το BERT, το Bard δεν είναι έργο ανοιχτού κώδικα. Εάν θέλετε να μάθετε περισσότερα για το Google Bard και πώς λειτουργεί, έχουμε ένα άρθρο που εξηγεί τι μπορεί να κάνει ο Bard.

Πώς εκπαιδεύτηκε ο BERT;

Η Google εκπαίδευσε τον BERT στα άρθρα της Wikipedia και στο Toronto BookCorpus, μια συλλογή δωρεάν διαδικτυακών βιβλίων. Αυτός ο τύπος δεδομένων είναι γνωστός ως κείμενο χωρίς ετικέτα και το BERT χρησιμοποιεί μάθηση χωρίς επίβλεψη. Το AI βλέπει το κείμενο σε ακατέργαστη μορφή χωρίς ανθρώπινη συνεισφορά ή υποδείξεις σχετικά με το νόημα ή τη δομή. Η Google βελτίωσε το μοντέλο για την επεξεργασία φυσικής γλώσσας (NLP), όπως η απάντηση σε ερωτήσεις, η κατανόηση του συναισθήματος και η αναγνώριση ατόμων και οργανισμών.

Όταν η Google κυκλοφόρησε το BERT το 2018, ξεπέρασε τα προηγούμενα μοντέλα με μεγάλη διαφορά. Η Google έδωσε στον BERT μια σημαντική ενημέρωση τον Οκτώβριο του 2019 και άρχισε να τη χρησιμοποιεί για να βελτιώσει τα αποτελέσματα αναζήτησης.

Πώς χρησιμοποιεί η Google το BERT;

Η Google χρησιμοποιεί πλέον το BERT που εκτελείται σε Google Cloud TPU για να βελτιώσει την ικανότητα της Αναζήτησης Google να κατανοεί το ερώτημά σας και να παρέχει τα πιο σχετικά αποτελέσματα αναζήτησης. Η Αναζήτηση Google μπορεί να κατανοήσει μεγάλες, συνομιλητικές ερωτήσεις που περιέχουν προθέσεις όπως “για” και “να”, χάρη στην αμφίδρομη κατανόηση του BERT που λαμβάνει υπόψη την επιρροή των γύρω λέξεων.

Η Αναζήτηση Google συλλέγει και ευρετηριάζει δεδομένα από δισεκατομμύρια διαφορετικούς ιστότοπους. Η κατανόηση της γλώσσας, του πλαισίου και του θέματος είναι κρίσιμη για την εύρεση σχετικών καταχωρίσεων και την εμφάνιση των πιο σημαντικών λεπτομερειών. Η Google έδωσε ένα εξαιρετικό παράδειγμα ανάρτηση σχετικά με την ενσωμάτωση του BERT στην αναζήτηση.

Η Google μοιράστηκε ένα παράδειγμα του τρόπου με τον οποίο το BERT βελτιώνει τη συνάφεια αναζήτησης.

Πηγή: Google

Σε μια αναζήτηση για το “2019 ο ταξιδιώτης της Βραζιλίας στις ΗΠΑ χρειάζεται βίζα”, ο BERT αναγνωρίζει την πρόθεση “να” προτείνει τα αποτελέσματα να εμφανίζουν καταχωρίσεις σχετικά με έναν Βραζιλιάνο που παίρνει βίζα για να επισκεφθεί τις ΗΠΑ Τα προηγούμενα αποτελέσματα αναζήτησης εμφανίζουν εσφαλμένα πληροφορίες για έναν πολίτη των ΗΠΑ που λαμβάνει βίζα για να πάει στη Βραζιλία. Τώρα, η Αναζήτηση Google κατανοεί ολόκληρο το ερώτημα αντί να προσδιορίζει απλώς τις αντιστοιχίσεις λέξεων-κλειδιών.

Η Google μοιράστηκε ένα παράδειγμα του τρόπου με τον οποίο το BERT βελτιώνει το πλαίσιο αναζήτησης.

Πηγή: Google

Ένα άλλο παράδειγμα, «οι αισθητικοί στέκονται πολύ στη δουλειά», δείχνει την επίγνωση του πλαισίου των λέξεων-κλειδιών. Προηγουμένως, η Αναζήτηση Google ταίριαζε με τον όρο “αυτόνομη”, αλλά η BERT αναγνωρίζει σωστά ότι το ερώτημα αφορά τους αισθητικούς που στέκονται στα πόδια τους ενώ εργάζονται. Η Google ολοκληρώνει αυτήν την ανάρτηση ιστολογίου αναγνωρίζοντας ότι “Η αναζήτηση δεν είναι ένα λυμένο πρόβλημα”.

Το Shopping Graph της Google, που παρουσιάστηκε το 2020, χρησιμοποιεί τεχνητή νοημοσύνη για να βελτιώσει τις αναζητήσεις προϊόντων. Το 2021, η Google παρουσίασε το Multitask Unified Model (MUM), περιγράφοντάς το ως 1.000 φορές πιο ισχυρό από το BERT. Η Multisearch έφτασε το , επιτρέποντάς σας να βελτιώσετε την αναζήτηση εικόνων με λέξεις-κλειδιά κειμένου.

Τα τελευταία και μεγαλύτερα νέα σχετικά με το Google AI είναι το Bard, ένα chatbot στο οποίο μπορείτε να έχετε πρόσβαση bard.google.com. Ωστόσο, τα αποτελέσματα του Bard μπορεί να μην είναι ακριβή, επομένως χρειάζεστε ακόμα την Αναζήτηση Google. Για να μάθετε περισσότερα σχετικά με τα chatbots, ανατρέξτε στον οδηγό μας για μοντέλα μεγάλων γλωσσών. Φέτος, η Google έφερε επίσης το γενετικό AI στην αναζήτηση με τη νέα εμπειρία αναζήτησης που βασίζεται σε AI (SGE). Μπορεί να δείτε ένα πλαίσιο Generative AI στην κορυφή των αποτελεσμάτων αναζήτησης με μια επισκόπηση κειμένου, εικόνες και βίντεο.

Δεδομένου ότι η τεχνητή νοημοσύνη της Google προχωρά ζωντανά στο cloud, μπορείτε να έχετε πρόσβαση σε αυτήν την ισχυρή τεχνολογία με ένα τηλέφωνο Android, , υπολογιστή ή ένα ωραίο Chromebook. Ωστόσο, το BERT εξακολουθεί να χρησιμοποιείται και εξακολουθεί να διαδραματίζει σημαντικό ρόλο στην Αναζήτηση Google.



androidpolice.com

ΑΦΗΣΤΕ ΜΙΑ ΑΠΑΝΤΗΣΗ

εισάγετε το σχόλιό σας!
παρακαλώ εισάγετε το όνομά σας εδώ

Stay Connected

4,234ΥποστηρικτέςΚάντε Like
34ΑκόλουθοιΑκολουθήστε
3,542ΑκόλουθοιΑκολουθήστε
432ΑκόλουθοιΑκολουθήστε
321ΑκόλουθοιΑκολουθήστε
251ΣυνδρομητέςΓίνετε συνδρομητής

ΠΡΟΣΦΑΤΑ ΑΡΘΡΑ