Ereignis
BERT untersucht Sprachkontext
Ein Forschungsteam stellte 2018 BERT vor, ein vortrainiertes Modell auf Basis der Transformer-Architektur für Aufgaben des Sprachverstehens. Es berücksichtigt bei der Darstellung von Wörtern Kontext auf beiden Seiten. Beim Vortraining sagte das Modell unter anderem verdeckte Textteile aus dem umgebenden Kontext voraus; anschließend ließ es sich für konkrete Aufgaben weitertrainieren. Google kündigte im November die Freigabe von Code und vortrainierten Modellen an. Quelle
Die zunächst im November 2018 freigegebenen Modelle waren laut Google englischsprachig. Im Oktober 2019 beschrieb das Unternehmen eine separate Anwendung von BERT-Modellen in seiner Suchmaschine: Für die Rangfolge erwartete es Verbesserungen beim Verständnis von etwa jeder zehnten englischsprachigen Suchanfrage in den USA. Das ist eine damalige Anbieterangabe und keine weltweite Erfolgsquote. Forschungsfreigabe und Such-Ankündigung
Belege
Forschungsfreigabe und Suchanwendung: Google-Mitteilungen 2018 und 2019 mit begrenzter Anbieterzahl.
Forschungsarbeit und Google-Ankündigung: Modellansatz und Freigabe.
Offen
Unabhängige Untersuchungen zur tatsächlichen Wirkung auf Suchergebnisse und zu weiteren Sprachen prüfen. / Investigate independent evidence about actual effects on search results and additional languages.