Google T5 erreicht 88,9 Punkte im SuperGLUE-Benchmark und nähert sich damit der menschlichen Baseline von 89,8
(super.gluebenchmark.com)SuperGLUE ist eine Sammlung von Daten zum Trainieren, Bewerten und Analysieren von Systemen für das Verständnis natürlicher Sprache.
Als der Fortschritt der Technik begann, die Baseline des bisherigen GLUE-Maßstabs zu übertreffen, wurde SuperGLUE neu geschaffen. Doch auch dieser Wert scheint bald übertroffen zu werden.
2 Kommentare
Weiterführende Lektüre
Was ist das KI-Sprachmodell „BERT“?: http://www.aitimes.kr/news/articleView.html?idxno=13117
BERT näher betrachtet: http://docs.likejazz.com/bert/
Google T5 (Text-To-Text Transfer Transformer)