Wat is 'next-token prediction'?
Volgende-token voorspelling is het enige wat een model doet: het volgende stuk tekst kiezen, toevoegen en opnieuw beginnen.
~/ai-glossary
$ glossary
9 of 14 in #the-basics
Er is geen plan en geen concept. Het schrijft één stuk tegelijk, en elk stuk wordt gekozen op basis van alles ervoor.
Alles wat op redeneren lijkt, komt uit deze lus. Weten dat dit zo is, maakt dat de mislukkingen logisch zijn.
Was this page helpful?