Token

Ein Token ist ein kleiner Teil von einem Wort, mit dem eine KI arbeitet. Manchmal ist ein Token ein ganzes Wort, manchmal nur ein Teil davon. Das Wort »Roboterarm« könnte die KI zum Beispiel in die zwei Token »Roboter« und »arm« zerlegen. Wenn eine KI einen Text schreibt, setzt sie viele Token hintereinander zusammen – so wie man ein Bild aus vielen kleinen Puzzleteilen zusammensetzt.

Token