AI-gidsen · 1 min lezen

Wat is een token in AI?

Een token is de eenheid waarin een AI-model tekst leest, schrijft en factureert. Daaraan hangen woorden, kosten en het contextvenster.

Tekst valt uiteen in lichtgevende tegels die naar een meter en een stapel munten stromen.

Een token is de kleine eenheid waarin een taalmodel tekst leest, schrijft en factureert. Het kan een kort woord, een deel van een woord of een leesteken zijn.

Waarom tokens de rekening bepalen

Aanbieders tellen invoer en uitvoer in tokens, niet in woorden. Dezelfde taak kan per taal en model meer of minder tokens kosten, en uitvoer is vaak duurder dan invoer.

Wat u controleert voor het versturen

Schat de kosten met de tokenprijs van de aanbieder en controleer het contextvenster voordat u een lang document stuurt. De Engelse versie van dit onderwerp heeft dezelfde artikelnaam.

Geschreven door

Chunyu Cai

Chunyu Cai is CEO van Lotook, LLC en ondernemer. Hij schrijft over AI-modellen, agenten en hoe ze het dagelijkse werk veranderen. Chunyu Cai heeft een masterdiploma van Imperial College London.