Noen må oppdatere tokenizer-reguskriptet.
Sam Paech
Sam Paech5. aug., 19:55
Chatgpt elsker em-dash så mye at det er ikke mindre enn **40** tokens i tokenizeren som inneholder en "―" Du kan knuse dem for godt med logit-skjevhet. Kodebit >>
1,69K