Repository Issues

niieani/gpt-tokenizer

The fastest JavaScript BPE Tokenizer Encoder Decoder for OpenAI's GPT models (gpt-5, gpt-o*, gpt-4o, etc.). Port of OpenAI's tiktoken with additional features.

Auf GitHub ansehen
Stars
 (808 Stars)
Forks
 (56 Forks)
Indexierte Issues
 (1 indexiertes Issue)
offene Einsteiger-Issues
 (0 offene Einsteiger-Issues)
Zuletzt indexiert
11. Juli 2026
Letzter GitHub Push
10. Feb. 2026
Lizenz
MIT License
Contributing Guide
Kein Contributing Guide
Code of Conduct
Kein Code of Conduct
Hauptsprache
TypeScript
PR-Merge-Metriken
 (PR-Metriken ausstehend)
Einsteiger-Labels
Keine Einsteiger-Labels indexiert

Issues

1 offenes indexiertes Issue

RSSAtom
Offen
Picture tokens
help wanted

niieani/gpt-tokenizer #41 27. Jan. 2024 geöffnet · TypeScript · 808 Stars

Warum empfohlenNoch niemand zugewiesen · Einsteigerfreundliches Label vorhanden
Noch niemand zugewiesenEinsteigerfreundliches Label vorhanden
3 Kommentare1 Reaktion0 zugewiesene Personen