:exclamation: This is a read-only mirror of the CRAN R package repository. rtiktoken — A Byte-Pair-Encoding (BPE) Tokenizer for OpenAI's Large Language Models. Homepage: https://davzim.github.io/rtiktoken/, https://github.com/DavZim/rtiktoken/ Report bugs for this package: https://github.com/DavZim/rtiktoken/issues - View it on GitHub