Module token_type

Utilities for working with llama_token_type values.

Structs

• LlamaTokenAttrs
  A set of LlamaTokenAttrs

Enums

• LlamaTokenAttr
  A rust flavored equivalent of llama_token_type.
• LlamaTokenTypeFromIntError
  An error type for LlamaTokenType::try_from.