List of all items

Structs

• SegmentedToken
• SubdivisionMap
• augmentation::AugmentationClassify
• augmentation::AugmentationDetectLanguage
• augmentation::AugmentationDetectScript
• normalization::NormalizationLowercase
• normalization::NormalizationRustStemmers
• segmentation::DecompositionAhoCorasick
• segmentation::DecompositionFst
• segmentation::NaiveWordSplitter
• segmentation::UnicodeSentenceSplitter
• segmentation::UnicodeWordSplitter

Enums

• SegmentedTokenKind
• UseOrSubdivide

Traits

• augmentation::Augmenter
• chain::ChainAugmenter
• chain::ChainSegmenter
• chain::StartSegmentationChain
• segmentation::Segmenter