Struct MorphAnalyzer

pub struct MorphAnalyzer {
    pub fst: Map<Vec<u8>>,
    pub word_parses: Vec<Vec<Parse>>,
    pub tags: Vec<SmallVec<[Grammem; 8]>>,
    pub lemmas: Vec<SmallString<[u8; 16]>>,
    pub paradigms: Vec<Vanga>,
    pub lemmas_rows: Vec<Vec<u32>>,
}

Морфологический анализатор, образованный из словаря.

Fields

fst: Map<Vec<u8>>

word_parses: Vec<Vec<Parse>>

tags: Vec<SmallVec<[Grammem; 8]>>

lemmas: Vec<SmallString<[u8; 16]>>

paradigms: Vec<Vanga>

lemmas_rows: Vec<Vec<u32>>

Implementations

impl MorphAnalyzer

pub fn id_forms<'a>( &'a self, word: &'a str, ids: &'a [u32], word_id: Option<u64>, grammemes: &'a Option<Vec<Grammem>>, ) -> impl Iterator<Item = (u64, &'a Parse)>

Фильтрация нужных Parse слов(а) в зависимости от запроса граммем. Возвращается итератор вместе с ParseId, индексом в fst::Map.

impl MorphAnalyzer

pub fn vangovanie( &self, word: &str, ) -> Result<Option<Vec<VangovanieRes>>, ParseErr>

Предсказание слова, если оно не имеется в словаре.

impl MorphAnalyzer

pub fn from_dictionary(dictionary: Dictionary, fst: PathBuf) -> MopsResult<Self>

Создание анализатора из словаря.

pub fn parse_word(&self, word: &str) -> Result<ParsedWords, ParseErr>

Парсинг слова.

pub fn normalized_word(&self, word: &str) -> Result<NormalizedWords, ParseErr>

Нормализация слова.

impl MorphAnalyzer

Основная функциональность связана с разбиением слова по морфемам, определением парадигм и поиском всех возможных тэгов и нормальных форм.

pub fn create<P: AsRef<Path>>( dict_path: P, out_dir: P, lang: Language, ) -> MopsResult<Dictionary>

Первичное создание словаря.

dict_path - путь до словаря OpenCorpora
out_dir - место, где будет храниться fst и бинарная часть словаря для будущего открытия
language - язык, по дефолту и пока единственный, Русский.

pub fn create_with_reader<P: AsRef<Path>>( dict_path: P, out_dir: P, lang: Language, ) -> MopsResult<Dictionary>

Первичное создание словаря по переданному пути с чтением из буфера.

Чтение из буфера несколько медленнее, чем из строки, но занимает сильно меньше памяти.

dict_path - путь до словаря OpenCorpora
out_dir - место, где будет храниться fst и бинарная часть словаря для будущего открытия
language - язык, по дефолту и пока единственный, Русский.

pub fn init<P: AsRef<Path>>(dictionary: Dictionary, dir: P) -> MopsResult<Self>

Инициализация из словаря.

Отличается от словаря отсутствием мета-информации и тем, что поднимает в оперативную память fst-словарь.

pub fn open<P: AsRef<Path>>(path: P) -> MopsResult<Self>

Открытие словаря из dict.json файла и инициализация MorphAnalyzer-а.

pub fn open_from_reader<P: AsRef<Path>>(path: P) -> MopsResult<Self>

Открытие словаря из dict.json файла, используя Reader для файла, и инициализация MorphAnalyzer-а.

WARN! ОЧЕНЬ долгий процесс чтения. Рекомендуется использование только при очень ограниченной оперативной памяти.

pub fn parse(&self, word: &str) -> MopsResult<ParsedWords>

Парсинг слова. Получение всех возможных результатов.

Все варианты парсинга возвращаются в отсортированном порядке, гарантируя единообразие выдачи между запусками.

pub fn normalize(&self, word: &str) -> MopsResult<NormalizedWords>

Нормализация слова. Получение всех возможных результатов.

Все варианты нормализации возвращаются в отсортированном порядке, гарантируя единообразие выдачи между запусками.

pub fn is_known(&self, word: &str) -> bool

Проверка слова на наличие в словаре.

pub fn parse_get( &self, word: &str, index: usize, ) -> MopsResult<Option<ParsedWord>>

Парсинг слова и взятие нужного по индексу набора граммем.

pub fn parse_grammemes( &self, word: &str, grammemes: Vec<Grammem>, ) -> MopsResult<Option<ParsedWord>>

Парсинг слова и взятие нужного слова в зависимости от нужного набора граммем.

pub fn normalize_get( &self, word: &str, index: usize, ) -> MopsResult<Option<NormalizedWord>>

Нормализация слова и взятие по индексу формы слова с ее граммемами.

pub fn normalize_grammemes( &self, word: &str, grammemes: Vec<Grammem>, ) -> MopsResult<Option<NormalizedWord>>

Нормализация слова и взятие нужного слова в зависимости от нужного набора граммем.

pub fn inflect_inizio(&self, word: &str) -> MopsResult<Option<InflectWords>>

Приведение к начальной форме слова. Начальная форма может отличаться от нормализованной.

pub fn inflect_forms( &self, word: &str, grammemes: Vec<Grammem>, ) -> MopsResult<Option<InflectWords>>

Приведение слова к нужной форме слова с указанными граммемами.

pub fn inflect_parsed( &self, parse: ParsedWord, grammemes: Vec<Grammem>, ) -> MopsResult<Option<InflectWords>>

Приведение разобранного слова к нужной форме слова с указанными граммемами.

pub fn declension(&self, word: &str) -> MopsResult<Vec<InflectWords>>

Полное склонение/спряжение слова по всем формам.

WARN: Не быстрая функция. Если есть необходимый набор слов, который нужно будет искать во всех формах в тексте, лучше сделать вызов declension() ко всем словам в начале работы приложения.

pub fn declension_get( &self, word: &str, index: usize, ) -> MopsResult<Option<InflectWords>>

Полное склонение/спряжение слова и взятие нужного по индексу результата.

WARN: Не быстрая функция. Если есть необходимый набор слов, который нужно будет искать во всех формах в тексте, лучше сделать вызов declension_get() ко всем словам в начале работы приложения.

pub fn declension_parsed( &self, parse: &ParsedWord, ) -> MopsResult<Option<InflectWords>>

Полное склонение/спряжение разобранного слова.

WARN: Не быстрая функция. Если есть необходимый набор слов, который нужно будет искать во всех формах в тексте, лучше сделать вызов declension_parsed() ко всем словам в начале работы приложения.

Trait Implementations

impl Allocative for MorphAnalyzer

fn visit<'allocative_a, 'allocative_b: 'allocative_a>( &self, visitor: &'allocative_a mut Visitor<'allocative_b>, )

impl Debug for MorphAnalyzer

fn fmt(&self, f: &mut Formatter<'_>) -> Result

Formats the value using the given formatter.