Произвести чистую токенизацию без формирования морф-вариантовВладелец: Pullenti.Morph.MorphologyService
Синтаксис
Параметры
- text
Тип: string
исходный текст
Возвращаемое значение
Тип: List<MorphToken>
последовательность результирующих лексем
SDK Pullenti programming reference for C# |
Tokenize - метод |
Произвести чистую токенизацию без формирования морф-вариантовВладелец: Pullenti.Morph.MorphologyService
Тип: string
исходный текст
Тип: List<MorphToken>
последовательность результирующих лексем