C# Класс Yamool.CWSharp.BigramTokenizer

The standard bigram tokenizer that converting text into a sequence of tokens.
Наследование: ITokenizer
Показать файл Открыть проект

Открытые методы

Метод Описание
BigramTokenizer ( ) : System
Traverse ( string text ) : IEnumerable

Описание методов

BigramTokenizer() публичный Метод

public BigramTokenizer ( ) : System
Результат System

Traverse() публичный Метод

public Traverse ( string text ) : IEnumerable
text string
Результат IEnumerable