C# Класс NClassifier.DefaultTokenizer

Наследование: ITokenizer

Показать файл Открыть проект

Открытые свойства

Свойство	Тип	Описание
BREAK_ON_WHITESPACE	int
BREAK_ON_WORD_BREAKS	int

Открытые методы

Метод	Описание
DefaultTokenizer ( ) : System
DefaultTokenizer ( int tokenizerConfig ) : System
DefaultTokenizer ( string regularExpression ) : System
Tokenize ( string input ) : string[]

Описание методов

DefaultTokenizer() публичный Метод

public DefaultTokenizer ( ) : System
Результат	System

DefaultTokenizer() публичный Метод

public DefaultTokenizer ( int tokenizerConfig ) : System
tokenizerConfig	int
Результат	System

DefaultTokenizer() публичный Метод

public DefaultTokenizer ( string regularExpression ) : System
regularExpression	string
Результат	System

Tokenize() публичный Метод

public Tokenize ( string input ) : string[]
input	string
Результат	string[]

Описание свойств

BREAK_ON_WHITESPACE публичное статическое свойство

Use a "\s" (whitespace) regex to split the string pass in to classify

public static int BREAK_ON_WHITESPACE
Результат	int

BREAK_ON_WORD_BREAKS публичное статическое свойство

Use a "\W" (non-word character) regex to split the string passed in to classify

public static int BREAK_ON_WORD_BREAKS
Результат	int