C# Class NClassifier.DefaultTokenizer

Inheritance: ITokenizer
Afficher le fichier Open project: colin-dumitru/Proiect-AI-2012---GUI

Méthodes publiques

Свойство Type Description
BREAK_ON_WHITESPACE int
BREAK_ON_WORD_BREAKS int

Méthodes publiques

Méthode Description
DefaultTokenizer ( ) : System
DefaultTokenizer ( int tokenizerConfig ) : System
DefaultTokenizer ( string regularExpression ) : System
Tokenize ( string input ) : string[]

Method Details

DefaultTokenizer() public méthode

public DefaultTokenizer ( ) : System
Résultat System

DefaultTokenizer() public méthode

public DefaultTokenizer ( int tokenizerConfig ) : System
tokenizerConfig int
Résultat System

DefaultTokenizer() public méthode

public DefaultTokenizer ( string regularExpression ) : System
regularExpression string
Résultat System

Tokenize() public méthode

public Tokenize ( string input ) : string[]
input string
Résultat string[]

Property Details

BREAK_ON_WHITESPACE public_oe static_oe property

Use a "\s" (whitespace) regex to split the string pass in to classify
public static int BREAK_ON_WHITESPACE
Résultat int

BREAK_ON_WORD_BREAKS public_oe static_oe property

Use a "\W" (non-word character) regex to split the string passed in to classify
public static int BREAK_ON_WORD_BREAKS
Résultat int