C# Class ilcclib.Tokenizer.CTokenizer

Afficher le fichier Open project: soywiz/ilcc Class Usage Examples

Private Properties

Свойство	Type	Description
CountLinesBetween	void

Méthodes publiques

Méthode	Description
CTokenizer ( string Text, bool TokenizeSpaces = false ) : System
GetTokenPositionAtCurrentPos ( ) : CTokenPosition
ReadNext ( ) : CToken
ReadUntilSequence ( string Sequence ) : string
SkipUntilSequence ( string Sequence ) : int
Tokenize ( ) : IEnumerable

Private Methods

Méthode	Description
CountLinesBetween ( int Start, int End ) : void

Method Details

CTokenizer() public méthode

public CTokenizer ( string Text, bool TokenizeSpaces = false ) : System
Text	string
TokenizeSpaces	bool
Résultat	System

GetTokenPositionAtCurrentPos() public méthode

public GetTokenPositionAtCurrentPos ( ) : CTokenPosition
Résultat	CTokenPosition

ReadNext() public méthode

public ReadNext ( ) : CToken
Résultat	CToken

ReadUntilSequence() public méthode

public ReadUntilSequence ( string Sequence ) : string
Sequence	string
Résultat	string

SkipUntilSequence() public méthode

public SkipUntilSequence ( string Sequence ) : int
Sequence	string
Résultat	int

Tokenize() public méthode

public Tokenize ( ) : IEnumerable
Résultat	IEnumerable