Verwendungen von Schnittstelle
opennlp.tools.tokenize.TokenContextGenerator

Packages, die TokenContextGenerator verwenden

Package	Beschreibung
opennlp.tools.tokenize	Contains classes related to finding token or words in a string.
opennlp.tools.tokenize.lang

Verwendungen von TokenContextGenerator in opennlp.tools.tokenize

Klassen in opennlp.tools.tokenize, die TokenContextGenerator implementieren

Modifizierer und Typ	Klasse	Beschreibung
class	DefaultTokenContextGenerator	A default TokenContextGenerator which produces events for maxent decisions for tokenization.

Methoden in opennlp.tools.tokenize, die TokenContextGenerator zurückgeben

Modifizierer und Typ	Methode	Beschreibung
TokenContextGenerator	TokenizerFactory.getContextGenerator()

Konstruktoren in opennlp.tools.tokenize mit Parametern vom Typ TokenContextGenerator

Modifizierer	Konstruktor	Beschreibung
	TokSpanEventStream(ObjectStream<TokenSample> tokenSamples, boolean skipAlphaNumerics, Pattern alphaNumeric, TokenContextGenerator cg)	Initializes a new event stream based on the data stream using a TokenContextGenerator.
	TokSpanEventStream(ObjectStream<TokenSample> tokenSamples, boolean skipAlphaNumerics, TokenContextGenerator cg)	Initializes a new event stream based on the data stream using a TokenContextGenerator.

Verwendungen von TokenContextGenerator in opennlp.tools.tokenize.lang

Methoden in opennlp.tools.tokenize.lang, die TokenContextGenerator zurückgeben

Modifizierer und Typ	Methode	Beschreibung
TokenContextGenerator	Factory.createTokenContextGenerator(String languageCode, Set<String> abbreviations)	Initializes a customized TokenContextGenerator via a set of abbreviations.