TokenizerFunction Interfaccia

public interface TokenizerFunction

Rappresenta un metodo di callback che può suddividere una stringa nei token del componente.

Riepilogo dei metodi

Modificatore e tipo	Metodo e descrizione
abstract java.util.List<Token>	tokenize(String text, String locale) Metodo di callback che può suddividere una stringa nei token del componente.

public abstract List tokenize(String text, String locale)

Metodo di callback che può suddividere una stringa nei token del componente.

Parametri:

text - Testo di input.

locale - Facoltativo, identifica le impostazioni locali del testo di input.

Restituisce:

Elenco degli oggetti Token trovati.