Tokenizer 類別

  • 參考
套件:
com.microsoft.bot.dialogs.choices
Maven 成品:
com.microsoft.bot:bot-dialogs:4.14.3
  • java.lang.Object
    • com.microsoft.bot.dialogs.choices.Tokenizer

實作

TokenizerFunction

public class Tokenizer
implements TokenizerFunction

提供預設的Tokenizer實作。

建構函式摘要

建構函式 Description
Tokenizer()

方法摘要

修飾詞與類型 方法與描述
java.util.List<Token> tokenize(String text, String locale)

在空格和標點符號上中斷的簡單Tokenizer。

方法繼承來源 java.lang.Object

java.lang.Object.clone java.lang.Object.equals java.lang.Object.finalize java.lang.Object.getClass java.lang.Object.hashCode java.lang.Object.notify java.lang.Object.notifyAll java.lang.Object.toString java.lang.Object.wait java.lang.Object.wait java.lang.Object.wait

建構函式詳細資料

Tokenizer

public Tokenizer()

方法詳細資料

tokenize

public List tokenize(String text, String locale)

在空格和標點符號上中斷的簡單Tokenizer。 唯一完成的正規化是小寫。

參數:

text - 輸入文字。
locale - 選擇性，識別輸入文字的地區設定。

傳回:

找到的 Token 物件清單。

適用於