TokenizerFunction 인터페이스

public interface TokenizerFunction

문자열을 구성 요소 토큰으로 분리할 수 있는 콜백 메서드를 나타냅니다.

메서드 요약

한정자 및 형식	메서드 및 설명
abstract java.util.List<Token>	tokenize(String text, String locale) 문자열을 구성 요소 토큰으로 분리할 수 있는 콜백 메서드입니다.

public abstract List tokenize(String text, String locale)

문자열을 구성 요소 토큰으로 분리할 수 있는 콜백 메서드입니다.

매개 변수:

text - 입력 텍스트입니다.

locale - 선택 사항으로 입력 텍스트의 로캘을 식별합니다.

반환:

찾은 토큰 개체의 목록입니다.