Класс StringTokenizer, примеры использования в Java

Класс StringTokenizer, примеры использования в Java

Обработка текста зачастую предполагает синтаксический анализ или разбор форматированной входной строки. Синтаксический анализ подразумевает разделе­ние текста на ряд отдельных частей, так называемых лексем, которые способны пе­редать в определенной последовательности некоторое семантическое значение.

Класс StringTokenizer обеспечивает первую стадию процесса синтаксического анализа, и поэтому его зачастую называют лексическuм анализатором или просто сканером. Этот класс реализует интерфейс Enumeration. Таким образом, задав вход­ную строку, средствами класса StringTokenizer можно перечислить содержащи­еся в ней отдельные лексемы.

Чтобы воспользоваться классом StringTokenizer, следует указать входную и символьную строку, содержащую разделители. Разделители это символы, раз­деляющие лексемы. Читать