Java中的`StringTokenizer`类是处理字符串的一种工具，它允许我们根据特定的分隔符将一个字符串分解成多个令牌或子字符串。这个类在早期的Java版本中被广泛使用，但在Java 5之后，`split()`方法的引入使得`StringTokenizer`的使用频率有所下降，尽管如此，理解它的原理和用法仍然是Java程序员必备的知识点。
`StringTokenizer`的主要功能是通过指定的分隔符来分割字符串。当我们有一个包含多个部分的字符串，如"北京,上海,广州"，并且希望将其拆分成单独的城市名，`StringTokenizer`就能派上用场。下面我们将深入探讨`StringTokenizer`的使用方法和相关属性。
1. **创建StringTokenizer对象：**
要使用`StringTokenizer`，首先需要创建其对象，通常使用以下两种构造方法：
- `StringTokenizer(String str)`：使用默认的分隔符（空格、制表符、换行符）对字符串进行分解。
- `StringTokenizer(String str, String delimiters)`：使用指定的分隔符字符串进行分解。
2. **枚举令牌：**
创建`StringTokenizer`对象后，我们可以使用以下方法来获取和检查令牌：
- `hasMoreTokens()`：检查是否还有未处理的令牌。
- `nextToken()`：返回下一个令牌，如果没有更多令牌，会抛出`NoSuchElementException`异常。
3. **处理空白字符：**
默认情况下，`StringTokenizer`会忽略连续的分隔符和前导/尾随空白。如果你想保留这些空白，可以调用`useDelimiter()`方法并传入一个包含空格、制表符等的分隔符字符串。
4. **处理非分隔符：**
如果你想将某个字符视为非分隔符，可以使用`quoteCharacter()`方法，指定该字符将被视为一个整体，而不是分隔符的一部分。
5. **示例代码：**
```java
String str = "Java-StringTokenizer1, 示例 文件 解析";
StringTokenizer tokenizer = new StringTokenizer(str, "-, ");
while (tokenizer.hasMoreTokens()) {
System.out.println(tokenizer.nextToken());
}
```
上述代码将输出：
```
Java
StringTokenizer1
示例
文件
解析
```
6. **与`split()`方法的比较：**
自Java 5起，`String`类提供了`split()`方法，它更简洁且支持正则表达式。例如，上述示例使用`split()`可简化为：
```java
String str = "Java-StringTokenizer1, 示例 文件 解析";
String[] tokens = str.split("-|, |\\s+");
for (String token : tokens) {
System.out.println(token);
}
```
这两者都能完成相同的工作，但`split()`在处理复杂分隔规则时更具灵活性。
总结来说，`StringTokenizer`是Java中处理字符串分隔的经典工具，虽然现在更多地被`split()`方法取代，但它仍然在某些特定场景下有用。了解和掌握`StringTokenizer`的使用有助于理解Java的历史和发展，以及如何根据需求选择合适的方法来处理字符串。在实际开发中，根据项目需求和性能考虑，合理选择`StringTokenizer`或`split()`是非常重要的。
