java 中的tokenizer 问题

今天碰到个程序，其中老是出现tokenizer这个词，不明白这是什么东西，还是 StringTokenizer， 请问这是干什么用的呀， 有没有关于这个类的解释，或者有网站介绍怎么用tokenizer的，谢谢了

//分离函数
StringTokenizer
给你个例子。

//取得允许上传的文件类型
public Vector getAllowedExtList(String filePattern) {

//允许上传的文件列表
Vector m_allowedExtList = new Vector();

//分离函数
StringTokenizer token = new StringTokenizer(filePattern.trim(), ",");

//允许上传文件类型统计总数
int count = token.countTokens();

//存放到 m_allowedExtList 中
for (int i = 0; i < count; i++)
m_allowedExtList.addElement(token.nextToken().toString());
return m_allowedExtList;
}