现在有一个很大的文件（>5G），我想用JAVA得到这个文件的单词有多少种和总数目，怎么做

单词（word）由字母，数字或下划线组成。遇到的问题是当我每次处理一小部分，但是总是遇到内存溢出错误部分程序如下：
public void readWord(String uri) {
strmap = new HashMap();
map = new HashMap();

try {
long start = System.currentTimeMillis();
input = new FileInputStream(getFile(uri));
channel = ((FileInputStream) input).getChannel();

for (int p = 0; p < 5; p++) {
MappedByteBuffer app = channel.map(MapMode.READ_ONLY, p / 5
* file.length(), file.length() * (p + 1) / 5);
byte[] dst = new byte[BUFFER_SIZE];// 每次读出3K的内容

for (int offset = 0; offset < app.capacity(); offset += BUFFER_SIZE) {
if (app.capacity() - offset >= BUFFER_SIZE) {
for (int i = 0; i < BUFFER_SIZE; i++) {
dst[i] = app.get(offset + i);
mapadd(dst[i]);

}
} else {
for (int i = 0; i < app.capacity() - offset; i++) {
dst[i] = app.get(offset + i);
mapadd(dst[i]);
}
}

String str[] = new String(dst,0,dst.length).split("\\W+");//每次出错的位置
//System.out.println(dst.toString());
for (int i = 0; i < str.length; i++) {
if (strmap.containsKey(str[i])) {
Long bg = strmap.get(str[i]);
strmap.put(str[i], ++bg);
} else {
strmap.put(str[i], 1l);
}
}
}
}
long end = System.currentTimeMillis();
System.out.println("**************************************");
System.out.println((end-start)/1000);
} catch (Exception e) {
// TODO Auto-generated catch block
e.printStackTrace();
}

}
错误异常代码：
Exception in thread "main" java.lang.OutOfMemoryError: Java heap space
at java.lang.String.substring(Unknown Source)
at java.lang.String.subSequence(Unknown Source)
at java.util.regex.Pattern.split(Unknown Source)
at java.lang.String.split(Unknown Source)
at java.lang.String.split(Unknown Source)
at Exec9.readWord(Exec9.java:112)
at Exec9.main(Exec9.java:32)

我需要的是一个解决方案！

import java.io.File;
import java.io.FileInputStream;
import java.io.FileWriter;
import java.util.Scanner;

public class Test2 {
public static void main(String[] args) throws Exception{

Scanner san = new Scanner(System.in);
System.out.println("Input the text:");

String strText = san.nextLine();
String[] strArr = strText.split(" ");

File file = new File("file.txt");
FileWriter input = new FileWriter(file);
input.write(strText);
input.close();

System.out.println("单词的数目" + strArr.length);
}
}

一般的解决方式是一次将文件中的内容读取出来如3000条，然后让程序将他处理完了以后再接着读。你要是一次读的文件太大都放内存里面的话效率低不说，内存也吃不消。尝试下多次读取

把内存扩展到8G

你把源码发来我看看 zhch_1029@163.com 还有你文件是什么格式

你这个肯定溢出了， 尝试把文件分割吧，或者把虚拟机内存设置为5G以上。

你哪儿，有eclipse文件吗？