分別采用三種方式讀取大小為74GB共約6億條記錄的文件,BufferedReader 性能最好生蚁,RandomAccessFile最差邻梆,性能差距超過1百倍
<pre>
public static void scannerReader(String filename){
File f = new File(filename);
if(f.exists() && f.isFile() && f.length()>0){
try {
long times=0;
long startTime = System.currentTimeMillis();
Scanner sc = new Scanner(f);
while(sc.hasNextLine()){
String temp = sc.nextLine();
times++;
}
sc.close();
long endTime = System.currentTimeMillis();
System.out.println("Scanner 執(zhí)行時間:"+(endTime-startTime) +"當前輸出第:"+times+"條數(shù)據(jù)");
} catch (FileNotFoundException e) {
e.printStackTrace();
} catch (IOException e) {
e.printStackTrace();
}
}
}
public static void bufferReader(String filename) throws Exception{
BufferedReader reader = null;
try {
File read= FileUtils.getFile(filename);
reader = new BufferedReader(new FileReader(read.getAbsoluteFile()));
String line = null;
long times=0;
long startTime = System.currentTimeMillis();
while((line = reader.readLine()) != null) {
times++;
}
long endTime = System.currentTimeMillis();
System.out.println("BufferedReader 執(zhí)行時間:"+(endTime-startTime) +"當前輸出第:"+times+"條數(shù)據(jù)");
} catch (IOException e) {
e.printStackTrace();
}finally {
}
}
public static void ranrReader(String filename)throws Exception{
RandomAccessFile raf = null;
FileChannel fc = null;
try {
raf = new RandomAccessFile(filename, "r");
//raf.seek(0);
fc = raf.getChannel();
ByteBuffer buffer = ByteBuffer.allocate(100000);
int readcount = -1;
long times=0;
long startTime = System.currentTimeMillis();
while ((readcount = fc.read(buffer)) != -1) {
String line = raf.readLine();
times++;
}
long endTime = System.currentTimeMillis();
System.out.println("RandomAccessFile 執(zhí)行時間:"+(endTime-startTime) +"當前輸出第:"+times+"條數(shù)據(jù)");
} catch (Exception e) {
e.printStackTrace();
}finally {
}
}
</pre>
BufferedReader 執(zhí)行時間:244007當前輸出第:600037902條數(shù)據(jù)
Scanner 執(zhí)行時間:2219763當前輸出第:600037902條數(shù)據(jù)
RandomAccessFile 執(zhí)行時間:35246077當前輸出第:600037902條數(shù)據(jù)
java大文件讀取效率對比
最后編輯于 :
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
- 文/潘曉璐 我一進店門,熙熙樓的掌柜王于貴愁眉苦臉地迎上來郁惜,“玉大人,你說我怎么就攤上這事兆蕉。” “怎么了虎韵?”我有些...
- 文/不壞的土叔 我叫張陵,是天一觀的道長包蓝。 經(jīng)常有香客問我,道長养晋,這世上最難降的妖魔是什么? 我笑而不...
- 正文 為了忘掉前任绳泉,我火速辦了婚禮,結(jié)果婚禮上,老公的妹妹穿的比我還像新娘冒嫡。我一直安慰自己,他們只是感情好孝凌,可當我...
- 文/花漫 我一把揭開白布。 她就那樣靜靜地躺著蟀架,像睡著了一般。 火紅的嫁衣襯著肌膚如雪片拍。 梳的紋絲不亂的頭發(fā)上,一...
- 文/蒼蘭香墨 我猛地睜開眼颓屑,長吁一口氣:“原來是場噩夢啊……” “哼!你這毒婦竟也來了揪惦?” 一聲冷哼從身側(cè)響起遍搞,我...
- 正文 年R本政府宣布,位于F島的核電站凝化,受9級特大地震影響稍坯,放射性物質(zhì)發(fā)生泄漏搓劫。R本人自食惡果不足惜,卻給世界環(huán)境...
- 文/蒙蒙 一枪向、第九天 我趴在偏房一處隱蔽的房頂上張望。 院中可真熱鬧秘蛔,春花似錦、人聲如沸深员。這莊子的主人今日做“春日...
- 文/蒼蘭香墨 我抬頭看了看天上的太陽遮糖。三九已至叠赐,卻和暖如春,著一層夾襖步出監(jiān)牢的瞬間芭概,已是汗流浹背。 一陣腳步聲響...
推薦閱讀更多精彩內(nèi)容
- 前言 前不久準備寫一個關(guān)于文本處理的小程序玷或,需要高效地對文本進行讀取。于是就歸納了一下常見的文件讀取方法偏友,并測試了...
- 從三月份找實習到現(xiàn)在京景,面了一些公司,掛了不少确徙,但最終還是拿到小米醒串、百度鄙皇、阿里、京東育苟、新浪较鼓、CVTE违柏、樂視家的研發(fā)崗...
- 申明一下這個內(nèi)容是在weex項目中的,地址在這里 Scripts There are several script...
- 一漱竖、實戰(zhàn)配置: 電腦:聯(lián)想v480,系統(tǒng)win10畜伐,64bit,采用UEFI、GPT分區(qū)(如何查看?——打開運行万矾,...