快捷導(dǎo)航

java IO流將一個(gè)文件拆分為多個(gè)子文件代碼示例

更新時(shí)間：2017年12月22日 13:58:45 作者：人圭先生

這篇文章主要介紹了java IO流將一個(gè)文件拆分為多個(gè)子文件代碼示例，具有一定借鑒價(jià)值，需要的朋友可以參考下。

文件分割與合并是一個(gè)常見需求，比如：上傳大文件時(shí)，可以先分割成小塊，傳到服務(wù)器后，再進(jìn)行合并。很多高大上的分布式文件系統(tǒng)（比如：google的GFS、taobao的TFS）里，也是按block為單位，對(duì)文件進(jìn)行分割或合并。

看下基本思路：

如果有一個(gè)大文件，指定分割大小后（比如：按1M切割）

step 1：

先根據(jù)原始文件大小、分割大小，算出最終分割的小文件數(shù)N

step 2:

在磁盤上創(chuàng)建這N個(gè)小文件

step 3:

開多個(gè)線程（線程數(shù)=分割文件數(shù)），每個(gè)線程里，利用RandomAccessFile的seek功能，將讀取指針定位到原文件里每一段的段首位置，然后向后讀取指定大?。矗悍指顗K大?。罱K寫入對(duì)應(yīng)的分割文件，因?yàn)槎嗑€程并行處理，各寫各的小文件，速度相對(duì)還是比較快的。

下面代碼是將一個(gè)文件拆分為多個(gè)子文件，每個(gè)大小是100K

package testIO;
import java.io.File;
import java.io.FileInputStream;
import java.io.FileOutputStream;
import java.util.Arrays;
public class subStream {
	public static void main(String[] args) {
		//先將源文件讀取到內(nèi)存中 
		int eachSize=100*1024;
		File srcFile =new File("F:/test/test.txt");
		//創(chuàng)建一個(gè)文件對(duì)象 
		splitFile(srcFile,eachSize);
	}
	public static void splitFile(File srcFile,int eachSize){
		//判斷文件是否符合拆分要求 
		if(srcFile.length()==0){
			throw new RuntimeException("文件不符合拆分要求");
		}
		byte[] fileContent= new byte[(int) srcFile.length()];
		try {
			//將文件內(nèi)容讀取到內(nèi)存中 
			FileInputStream fis=new FileInputStream(srcFile);
			fis.read(fileContent);
			fis.close();
		}
		catch (Exception e) {
			e.printStackTrace();
		}
		//計(jì)算要次要拆分為多少份 
		int fileNumber;
		if(fileContent.length%eachSize==0){
			fileNumber = fileContent.length/eachSize;
		} else{
			fileNumber = fileContent.length/eachSize+1;
		}
		for (int i=0;i<fileNumber;i++){
			String fileName = srcFile.getName()+"-"+i+".txt";
			File fi = new File(srcFile.getParent(), fileName);
			//在當(dāng)前文件路徑下創(chuàng)建拆分的文件 
			byte[] eachContent;
			//將源文件內(nèi)容復(fù)制到拆分的文件中 
			if(i!=fileNumber-1){
				eachContent = Arrays.copyOfRange(fileContent, eachSize*i, eachSize*(i+1));
			} else{
				eachContent = Arrays.copyOfRange(fileContent, eachSize*i, fileContent.length);
			}
			try {
				FileOutputStream fos = new FileOutputStream(fi);
				fos.write(eachContent);
				fos.close();
				System.out.printf("輸出子文件 %s,其大小是 %d,每個(gè)的大小是%d\n",fi.getAbsoluteFile(),fi.length(),eachContent.length);
			}
			catch (Exception e) {
				// TODO: handle exception 
				e.printStackTrace();
			}
		}
	}
}

總結(jié)

以上就是本文關(guān)于java IO流將一個(gè)文件拆分為多個(gè)子文件代碼示例的全部內(nèi)容，希望對(duì)大家有所幫助。感興趣的朋友可以繼續(xù)參閱本站其他相關(guān)專題，如有不足之處，歡迎留言指出。感謝朋友們對(duì)本站的支持！

您可能感興趣的文章: