完整的文件切片和合并java实现代码

Posted 2020-10-28 linlinyu

最近在学习大数据相关的知识点，其中需要实现文件的切片和合并，完整的java实现代码，以下贴出个人代码，仅供参考

首先建一个SplitUtil工具类，在工具类中有三个方法getSplitFile,getWrite,merge

1，文件拆分代码

public static void getSplitFile(String file,int count){
        
        //预分配文件所占用的磁盘空间，在磁盘创建一个指定大小的文件，“r”表示只读，“rw”支持随机读写
        try {
            RandomAccessFile raf = new RandomAccessFile(new File(file), "r");
            //计算文件大小
            long length = raf.length();
            System.out.println(length);
            //计算文件切片后每一份文件的大小
            long maxSize = length / count;
            
            System.out.println(maxSize);
            
            long offset = 0L;//定义初始文件的偏移量(读取进度)
            //开始切割文件
            for(int i = 0; i < count - 1; i++){ //count-1最后一份文件不处理
                //标记初始化
                long fbegin = offset;
                //分割第几份文件
                long fend = (i+1) * maxSize;
                //写入文件
                offset = getWrite(file, i, fbegin, fend);
                
            }
            
            //剩余部分文件写入到最后一份(如果不能平平均分配的时候)
            if (length - offset > 0) {
                //写入文件
                getWrite(file, count-1, offset, length);
            }
            
        } catch (Exception e) {
            // TODO Auto-generated catch block
            e.printStackTrace();
        }
        
    }

2，getWrite文件写入代码

 

/**
     * 指定文件每一份的边界，写入不同文件中
     * @param file 源文件
     * @param index 源文件的顺序标识
     * @param begin开始指针的位置
     * @param end 结束指针的位置
     * @return long
     */
    public static long getWrite(String file,int index,long begin,long end){
        
        long endPointer = 0L;
        try {
            //申明文件切割后的文件磁盘
            RandomAccessFile in = new RandomAccessFile(new File(file), "r");
            //定义一个可读，可写的文件并且后缀名为.tmp的二进制文件
            RandomAccessFile out = new RandomAccessFile(new File(file + "_" + index + ".tmp"), "rw");
            
            //申明具体每一文件的字节数组
            byte[] b = new byte[1024];
            int n = 0;
            //从指定位置读取文件字节流
            in.seek(begin);
            //判断文件流读取的边界
            while(in.getFilePointer() <= end && (n = in.read(b)) != -1){
                //从指定每一份文件的范围，写入不同的文件
                out.write(b, 0, n);
            }
            
            //定义当前读取文件的指针
            endPointer = in.getFilePointer();
            
            //关闭输入流
            in.close();
            //关闭输出流
            out.close();
        } catch (Exception e) {
            e.printStackTrace();
        }
        
        return endPointer;
    }

3.文件合并代码

/**
     * 文件合并
     * @param file 指定合并文件
     * @param tempFile 分割前的文件名
     * @param tempCount 文件个数
     */
    public static void merge(String file,String tempFile,int tempCount){
        RandomAccessFile raf = null;
        try {
            //申明随机读取文件RandomAccessFile
            raf = new RandomAccessFile(new File(file), "rw");
            //开始合并文件，对应切片的二进制文件
            for (int i = 0; i < tempCount; i++) {
                //读取切片文件
                RandomAccessFile reader = new RandomAccessFile(new File(tempFile + "_" + i + ".tmp"), "r");
                byte[] b = new byte[1024];
                int n = 0;
                while((n = reader.read(b)) != -1){
                    raf.write(b, 0, n);//一边读，一边写
                }
            }
        } catch (Exception e) {
            e.printStackTrace();
        }finally{
            try {
                raf.close();
            } catch (IOException e) {
                e.printStackTrace();
            }
        }

最后在主程序里面调用就可以了

public static void main(String[] args) {
        
        String file = "F:\\\\java-study\\\\img\\\\mv.jpg";
        int count = 5;
        
        //1.根据现有的文件编写文件编写文件切片工具类
        //2.写入到二进制临时文件
        //    getSplitFile(file, count);
        //3.根据实际的需求合并指定数量的文件
        String tempFile = "F:\\\\java-study\\\\img\\\\img.jpg";
        merge(file, tempFile, 5);
        
        
        
    }

以上代码可实现图片，文档，mp3，mp4等文件的拆分与合并，下面是图片切片和拆分的效果图