赞
踩
最近项目中新增了一个需求:要求批量下载之前信息导出的word 文件,也就是批量下载。
数据是保存在ES 中,导出word 的功能也是写好的。
我的思路:
存在问题:
批量导出word 文档,由于数据量大可能会非常耗时。
解决:
采用的异步方式分别导出每一个word文件,大大节省了文件导出效率。
具体方法参考:Spring boot 入门教程- 使用异步线程池
使用这种方法虽然提高文件导出效率,但是所有文件导出完成时间无法控制。
这里采用如下方法
-
- List<CompletableFuture<Map<String, String>>> list = new ArrayList<>();
- for (String sourceCode : sourceCodes.split(",")) {
- CompletableFuture<Map<String, String>> future = favoriteService.exportFavoriteItemWordFile(sourceCode);
- list.add(future);
- }
- CompletableFuture<Map<String, String>>[] completableFutures = list.toArray(new CompletableFuture[list.size()]);
- CompletableFuture.allOf(completableFutures).join();
CompletableFuture.allOf().join(); 等待所有线程任务结束
文件导出方法调用:
- @Async
- @Override
- public CompletableFuture<Map<String, String>> exportFavoriteItemWordFile(String sourceCode) throws IOException, URISyntaxException, InterruptedException {
-
- Map<String, String> result = esDetailedService.exportDetailInfoDoc(sourceCode);
-
- return CompletableFuture.completedFuture(result);
- }
这里result 返回了文件在服务器上的存路径。可以通过future.get().get("url") 获取。
word 导出实现参考:使用POI 导出word模板文件
剩下的就是文件打包成zip 的解决了,这里提供一个工具类:
-
- import java.io.*;
- import java.util.ArrayList;
- import java.util.List;
- import java.util.zip.ZipEntry;
- import java.util.zip.ZipOutputStream;
-
- /**
- * @BelongsProject: exchange
- * @BelongsPackage: com.elens.util
- * @Author: xuweichao
- * @CreateTime: 2019-06-04 15:51
- * @Description: 文件压缩工具类
- */
- public class ZipUtil {
-
-
- private static final int BUFFER_SIZE = 2 * 1024;
-
- /**
- * 压缩成ZIP 方法1
- *
- * @param srcDir 压缩文件夹路径
- * @param out 压缩文件输出流
- * @param keepDirStructure 是否保留原来的目录结构,true:保留目录结构;
- * false:所有文件跑到压缩包根目录下(注意:不保留目录结构可能会出现同名文件,会压缩失败)
- * @throws RuntimeException 压缩失败会抛出运行时异常
- */
- public static void toZip(String srcDir, OutputStream out, boolean keepDirStructure)
- throws RuntimeException {
-
- long start = System.currentTimeMillis();
- ZipOutputStream zos = null;
- try {
- zos = new ZipOutputStream(out);
- File sourceFile = new File(srcDir);
- compress(sourceFile, zos, sourceFile.getName(), keepDirStructure);
-
- long end = System.currentTimeMillis();
- System.out.println("压缩完成,耗时:" + (end - start) + " ms");
- } catch (Exception e) {
- throw new RuntimeException("zip error from ZipUtils", e);
- } finally {
- if (zos != null) {
- try {
- zos.close();
- } catch (IOException e) {
- e.printStackTrace();
- }
- }
- }
-
- }
-
- /**
- * 压缩成ZIP 方法2
- *
- * @param srcFiles 需要压缩的文件列表
- * @param out 压缩文件输出流
- * @throws RuntimeException 压缩失败会抛出运行时异常
- */
- public static void toZip(List<File> srcFiles, OutputStream out) throws RuntimeException {
- long start = System.currentTimeMillis();
- ZipOutputStream zos = null;
-
- try {
- zos = new ZipOutputStream(out);
- for (File srcFile : srcFiles) {
- byte[] buf = new byte[BUFFER_SIZE];
- zos.putNextEntry(new ZipEntry(srcFile.getName()));
- int len;
- FileInputStream in = new FileInputStream(srcFile);
- while ((len = in.read(buf)) != -1) {
- zos.write(buf, 0, len);
- }
- zos.closeEntry();
- in.close();
- }
- long end = System.currentTimeMillis();
- System.out.println("压缩完成,耗时:" + (end - start) + " ms");
- } catch (Exception e) {
- throw new RuntimeException("zip error from ZipUtils", e);
- } finally {
- if (zos != null) {
- try {
- zos.close();
- } catch (IOException e) {
- e.printStackTrace();
- }
- }
- }
- }
-
- /**
- * 递归压缩方法
- *
- * @param sourceFile 源文件
- * @param zos zip输出流
- * @param name 压缩后的名称
- * @param keepDirStructure 是否保留原来的目录结构,true:保留目录结构;
- * false:所有文件跑到压缩包根目录下(注意:不保留目录结构可能会出现同名文件,会压缩失败)
- * @throws Exception
- */
- private static void compress(File sourceFile, ZipOutputStream zos, String name,
- boolean keepDirStructure) throws Exception {
- byte[] buf = new byte[BUFFER_SIZE];
- if (sourceFile.isFile()) {
- // 向zip输出流中添加一个zip实体,构造器中name为zip实体的文件的名字
- zos.putNextEntry(new ZipEntry(name));
- // copy文件到zip输出流中
- int len;
- FileInputStream in = new FileInputStream(sourceFile);
- while ((len = in.read(buf)) != -1) {
- zos.write(buf, 0, len);
- }
- // Complete the entry
- zos.closeEntry();
- in.close();
- } else {
- File[] listFiles = sourceFile.listFiles();
- if (listFiles == null || listFiles.length == 0) {
- // 需要保留原来的文件结构时,需要对空文件夹进行处理
- if (keepDirStructure) {
- // 空文件夹的处理
- zos.putNextEntry(new ZipEntry(name + "/"));
- // 没有文件,不需要文件的copy
- zos.closeEntry();
- }
-
- } else {
- for (File file : listFiles) {
- // 判断是否需要保留原来的文件结构
- if (keepDirStructure) {
- // 注意:file.getName()前面需要带上父文件夹的名字加一斜杠,
- // 不然最后压缩包中就不能保留原来的文件结构,即:所有文件都跑到压缩包根目录下了
- compress(file, zos, name + "/" + file.getName(), keepDirStructure);
- } else {
- compress(file, zos, file.getName(), keepDirStructure);
- }
-
- }
- }
- }
- }
-
- public static void main(String[] args) throws Exception {
- /** 测试压缩方法1 */
- FileOutputStream fos1 = new FileOutputStream(new File("H:\\xuweichao.zip"));
- ZipUtil.toZip("H:\\docTmp", fos1, true);
-
- // /** 测试压缩方法2 */
- // List<File> fileList = new ArrayList<>();
- // fileList.add(new File("H:\\docTmp\\36c194f1-6d69-4114-a26e-c6170af.doc"));
- // fileList.add(new File("H:\\docTmp\\303e9dd9-6270-4968-95c8-13c660a.doc"));
- // fileList.add(new File("H:\\docTmp\\545a857a-2f3b-487c-8b21-a58da9d.doc"));
- // fileList.add(new File("H:\\docTmp\\ce608bff-f00d-4436-9c30-da73f70.doc"));
- // FileOutputStream fos2 = new FileOutputStream(new File("H:\\docTmp\\xuweichao.zip"));
- // ZipUtil.toZip(fileList, fos2);
- }
- }
调用
- String zipFileName = "收藏夹人物信息打包-" + System.currentTimeMillis() + ".zip";
- String zipFilePathName = words2ZipTmpDir + zipFileName;
- File zipfile = new File(zipFilePathName);
-
- if (!zipfile.getParentFile().exists()) {
- zipfile.getParentFile().mkdirs();
- }
-
- FileOutputStream fos = new FileOutputStream(zipfile);
- ZipUtil.toZip(zipFiles, fos);
List<File> zipFiles = new ArrayList<>();
zipFiles :需要打包的文件集合.
然后根据zipFilePathName 下载zip文件即可。
这里只提供了实现思路和关键代码,有问题欢迎反馈交流。
Copyright © 2003-2013 www.wpsshop.cn 版权所有,并保留所有权利。