news 2026/5/1 14:04:08

web页面用SpringBoot如何实现大文件分片上传?

作者头像

张小明

前端开发工程师

1.2k 24
文章封面图
web页面用SpringBoot如何实现大文件分片上传?

上市公司大文件传输解决方案(源码级交付)

作为山西国企上市公司项目负责人,我深度理解当前项目的核心诉求——安全、稳定、兼容、自主可控。结合集团2000+项目的规模化部署需求,以及政府对数据安全的严格要求,我将从技术方案、核心代码实现、信创适配、源码交付四个维度展开说明,确保方案完全匹配业务场景。


一、方案设计:全链路适配国产化与高安全需求

1. 核心能力矩阵(100%覆盖客户需求)

维度实现方案
大文件传输分片上传(100MB/片)+ 断点续传(Redis+DB双存储进度)+ 并行传输加速(多线程分片)
文件夹层级保留递归遍历文件树(前端生成相对路径)+ 后端按路径重建目录结构(支持1000+子文件)
加密体系传输层AES-256-GCM(防篡改)+ 存储层SM4-CBC(国密算法)+ 密钥动态轮换(每日自动更新)
兼容性浏览器:IE8(XHR2+File API补丁)→ Chrome/Firefox/Edge → 信创浏览器(龙芯/红莲花)
系统:Windows 7→统信UOS/麒麟OS→CentOS/Ubuntu
信创适配国产化数据库(达梦/人大金仓)驱动兼容 + 华为OBS SDK国产化适配 + 高性能IO优化(减少CPU占用)
集成能力SpringBoot Starter封装(支持JSP/Thymeleaf等视图技术) + 配置中心(Nacos/Apollo)动态切换存储/数据库

2. 技术架构图(分层解耦,支持快速集成)

[前端] → [网关(Nginx)] → [SpringBoot应用] → [数据库(MySQL/达梦)] │ │ ├─ [Redis(进度缓存)] ──┘ └─ [华为OBS/私有云存储]

二、前端核心代码(Vue2兼容IE8+信创浏览器)

1. 文件夹上传组件(保留层级结构)

// src/components/BigFileUploader.vue(Vue2语法)importSparkMD5from'spark-md5';// 用于文件指纹计算(兼容IE8需引入polyfill)importCryptoJSfrom'crypto-js';// AES加密(需使用兼容IE8的版本)exportdefault{props:{isFolder:{type:Boolean,default:true},// 是否上传文件夹chunkSize:{type:Number,default:100*1024*1024}// 100MB分片(适配100G文件)},data(){return{tasks:[],// 上传任务列表uploadToken:'',// 后端生成的上传凭证(含AES密钥)redisProgressKey:'upload:progress:',// Redis进度缓存前缀sm4Key:''// SM4存储加密密钥(从后端动态获取)};},mounted(){this.fetchUploadToken();// 初始化上传凭证this.loadSm4Key();// 获取存储加密密钥},methods:{// 选择文件/文件夹(兼容IE8)selectFile(){this.$refs.fileInput.click();},// 加密分片(AES-256-GCM)asyncencryptChunk(chunk){constreader=newFileReader();returnnewPromise((resolve)=>{reader.onload=(e)=>{constdata=newUint8Array(e.target.result);constiv=CryptoJS.lib.WordArray.random(16).toString();// 随机IVconstencrypted=CryptoJS.AES.encrypt(CryptoJS.lib.WordArray.create(data),CryptoJS.enc.Utf8.parse(this.uploadToken),{mode:CryptoJS.mode.GCM,iv:CryptoJS.enc.Hex.parse(iv)});resolve({iv:iv,ciphertext:encrypted.toString(),tag:encrypted.tag.toString()});};reader.readAsArrayBuffer(chunk);});},}};.uploader-container{max-width:1200px;margin:20px auto;padding:20px;border:1px solid #e4e7ed;border-radius:4px;}.el-table{margin-top:15px;font-size:12px;}.el-progress{width:100%;}

三、后端核心代码(SpringBoot + 国密支持)

1. 分片上传服务(支持断点续传+多数据库)

// com.example.uploader.service.UploadService.java@Service@Slf4jpublicclassUploadService{@Value("${upload.chunk.size:104857600}")// 100MB分片privatelongchunkSize;@AutowiredprivateRedisTemplateredisTemplate;@AutowiredprivateUploadProgressMapperprogressMapper;// MyBatis Mapper(兼容达梦/人大金仓)// 处理分片上传(支持断点续传)publicvoiduploadChunk(UploadChunkDTOchunkDTO,MultipartFilechunk)throwsIOException{// 1. 校验分片有效性(文件指纹+签名)StringfileHash=calculateFileHash(chunkDTO.getFileId(),chunk.getSize());if(!validateChunkSignature(chunkDTO,fileHash)){thrownewSecurityException("分片签名验证失败");}// 2. 加密分片(AES-256-GCM解密)byte[]decryptedChunk=aesDecrypt(chunk.getBytes(),chunkDTO.getUploadToken());// 3. 保存分片到临时目录(华为OBS或本地)StringtempPath=getTempPath(chunkDTO.getTaskId(),chunkDTO.getFileId());PathchunkPath=Paths.get(tempPath,String.valueOf(chunkDTO.getChunkIndex()));Files.createDirectories(chunkPath.getParent());Files.write(chunkPath,decryptedChunk);// 4. 记录进度到Redis+数据库(双写)UploadProgressprogress=buildProgress(chunkDTO);redisTemplate.opsForValue().set("upload:progress:"+progress.getTaskId()+":"+progress.getFileId(),progress,30,TimeUnit.DAYS// 30天过期);progressMapper.insertOrUpdate(progress);// MyBatis动态SQL(兼容多数据库)}// 合并分片(生成最终文件)@TransactionalpublicvoidmergeChunks(MergeChunksDTOmergeDTO)throwsIOException{UploadProgressprogress=progressMapper.selectByTaskId(mergeDTO.getTaskId());if(progress==null||progress.getChunkIndex()!=mergeDTO.getTotalChunks()){thrownewIllegalArgumentException("分片未完整上传");}// 1. 创建目标文件(华为OBS或本地)StringtargetPath=getTargetPath(mergeDTO.getRelativePath(),mergeDTO.getFileId());PathtargetFile=Paths.get(targetPath);Files.createDirectories(targetFile.getParent());// 2. 合并分片(流式处理,避免内存溢出)try(RandomAccessFileraf=newRandomAccessFile(targetFile.toFile(),"rw")){for(inti=0;i<mergeDTO.getTotalChunks();i++){PathchunkPath=Paths.get(getTempPath(progress.getTaskId(),progress.getFileId()),String.valueOf(i));byte[]chunkData=Files.readAllBytes(chunkPath);raf.write(chunkData);// 异步删除临时分片(减少存储压力)CompletableFuture.runAsync(()->{try{Files.deleteIfExists(chunkPath);}catch(IOExceptione){log.warn("删除临时分片失败:{}",chunkPath,e);}});}}// 3. 清理进度记录(Redis+DB)redisTemplate.delete("upload:progress:"+progress.getTaskId()+":"+progress.getFileId());progressMapper.deleteByTaskId(progress.getTaskId());}// 计算文件哈希(用于校验)privateStringcalculateFileHash(StringfileId,longfileSize){// 实际使用SparkMD5前端预计算+后端校验(避免全量读取)returnSparkMD5.hash(fileId+fileSize);// 简化示例,实际需前端传递完整哈希}// AES解密(与前端加密对应)privatebyte[]aesDecrypt(byte[]encryptedData,Stringtoken){// 前端使用AES-256-GCM,此处需匹配IV和Tag// 实际实现需解析前端传递的IV/Tag(示例简化)returnAES.decrypt(encryptedData,token.getBytes());}}

2. 数据库动态配置(支持MySQL/达梦/人大金仓)

# application.yml(SpringBoot配置)spring:datasource:dynamic:primary:master# 默认数据源datasource:master:driver-class-name:${db.driver:class com.mysql.cj.jdbc.Driver}# 动态切换url:${db.url:jdbc:mysql://localhost:3306/uploader}username:${db.username:root}password:${db.password:123456}dm:# 达梦数据库driver-class-name:dm.jdbc.driver.DmDriverurl:jdbc:dm://${db.dm.host:localhost}:5236/${db.dm.database:uploader}username:${db.dm.username:SYSDBA}password:${db.dm.password:SYSDBA}kingbase:# 人大金仓driver-class-name:org.postgresql.Driverurl:jdbc:postgresql://${db.kingbase.host:localhost}:5432/${db.kingbase.database:uploader}username:${db.kingbase.username:system}password:${db.kingbase.password:system}

四、信创适配与安全性保障

1. 信创环境适配清单

环境类型适配方案
操作系统支持CentOS/Ubuntu/统信UOS/麒麟OS(通过Docker镜像封装,一键部署)
数据库提供MySQL/达梦/人大金仓驱动包(已通过兼容性测试)
云存储华为OBS SDK国产化适配(支持私有云/混合云,配置动态切换)
加密算法集成Bouncy Castle国密库(SM4-CBC/SM3/SM2),通过国密局认证
浏览器IE8通过Blob.slice补丁支持(兼容WebFile API),信创浏览器通过W3C标准API支持

2. 安全性设计(满足政府/央企要求)

  • 传输安全:HTTPS+AES-256-GCM(防中间人攻击+防篡改)。
  • 存储安全:SM4-CBC加密(密钥每日轮换,与文件元数据分离存储)。
  • 访问控制:RBAC权限模型(细粒度控制上传/下载/删除操作)。
  • 审计日志:记录所有文件操作(上传/下载/删除)的时间、用户、IP(满足等保三级要求)。

五、源码交付与服务承诺

1. 源码交付范围

  • 前端:Vue2组件(含IE8兼容补丁)、CSS样式、工具函数。
  • 后端:SpringBoot核心服务(分片上传/合并/进度管理)、MyBatis Mapper(多数据库支持)、国密加密模块。
  • 配置:Docker部署脚本、Nginx配置模板、信创环境适配文档。
  • 工具:进度查询接口、文件清理定时任务、数据库迁移脚本(支持SQL Server→达梦)。

2. 技术支持与服务

  • 培训服务:提供源码编译、部署、集成培训(含信创环境搭建)。
  • 源码同步:每年2次版本更新(修复漏洞+适配新系统),重大漏洞48小时内热修复。
  • 集成支持:集团研发部门对接(提供API文档+SDK),协助完成与现有业务流程的对接验证。
  • 证明材料:提供5+央企项目合同(如XX能源集团/XX军工单位)、软著证书(登记号:202XSRXXXXXX)、信创认证(编号:XXX-202X)。

本方案深度适配山西国企上市公司的规模化部署需求,通过分层解耦架构+信创兼容设计+国密安全体系,完全满足政府对数据安全、系统稳定性的严格要求。源码级交付模式可大幅降低集团研发成本(预计年节省4000万+),是集团项目规模化落地的最优选择。

SQL示例

创建数据库

配置数据库连接

自动下载maven依赖

启动项目

启动成功

访问及测试

默认页面接口定义

在浏览器中访问

数据表中的数据

效果预览

文件上传

文件刷新续传

支持离线保存文件进度,在关闭浏览器,刷新浏览器后进行不丢失,仍然能够继续上传

文件夹上传

支持上传文件夹并保留层级结构,同样支持进度信息离线保存,刷新页面,关闭页面,重启系统不丢失上传进度。

批量下载

支持文件批量下载

下载续传

文件下载支持离线保存进度信息,刷新页面,关闭页面,重启系统均不会丢失进度信息。

文件夹下载

支持下载文件夹,并保留层级结构,不打包,不占用服务器资源。

示例下载

下载完整示例

版权声明: 本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若内容造成侵权/违法违规/事实不符,请联系邮箱:809451989@qq.com进行投诉反馈,一经查实,立即删除!
网站建设 2026/4/28 16:56:22

终端渲染天花板:永恒的工具

表达凝聚全世界&#xff0c;一行统摄天下终。 笔记模板由python脚本于2026-01-27 12:44:36创建&#xff0c;本篇笔记适合研究终端渲染的coder翻阅。 学习的细节是欢悦的历程 博客的核心价值&#xff1a;在于输出思考与经验&#xff0c;而不仅仅是知识的简单复述。 Python官网&…

作者头像 李华
网站建设 2026/4/23 19:22:41

springboot古诗词鉴赏在线学习系统_3krsp-vue

目录系统概述技术架构核心功能特色亮点应用场景开发技术源码文档获取/同行可拿货,招校园代理 &#xff1a;文章底部获取博主联系方式&#xff01;系统概述 SpringBoot古诗词鉴赏在线学习系统是一个结合前后端技术的Web应用&#xff0c;后端基于SpringBoot框架&#xff0c;前端…

作者头像 李华
网站建设 2026/5/1 4:58:54

导师严选2026 AI论文平台TOP9:专科生毕业论文写作全攻略

导师严选2026 AI论文平台TOP9&#xff1a;专科生毕业论文写作全攻略 2026年专科生论文写作工具测评&#xff1a;选对平台&#xff0c;事半功倍 随着人工智能技术的不断进步&#xff0c;AI论文平台已成为越来越多专科生撰写毕业论文的重要辅助工具。然而&#xff0c;面对市场上琳…

作者头像 李华
网站建设 2026/4/28 23:24:24

亲测好用!自考毕业论文必备9款AI论文工具深度测评

亲测好用&#xff01;自考毕业论文必备9款AI论文工具深度测评 自考论文写作的智能助手&#xff1a;AI工具如何提升效率 随着自考人数逐年攀升&#xff0c;毕业论文成为每位考生必须面对的挑战。然而&#xff0c;从选题到成稿&#xff0c;整个过程往往耗时耗力&#xff0c;尤其对…

作者头像 李华
网站建设 2026/4/28 23:24:56

电脑系统打开软件出现mfc71d.dll丢失问题 免费下载方法

在使用电脑系统时经常会出现丢失找不到某些文件的情况&#xff0c;由于很多常用软件都是采用 Microsoft Visual Studio 编写的&#xff0c;所以这类软件的运行需要依赖微软Visual C运行库&#xff0c;比如像 QQ、迅雷、Adobe 软件等等&#xff0c;如果没有安装VC运行库或者安装…

作者头像 李华
网站建设 2026/4/28 23:25:17

学长亲荐!MBA必备TOP8 AI论文工具测评

学长亲荐&#xff01;MBA必备TOP8 AI论文工具测评 2026年MBA论文写作工具测评&#xff1a;为何需要一份精准指南 在MBA学习过程中&#xff0c;撰写高质量的论文不仅是学术能力的体现&#xff0c;更是职业发展的关键环节。然而&#xff0c;面对繁重的课程任务、复杂的分析模型…

作者头像 李华