作为一名前端开发工程师,我近期接手了公司一个有些年头的旧项目改造工作。这次改造的核心需求,是要给这个旧项目增添大文件上传功能,尤其得支持 10G 左右文件的上传,并且还要具备断点续传的能力。

在众多解决方案中,我选用了百度开源组件 webuploader 来实现这一功能。这个组件在理论上,具备处理大文件上传和断点续传的能力,就像是一把理论上能打开难题之锁的钥匙,所以我对它寄予了厚望。

然而,在集成 webuploader 的过程中,我遭遇了诸多棘手问题。比如,在实际操作时,发现部分功能与项目现有架构存在兼容性问题,就像不同形状的拼图块,很难完美契合在一起。我尝试在百度上搜索相关问题的解决办法,可得到的结果大多是一些零散且不够深入的信息,根本没有切实可行的方案。更让我无奈的是,我想联系 webuploader 的开发人员寻求帮助,却发现根本联系不上,就像在大海中航行时,失去了指引方向的灯塔,让我感到十分迷茫和无助。这不禁让我感慨,开源的东西虽然有其便利性和开放性,但在实际使用中,一旦遇到问题,缺乏官方有效的支持,还是存在很大的不完善之处。

不过,即便困难重重,我还是没有放弃。我回忆起之前处理类似问题的经验,同时结合项目自身的特点,一点点地摸索着前进。从设计思路来看,我得先深入了解 chrome 提供的 API 的使用方法,搞清楚每一个参数的具体功能,这部分内容我通过在百度上反复搜索,才勉强拼凑出了一些有用的信息。找到答案后,我便开始进行功能设计,画出详细的流程图,就像绘制一张精确的地图,为后续的开发工作指明方向。

在功能实现方面,主要分为前端和后端两部分。前端主要负责实现文件的分块上传逻辑,这需要精确地控制文件的分割和上传顺序,就像指挥一场精密的交响乐演奏,每一个音符都要准确无误。而后端则要实现文件块数据的接收和保存,确保数据能够完整、准确地存储,就像一个可靠的仓库管理员,守护着每一份重要的文件。

虽然目前项目还在推进中,但我已经能预见到未来可能还会遇到各种问题。不过,我相信凭借自己的努力和不断探索,最终一定能够成功完成这个项目改造任务,让旧项目焕发出新的活力。

另外,我还了解到一些相关背景信息。之前有一些客户,比如汽车制造行业的领军企业,他们自身有成熟的业务系统,为了提升生产效率和管理流程,会寻求将新产品集成到现有系统中,并且要求提供完整源代码,以满足自主可控的需求,就像把自家房子的钥匙紧紧握在自己手中。而我们公司也会提供全方位的服务,包括技术支持、培训以及后续的定制开发等。

还有一些网友也会遇到类似的技术问题,比如有网友刚开始接触大文件上传下载这块,在论坛发私信向我请教。他是做后端的,主要操作数据库,最近接项目遇到了难题,问我有没有好用的组件。我花时间给他讲解思路,帮他搭建开发和测试环境,还写了测试程序指导他实现功能。

从更广泛的层面来看,企业级文件传输解决方案有着丰富的功能。它包含文件上传和下载功能,支持文件夹上传和下载,采用出色的跨浏览器架构设计,能满足企业在跨浏览器、跨平台、信创国产化环境、内网、多项目、多产品使用等方面的需求,还能实现自主可控、自主研发和自主授权。同时,也能满足大型集团批量使用、央企加密安全使用和自主可控等需求。对于个人来说,能满足免费使用、开源项目使用、多项目使用、多产品使用等需求;外包团队可用于多项目、多产品开发,还能实现快速开发;也能满足个人学习、兴趣爱好、毕业设计、技术研究等需求。

目前,这个开源方案受到了很多关注,每天都有网友下载,除了国内一线互联网大厂,还有各领域的头部企业,如汽车制造行业的比亚迪、吉利,芯片领域的欣奕华,金融领域的中兴,IT 领域的东软等都在使用。这个方案支持文件夹包含大量文件和层级结构,支持超大文件分片、分段、分块、分割上传下载和断点续传,支持文件夹上传、下载断点续传并保留层级结构,还支持多种加密方式,采用国密 SM4 加密算法保证数据加密传输。在技术实现上,涉及 VUE 批量上传文件、HTTP 实现文件上传与下载等多种技术手段。就像我这次项目用到的 webuploader,它的大文件分段上传、断点续传等功能,在理想状态下是很强大的,但在实际集成中还是遇到了不少麻烦。

将webuploader组件复制到项目中

示例中已经包含此目录
image

引入webuploader组件

image

配置接口地址

接口地址分别对应:文件初始化,文件数据上传,文件进度,文件上传完毕,文件删除,文件夹初始化,文件夹删除,文件列表
参考:http://www.ncmem.com/doc/view.aspx?id=e1f49f3e1d4742e19135e00bd41fa3de
image

处理事件

image

启动测试

image

启动成功

image

效果

image

数据库

image

效果预览

文件上传

文件上传

文件刷新续传

支持离线保存文件进度,在关闭浏览器,刷新浏览器后进行不丢失,仍然能够继续上传
文件续传

文件夹上传

支持上传文件夹并保留层级结构,同样支持进度信息离线保存,刷新页面,关闭页面,重启系统不丢失上传进度。
文件夹上传

批量下载

支持文件批量下载
批量下载

下载续传

文件下载支持离线保存进度信息,刷新页面,关闭页面,重启系统均不会丢失进度信息。
下载续传

文件夹下载

支持下载文件夹,并保留层级结构,不打包,不占用服务器资源。
文件夹下载

下载示例

点击下载完整示例

Logo

AtomGit 是由开放原子开源基金会联合 CSDN 等生态伙伴共同推出的新一代开源与人工智能协作平台。平台坚持“开放、中立、公益”的理念,把代码托管、模型共享、数据集托管、智能体开发体验和算力服务整合在一起,为开发者提供从开发、训练到部署的一站式体验。

更多推荐