首页 > 其他分享 >Html5大文件断点续传实现方法

Html5大文件断点续传实现方法

时间:2023-10-13 11:57:47浏览次数:415  
标签:断点续传 web resum 分块 Html5 文件 服务器 上传

大文件分块

一般常用的web服务器都有对向服务器端提交数据有大小限制。超越一定大小文件服务器端将返回拒绝信息。当然,web服务器都提供了配置文件可能修改限制的大小。针对ii实现大文件的上传网上也有一些通过修改web服务器限制文件大小来实现。不过这样对web服务器的平安带了问题。攻击者很容易发一个大数据包,将你web服务器直接给拖死。
现在针对大文件上传主流的实现方式,通过将大文件分块。比方针对一个100M文件,按2M拆分为50块。然后再将每块文件依次上传到服务器上,上传完成后再在服务器上合并文件。
web实现大文件上传,核心主要实现文件的分块。Html5FileAPI呈现以前,要想在web上实现文件分块传输。只有通过flash或Activex实现文件的分块。

Html5下,可以直接通过fileslice方法来实现文件的分块。如:

<pclass="codetext"><pclass="codehead"><spanclass="lantxt">XML/HTMLCode<spanonclick="copyidtextcode_6864"class="copycodetext"style="cursor:pointer">复制内容到剪贴板

 

<pid="code_6864"><olclass="dp-xml"><liclass="alt">file.slic0,1000;
  • file.slic1000,2000;
<liclass="alt">file.slic2000,3000;

 

 

然后再通过XMLHttpRequest异步上传到服务器。

Html5上传文件类库

如果你有兴趣及时间 当然可以自己用html5FileAPI来实现。自己在网上查找到以下两个支持html5类库。
resumable.j附git上的地址:https://github.com/23/resumable.j
Pludloadhttp://plupload.com/

resum一个纯html5上传类库。
而Pludload一个支持html5,flash,silverlight,html4,会自动判断浏览是否支持html5不支持将用其它上传方式。
测试下来,resum和Pludload都支持html5分块上传文件。用下来觉得resum比拟适合,以下就选resum来进行介绍。

resumable.j断点上传使用介绍

主要配置介绍:
<pclass="codetext"><pclass="codehead"><spanclass="lantxt">JavascriptCode<spanonclick="copyidtextcode_1658"class="copycodetext"style="cursor:pointer">复制内容到剪贴板

 

<pid="code_1658"><olclass="dp-c"><liclass="alt"><spanclass="keyword">varr=<spanclass="keyword">newResum{
  • target:<spanclass="string">/test/upload,
<liclass="alt">chunkSize:1*1024*1024,
  • simultaneousUploads:4,
<liclass="alt">testChunks:<spanclass="keyword">true,
  • throttleProgressCallbacks:1,
<liclass="alt">method:<spanclass="string">"octet"
  • };

 

 

chunkSiz分块文件大小,以字节为单位
simultaneousUpload同时上传文件块的进程数,可以同时允许多个文件块上传。
testChunk上前文件块是否先通过get方式发送文件信息检测文件是否已经上传。

resum断点上传是通过testChunk配置节点来实现,当设置为true时。resum会先发送一个get请求,如果http状态返回 200则认为当前块已经上传完成,然后进行下一块的get请求。如果http状态返回的不是200则将通过post方式发送当前块数据包进行文件块上传。

设置testChunk为true每次上传都会增加一个get请求,如果我已经知道上次中断上传前文件的块数。下次直接从中断的块数上传就行了这样可以为每个块减少一次httpget请求。
针对这个需求,修改了resum源码,为resum里的file对象增加了一个startchunkindex属性,默认为0用于设置当前文件从哪一个块开始上传。这样,只需要在文件上传前从服务器上进行一次查询(查询当前文件上传到哪一块)返回上次上传的文件块索引。再将索引值设置到filestartchunkindex属性就可以实现从上次断开的文件块开始上传。
调用方式:

<pclass="codetext"><pclass="codehead"><spanclass="lantxt">JavascriptCode<spanonclick="copyidtextcode_8252"class="copycodetext"style="cursor:pointer">复制内容到剪贴板

 

<pid="code_8252"><olclass="dp-c"><liclass="alt"><spanclass="comment">//Handlfileaddevent
  • r.on<spanclass="string">fileA dded,<spanclass="keyword">functionfile{
<liclass="alt">file.startchunkindex=0;<spanclass="comment">//设置当前文件开始上传的块数

 

 

具体可以检查附件里的demo

收尾工作

所有文件块上传完,最后工作就是合并保管文件。附件为resum断上传.net实现的服务端例子,包括简单的文件合并功能。其它语言的demo大家也可以从resumgit上下载。
demo例子为了简单,只是把文件存放在本机。真实的生产环境中。一般应该放在单独的文件服务器上(前台web通过ftp或文件夹共享方式上传到文件服务器)然后对上传好的文件进行分发镜像或处理(比方视频压缩)当然最好是存在分布式文件系统中,目前看下来放到Hadoop分布式文件系统(HDFS一个不错的好方案。

 

参考文章:http://blog.ncmem.com/wordpress/2023/10/13/html5%e5%a4%a7%e6%96%87%e4%bb%b6%e6%96%ad%e7%82%b9%e7%bb%ad%e4%bc%a0%e5%ae%9e%e7%8e%b0%e6%96%b9%e6%b3%95-2/

欢迎入群一起讨论

 

 

标签:断点续传,web,resum,分块,Html5,文件,服务器,上传
From: https://www.cnblogs.com/songsu/p/17761749.html

相关文章

  • .NET MAUI播放音频文件,复制资源文件到安装目录。
    .NETMAUI我基本都是参考Android代码改造来的,官方文档=废品。参考:https://blog.csdn.net/wxzjn1027/article/details/82345604需要注意的是,流的加载过程是一个将音频解压为原始16位PCM数据的过程,由一个后台线程来进行处理异步,所以初始化后不能立即播放,需要等待一点时间。有以下......
  • python学习笔记3 遍历目录, 列出文件名
    importosdeflistDir(curPath,pixLen):list=[]#print("当前路径:"+curPath)files=os.listdir(curPath)forpathinfiles:fullPath=os.path.join(curPath,path)ifos.path.isfile(fullPath):#append......
  • 计算机内存不足,若要还原足够的内存以使程序正常工作,请保存文件,然后关闭或重新启动所有
    电脑提示计算机内存不足,若要还原足够的内存以使程序正常工作,请保存文件,然后关闭或重新启动所有打开的程序。遇到这种问题其实是因为没有设置虚拟内存或者设置太小了 1、更改虚拟内存的操作,在桌面上右键单击计算机,选择属性;2、选择高级系统设置,弹出系统属性窗口;3、直接定位到......
  • HTML5中怎么实现文件断点续传功能
    HTML5中怎么实现文件断点续传功能,很多新手对此不是很清楚,为了帮助大家解决这个难题,下面小编将为大家详细讲解,有这方面需求的人可以来学习下,希望你能有所收获。断点续传原理目前比较常用的断点续传的方法有两种,一种是通过websocket接口进行文件上传,另一种是通过ajax,两种方法各有......
  • 【awk】两文件处理
    实际工作中经常会遇到两个文件中特定列比较的问题,以下是网上查到两文件比较的代码,包括交集、并集和差集。交集awk'NR==FNR{A[$0];next}($0inA)'a.txtb.txt此处A代表前一个文件,前一个$0指的是a.txt中的数据,后一个则指的是b.txt中的数据。 条件NR==FNR成立时,当前读......
  • 使用fluent-ffmpeg将完整视频文件转码切片为.ts .m3u8文件以实现hls流媒体传输
    使用fluent-ffmpeg将完整视频文件转码切片为.ts.m3u8文件以实现hls流媒体传输安装项目内安装:npmiffmpegnpmifluent-ffmpeg外部环境安装:官网下载ffmpeg,将文件bin目录添加为Path系统环境变量C:\Users\lenovo\Desktop\ffmpeg-6.0-essentials_build\ffmpeg-6.0-essential......
  • Win10设置本地用户限制使用指定程序与文件资源
    前言针对特定win10用户登录解决只能访问指定程序和文件,从而保证个人隐私的解决方案。一、新建本地用户账户1、在Windows10系统右键点击左下角的“开始按钮”–》设置--》账户--》将其他人添加到这台电脑。   2.在左侧用户上右键–》点“新用户”–》完成创建操作。......
  • Spring Boot读取resource目录下文件失败解决方案及分析
    背景最近有个需求,就是需要从resources目录下读取文件返回给用户。在idea中运行时,有些resources下文件读取工具类能够正常获取读取到文件。但是通过java–jar的方式去运行jar包,此时resources下文件读取工具类读取文件就失效了。通过查询搜索,了解到了是读取的方式导致文件读取失败......
  • 在java中将InputStream对象转换为File对象(不生成本地文件)
    importorg.apache.commons.io.IOUtils;importjava.io.File;importjava.io.FileOutputStream;importjava.io.IOException;importjava.io.InputStream;publicclassStreamUtil{staticfinalStringPREFIX="stream2file";//前缀字符串定义文件名;必须至少三个字符......
  • 2023-10-12 javac : 无法将“javac”项识别为 cmdlet、函数、脚本文件或可运行程序的
    找到你的jdk安装路径/bin,复制并扔到环境变量中去即可,如:   ......