用php如何解决大文件分片上传问题

admin3年前PHP教程45

如果上传的文件只有小于10M的话, 就没必要考虑这样的做法, 直接在 php.ini中更改一下 upload_max_filesize = 10m post_max_size = 10m 这样就可以了, 下面我们来说一说php上传超大的文件

前提

首先, 上传超大的文件, 前端要和后端相互配合文件上传要使用 ajax 的方法, 而不是 form 的 submit的方式

思想

前端把file文件对象按一定的大小 分割成一定大小的文件(如按 2M 或 5M来分割), 对分割后的文件, 一个个的上传到后端去, 后端接收到分片文件后,把它们先放到一个临时的目录下, 在收到前端完成的数据请求的时候, 把临时目录中的文件组装起来成一个新的文件, 保存后, 把临时目录下的文件删除掉就可以了

代码

html


<div class="a">
          上传<input id="myfile" type="file" name="myfile"/>
   </div>

这里要说明一下,没有使用 submit 上传, 使用 ajax上传

javascript


<script>
    $(function(){
        let myfile = document.getElementById("myfile");
        myfile.onchange = function(){
            let file = myfile.files[0];     //这里可以得到上传的文件对象
            let length = 1024 * 1024 * 5;   //这里是每一个分片的大小
            let total_number = Math.ceil(file.size/length) //使用进一法, 来确定分片的个数
            let start = 0;          //分片的初始位置
            let end = length;       //分片的结束位置
            let parr = [];         //这里为promise.all方法准备一个数组;
            for(let i = 1;i<=total_number;i++){
                //这里开始分片, 并且把每一个分片上传到服务器
                let bolb = file.slice(start,end);  //得到一个分片
                start = end;                //调整下一个分片的起始位置
                end = start+length;         //调整下一个分片的结束位置
                if(end > file.size){
                    end=file.size;      //这里对最后的一个分片结束位置进行调整
                }
                let formdata = new FormData();  //创建一个FormData对象, 准备传送数据
                formdata.append("file",blob);   //据分片数据放入 formdata
                formdata.append("tempfilename",i+"_"+file.name)  //同时为这个分片设置一个名称, 其中的 i 可以帮助后端进行排序处理
                
                //formdata组装好之后, 调用 pro() 函数, 返回一个promise对象, 并把它放入 parr 数组中, 方便后面的 promise.all方法使用
                parr.push(pro(formadata));
            }
            //以上for 循环结束之后,  parr数组中就全部是  分片上传的 promise的对象了, 此时我们使用promise.all 方法, 等待所有上传都成功执行后, 再向服务器发送一个请求, 也就是上传完成, 让服务器组装分片的请求
            Promise.all(parr).then(res=>{
                if(res.length == parr.length){   //如果返回成功的数组长度 和 parr的数组长度相等,说明分片全部上传成功
                    //此时对上传接口再次发送请求, 同时把 上传的文件名带上, 方便后台查找要组装的分片文件名, 因为是请求同一个上传接口所以, 我们还要传一个 flag=1  表示这是一个数据组装的请求
 $.ajax({
                    type:"post",
                    url:"fastadmin.test/index/upload/getupload",
                    data:{flag:1,filename:file.name},  //这里 flag=1表示上传完成,请求组装, filename:表示要组成哪一组文件分片
                    success:function(res){
                        if(res.length == parr.length){
                            console.log(111);
                        }
                    },
                    fail: function () {
                        reject()
                    }
                })
                }
            })
        }
    })
    //这个函数用来上传分片文件, 返回的是一个 promise 对象, 方便后面使用  promise.all还判断所有分片是否是上传成功的
    //这里要说明一下, $.post() 是不可以上传文件的, 只能用$.ajax() 并且要把 contentType:false和processData:false 带上
    function pro(formData){
        return new Promise((resolve,reject)=>{
            $.ajax({
                type:"post",
                url:"fastadmin.test/index/upload/getupload",  //后台上传文件的地址
                data:formData,
                contentType: false,    //这个不能少, ajax上传文件是不能少的
                processData: false,    //这个不能少, ajax上传文件必传 false
                success:function(res){
                    resolve(res)
                },
                fail: function () {
                    reject()
                }
            })
        })
    }      
</script>

以上就是 前端的 js 核心部分, 注释基本就可以看懂了

php

使用的tp5的框架


public function getUpload(){
    $tempdir = APP_PATH."../public/tempdir"; //这里分片的文件指定了一个临时目录, 后面会用到
    $flag = input("flag",0);//接收参数flag 如果没有这个参数就默认为0, 如果flag=1,表示要组装分片
    if($flag == 0){
        //这里是上传分片
        $file = request()->file("file");  //接收到这个分片
        $tempfilename = input("tempfilename");  //接收到这个分片的名称, (注意,这个名称中含有排序信息)
        if(!file_exists($tempdir)){
            mkdir($tempdir,0755,true);      //如果临时目录不存在,则创建一个临时目录
        }
        $fileinfo = $file->move($tempdir,$tmpfilename);
        if($fileinfo){  // 这里把分片的文件保存在了临时目录中, 返回的结果有点简单, 可以根据自已的需求返回相应的数据
            return josn(['error'=>0])
        }else{
            return json(['error'=>1])
        }
    }else if($flag == 1){
        //如果flag 为 1 表示, 分片已上传完成了
        $filename = input("filename");
        //通过文件名的字符串匹配, 找上所有的分片, 返回一个文件路径的数组
        $fileArr = glob($tempdir."/*".$filename);
        // 这里的 * 是一个通配符, 它可以了所以的文件名中 包含的 $filename 的文都找到
        //说明一下, $fileArr中的数组的顺序不是我们想要的 , 所以我们新建一个数组来 整理一下顺序
        $newfileArr = [];
        foreach($fileArr as $f){
        //在js前端我们把文件的名称 前加了 序号+"_", 所以我们可以取到文件名之后, 通过 下划线来分开并把序中写在 key 中
            $filebasename = basename($f); //$f是一个个的 路径, 这里使用 basename 得到文件名
            $filebasenamesplit = explode("_",$filebasename); //通过 下划线分割文件名,
            $newfileArr[$filebasenamesplit[0]] = $f;    //构造了一个新的数组, 其中 数组的key 就是 顺序号, 数组的值就是 分片文件的路径
        }
        //分片的序号和路径都准备好了, 就可以组装了
        $num = count($newfileArr);  //得到的所有分片的个数, 为后面使用for 循环做准务
        //开始使用for 循环来组装
        $newfilename = "huangjunhui".$filename; //这里为组装后的文件起一个名字, 可随意
        for($i = 1;$i<=$num;$i++){
            file_put_contents($newfilename,file_get_contents($newfileArr[$i]),FILE_APPEND);
            //这里以追加的方式, 把分片文件都写入到了一个文件中,
        }
        ......
        //删除临时文件中的分片文件, 这里可以使用 try catch来判断是否有错误
        foreach($newfileArr as $fi){
            unlink($fi);
        }
        //最后给前端返回 保存的文件名就可以
    }
}

上面的方法,我本地测试上传了一个 650M的文件,只用的 20秒的时间, 没有在服务器上测试过,大家可以按照这个方法试一下。

免责声明:本文内容来自用户上传并发布,站点仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。请核实广告和内容真实性,谨慎使用。

相关文章

怎么看江西gpu服务器配置和报价呢

在选择GPU服务器时,了解其配置和报价是非常重要的。以下是一些关于如何看GPU服务器配置和报价的建议:GPU类型和数量:首先需要了解GPU服务器所配备的GPU型号和数量。不同型号和数量的GPU有着不同...

在国内怎么登陆马来西亚服务器?

在国内怎么登陆马来西亚服务器?要在国内登录马来西亚服务器,你需要使用一个远程登录工具,如SSH客户端或远程桌面连接。以下是一些常用的步骤:获取服务器IP地址和登录凭据:在租用马来西亚服务器后,你会收到...

江苏高防服务器安全防护包含哪些

江苏高防服务器安全防护包含哪些?江苏高防服务器安全防护一般包括以下方面:1.DDoS攻击防护:高防服务器通常具有防御分布式拒绝服务(DDoS)攻击的能力,可以快速识别和拦截大规模的DDoS攻击流量,保...

如何在VSCode配置PHP开发环境

一、下载XAMPPXAMPP是一个易于安装的Apache发行版,其中包含MariaDB、PHP和Perl。仅仅需要下载并启动安装程序。XAMPP下载地址官网下载:apachefriends.org/z...

成都gpu服务器系统选择哪个好

GPU服务器系统是进行高性能计算任务和数据处理的重要工具。选择一个适合自己需求的GPU服务器系统,将会极大地提高计算效率和数据处理能力。然而,面对众多的GPU服务器系统,该如何选择呢?下面我们将从几个...

高速游戏服务器租用防DDOS的手段有哪些呢?国内高防服务器如何防御DOSS攻击?

高速游戏服务器是用来做游戏网站的服务器,而提到游戏网站,我们第一个想到的会是DDOS攻击。对的,无论怎样的游戏网站,棋牌游戏也好、诸如王者荣耀类的也好,或多或少受到过攻击。那么,高速游戏服务器租用防D...