打开APP
userphoto
未登录

开通VIP,畅享免费电子书等14项超值服

开通VIP
[实践OK]Web服务器(如Apache、Nginx)会默认开启对断点续传的支持,php支持断点续传的文件下载类,PHP上传实现断点续传文件的方法。
    背景:大文件的断点续传,有时网络波动啥的,需要断点从已经下载位置续传下载文件,对于没有传过的文件再次从开始下载就麻烦了,这块http协议支持的,Apache和Nginx都支持这样的方法实现了从某个部分进行断点下载。
服务器是否支持断点续传的判断:
更多 0
断点续传 linux wget 服务器 curl
通常情况下,Web服务器(如Apache)会默认开启对断点续传的支持。因此,如果直接通过Web服务器来提供文件的下载,可以不必做特别的配置,即可享受到断点续传的好处。断点续传是在发起HTTP请求的时候加入RANGE头来告诉服务器客户端已经下载了多少字节。等所有这些请求都返回之后,再把得到的内容一块一块的拼接起来得到完整的资源。

Resumable download file Web服务器(如Apache)默认开启断点续传

你可以通过以下的命令来测试一下。

Linux 测试服务器是否支持断点续传

localhost [~]# wget -S http://httpd.apache.org/images/httpd_logo_wide_new.png 2>&1 | grep ‘Accept-Ranges’
  Accept-Ranges: bytes

输出结果 Accept-Ranges: bytes ,说明服务器支持按字节下载。

curl 命令发送字节范围下载

curl –range 0-99 http://images.apple.com/home/images/billboard_iphone_hero.jpg

这样可以到最开始99字节,结果如下图:

curl range bytes request curl 命令发送字节范围请求

说明从服务器端按字节范围下载是完全没有问题的。

现在我们尝试以下方式:

1、一次性下载整个图片。

localhost [~]# curl –range 0-98315 http://images.apple.com/home/images/billboard_iphone_hero.jpg > test.jpg
  % Total    % Received % Xferd  Average Speed   Time    Time     Time  Current
                                 Dload  Upload   Total   Spent    Left  Speed
100 98316  100 98316    0     0   524k      0 –:–:– –:–:– –:—:—  527k

完成后,test.jpg完全等于billboard_iphone_hero.jpg,文件大小为98,316 字节。

实践如下:我的Nginx服务器,请求下看是否支持,如下:
1)实践下下载这块的header返回头有Accept-Ranges: bytes证明Nginx也是支持断点续传下载的:
  1.  wget -S http://justwinit.cn/template/trielegant/images/bridge-banner-nine.jpg  
  2. --2014-11-19 22:46:51--  http://justwinit.cn/template/trielegant/images/bridge-banner-nine.jpg  
  3. 正在解析主机 justwinit.cn... 119.10.6.23  
  4. 正在连接 justwinit.cn|119.10.6.23|:80... 已连接。  
  5. 已发出 HTTP 请求,正在等待回应...   
  6.   HTTP/1.1 200 OK  
  7.   Server: nginx  
  8.   Date: Wed, 19 Nov 2014 14:34:46 GMT  
  9.   Content-Type: image/jpeg  
  10.   Content-Length: 7052  
  11.   Last-Modified: Fri, 07 Nov 2014 05:06:12 GMT  
  12.   Connection: keep-alive  
  13.   ETag: "545c5344-1b8c"  
  14.   Expires: Fri, 19 Dec 2014 14:34:46 GMT  
  15.   Cache-Control: max-age=2592000  
  16.   Accept-Ranges: bytes  
  17. 长度:7052 (6.9K) [image/jpeg]  
  18. 正在保存至: “bridge-banner-nine.jpg.1”  
  19. 2)通地加上grep指令有返回即是支持的:  

  1. wget -S http://justwinit.cn/template/trielegant/images/bridge-banner-nine.jpg 2>&1 | grep 'Accept-Ranges'   
  2.   Accept-Ranges: bytes  

  1. 3)用curl实现下载一段并保存到本地:  
  2. [codes=php]  
  3.  curl --range 0-99 http://justwinit.cn/template/trielegant/images/bridge-banner-nine.jpg  > bridge-banner-nine.jpg  
  4.   % Total    % Received % Xferd  Average Speed   Time    Time     Time  Current  
  5.                                  Dload  Upload   Total   Spent    Left  Speed  
  6.   0   100    0   100    0     0    729      0 --:--:-- --:--:-- --:--:--  1886  

(1)Curl包含range的请求头是这样的:
  1. GET /template/trielegant/images/bridge-banner-nine.jpg HTTP/1.1  
  2. Request Version: HTTP/1.1  
  3. Range: bytes=0-108  
  4. User-Agent: curl/7.19.7 (i386-redhat-linux-gnu) libcurl/7.19.7 NSS/3.14.0.0 zlib/1.2.3 libidn/1.18 libssh2/1.4.2  
  5. Host: justwinit.cn  
  6. Accept: */*  

(2)其抓包Nginx的返回头是这样:
HTTP/1.1 206 Partial Content
Server: nginx
Date: Wed, 19 Nov 2014 14:45:07 GMT
Content-Type: image/jpeg
Content-Length: 109
Last-Modified: Fri, 07 Nov 2014 05:06:12 GMT
Connection: keep-alive
ETag: "545c5344-1b8c"
Expires: Fri, 19 Dec 2014 14:45:07 GMT
Cache-Control: max-age=2592000
Content-Range: bytes 0-108/7052


4)通过前面的curl及wget联合起来,先后组合起来实现一个断点下载整个图片,并看其服务器返回头(curl已经下了前面的108,后从109开始wget:
(1)先保存一部分到108:
  1. root@192.168.0.6:~# curl --range 0-108 http://justwinit.cn/template/trielegant/images/bridge-banner-nine.jpg  > bridge-banner-nine.jpg  
  2.   % Total    % Received % Xferd  Average Speed   Time    Time     Time  Current  
  3.                                  Dload  Upload   Total   Spent    Left  Speed  
  4. 109   109  109   109    0     0    907      0 --:--:-- --:--:-- --:--:--  1912  


(2)再通过wget的断点续传下载命令-c,请求剩下的部分(Content-Range: bytes 109-7051/7052):
A)加上-S看返回头, -S,  --server-response         打印服务器响应。:
  1. root@192.168.0.6:~# wget -S -c http://justwinit.cn/template/trielegant/images/bridge-banner-nine.jpg  
  2. --2014-11-19 22:53:16--  http://justwinit.cn/template/trielegant/images/bridge-banner-nine.jpg  
  3. 正在解析主机 justwinit.cn... 119.10.6.23  
  4. 正在连接 justwinit.cn|119.10.6.23|:80... 已连接。  
  5. 已发出 HTTP 请求,正在等待回应...   
  6.   HTTP/1.1 206 Partial Content  
  7.   Server: nginx  
  8.   Date: Wed, 19 Nov 2014 14:41:12 GMT  
  9.   Content-Type: image/jpeg  
  10.   Content-Length: 6943  
  11.   Last-Modified: Fri, 07 Nov 2014 05:06:12 GMT  
  12.   Connection: keep-alive  
  13.   ETag: "545c5344-1b8c"  
  14.   Expires: Fri, 19 Dec 2014 14:41:12 GMT  
  15.   Cache-Control: max-age=2592000  
  16.   Content-Range: bytes 109-7051/7052  
  17. 长度:7052 (6.9K),6943 (6.8K) 字节剩余 [image/jpeg]  
  18. 正在保存至: “bridge-banner-nine.jpg”  
  19.   
  20. 100%[+=============================================================================================================>] 7,052       --.-K/s   in 0.1s      
  21.   
  22. 2014-11-19 22:53:16 (68.2 KB/s) - 已保存 “bridge-banner-nine.jpg” [7052/7052])  


B)发起头如下,也就是说经curl保存一部分后,wget通过-c参数时,后面它会去读取目前文件大小,后写在http头里去找服务端要,请求头如下:
  1. GET /template/trielegant/images/bridge-banner-nine.jpg HTTP/1.0  
  2. Request Version: HTTP/1.0  
  3. Range: bytes=109-  
  4. User-Agent: Wget/1.12 (linux-gnu)  
  5. Accept: */*  
  6. Host: justwinit.cn  
  7. Connection: Keep-Alive  


注意:字节是从0开始,结束字节为总字节长度 减 1。
来自:http://ju.outofmemory.cn/entry/23646
Nginx:http://chenzhenianqing.cn/articles/926.html

php 支持断点续传,主要依靠HTTP协议中 header HTTP_RANGE实现。

HTTP断点续传原理
Http头 Range、Content-Range()
HTTP头中一般断点下载时才用到Range和Content-Range实体头,
Range用户请求头中,指定第一个字节的位置和最后一个字节的位置,如(Range:200-300)
Content-Range用于响应头

请求下载整个文件:
GET /test.rar HTTP/1.1
Connection: close
Host: 116.1.219.219
Range: bytes=0-801 //一般请求下载整个文件是bytes=0- 或不用这个头

一般正常回应
HTTP/1.1 200 OK
Content-Length: 801      
Content-Type: application/octet-stream
Content-Range: bytes 0-800/801 //801:文件总大小

FileDownload.class.php
  1.     <?php    
  2.     /** php下载类,支持断点续传  
  3.     *   Date:   2013-06-30  
  4.     *   Author: fdipzone  
  5.     *   Ver:    1.0  
  6.     *  
  7.     *   Func:  
  8.     *   download: 下载文件  
  9.     *   setSpeed: 设置下载速度  
  10.     *   getRange: 获取header中Range  
  11.     */    
  12.         
  13.     class FileDownload{ // class start    
  14.         
  15.         private $_speed = 512;   // 下载速度    
  16.         
  17.         
  18.         /** 下载  
  19.         * @param String  $file   要下载的文件路径  
  20.         * @param String  $name   文件名称,为空则与下载的文件名称一样  
  21.         * @param boolean $reload 是否开启断点续传  
  22.         */    
  23.         public function download($file, $name='', $reload=false){    
  24.             if(file_exists($file)){    
  25.                 if($name==''){    
  26.                     $name = basename($file);    
  27.                 }    
  28.         
  29.                 $fp = fopen($file, 'rb');    
  30.                 $file_size = filesize($file);    
  31.                 $ranges = $this->getRange($file_size);    
  32.         
  33.                 header('cache-control:public');    
  34.                 header('content-type:application/octet-stream');    
  35.                 header('content-disposition:attachment; filename='.$name);    
  36.         
  37.                 if($reload && $ranges!=null){ // 使用续传    
  38.                     header('HTTP/1.1 206 Partial Content');    
  39.                     header('Accept-Ranges:bytes');    
  40.                         
  41.                     // 剩余长度    
  42.                     header(sprintf('content-length:%u',$ranges['end']-$ranges['start']));    
  43.                         
  44.                     // range信息    
  45.                     header(sprintf('content-range:bytes %s-%s/%s', $ranges['start'], $ranges['end'], $file_size));    
  46.                         
  47.                     // fp指针跳到断点位置    
  48.                     fseek($fp, sprintf('%u', $ranges['start']));    
  49.                 }else{    
  50.                     header('HTTP/1.1 200 OK');    
  51.                     header('content-length:'.$file_size);    
  52.                 }    
  53.         
  54.                 while(!feof($fp)){    
  55.                     echo fread($fp, round($this->_speed*1024,0));    
  56.                     ob_flush();    
  57.                     //sleep(1); // 用于测试,减慢下载速度    
  58.                 }    
  59.         
  60.                 ($fp!=null) && fclose($fp);    
  61.         
  62.             }else{    
  63.                 return '';    
  64.             }    
  65.         }    
  66.         
  67.         
  68.         /** 设置下载速度  
  69.         * @param int $speed  
  70.         */    
  71.         public function setSpeed($speed){    
  72.             if(is_numeric($speed) && $speed>16 && $speed<4096){    
  73.                 $this->_speed = $speed;    
  74.             }    
  75.         }    
  76.         
  77.         
  78.         /** 获取header range信息  
  79.         * @param  int   $file_size 文件大小  
  80.         * @return Array  
  81.         */    
  82.         private function getRange($file_size){    
  83.             if(isset($_SERVER['HTTP_RANGE']) && !emptyempty($_SERVER['HTTP_RANGE'])){    
  84.                 $range = $_SERVER['HTTP_RANGE'];    
  85.                 $range = preg_replace('/[\s|,].*/', '', $range);    
  86.                 $range = explode('-', substr($range, 6));    
  87.                 if(count($range)<2){    
  88.                     $range[1] = $file_size;    
  89.                 }    
  90.                 $range = array_combine(array('start','end'), $range);    
  91.                 if(emptyempty($range['start'])){    
  92.                     $range['start'] = 0;    
  93.                 }    
  94.                 if(emptyempty($range['end'])){    
  95.                     $range['end'] = $file_size;    
  96.                 }    
  97.                 return $range;    
  98.             }    
  99.             return null;    
  100.         }    
  101.         
  102.     } // class end    
  103.         
  104.     ?>    
  105.   
  106. demo  
  107. [codes=php]  
  108.   
  109.     <?php    
  110.         
  111.     require('FileDownload.class.php');    
  112.     $file = 'book.zip';    
  113.     $name = time().'.zip';    
  114.     $obj = new FileDownload();    
  115.     $flag = $obj->download($file, $name);    
  116.     //$flag = $obj->download($file, $name, true); // 断点续传    
  117.         
  118.     if(!$flag){    
  119.         echo 'file not exists';    
  120.     }    
  121.         
  122.     ?>    
  123.   
  124. 断点续传测试方法:  
  125. 使用linux wget命令去测试下载, wget -c -O file http://xxx  
  126.   
  127. 1.先关闭断点续传  
  128. $flag = $obj->download($file, $name);  
  129. [plain] view plaincopy  
  130.   
  131.     fdipzone@ubuntu:~/Downloads$ wget -O test.rar http://demo.fdipzone.com/demo.php    
  132.     --2013-06-30 16:52:44--  http://demo.fdipzone.com/demo.php    
  133.     正在解析主机 demo.fdipzone.com... 127.0.0.1    
  134.     正在连接 demo.fdipzone.com|127.0.0.1|:80... 已连接。    
  135.     已发出 HTTP 请求,正在等待回应... 200 OK    
  136.     长度: 10445120 (10.0M) [application/octet-stream]    
  137.     正在保存至: “test.rar”    
  138.         
  139.     30% [============================>                                                                     ] 3,146,580    513K/s  估时 14s    
  140.     ^C    
  141.     fdipzone@ubuntu:~/Downloads$ wget -c -O test.rar http://demo.fdipzone.com/demo.php    
  142.     --2013-06-30 16:52:57--  http://demo.fdipzone.com/demo.php    
  143.     正在解析主机 demo.fdipzone.com... 127.0.0.1    
  144.     正在连接 demo.fdipzone.com|127.0.0.1|:80... 已连接。    
  145.     已发出 HTTP 请求,正在等待回应... 200 OK    
  146.     长度: 10445120 (10.0M) [application/octet-stream]    
  147.     正在保存至: “test.rar”    
  148.         
  149.     30% [============================>                                                                     ] 3,146,580    515K/s  估时 14s    
  150.     ^C    
  151.         
  152.     可以看到,wget -c不能断点续传    
  153.   
  154.   
  155. 2.开启断点续传  
  156. $flag = $obj->download($file, $name, true);  
  157. [plain] view plaincopy  
  158.   
  159.     fdipzone@ubuntu:~/Downloads$ wget -O test.rar http://demo.fdipzone.com/demo.php    
  160.     --2013-06-30 16:53:19--  http://demo.fdipzone.com/demo.php    
  161.     正在解析主机 demo.fdipzone.com... 127.0.0.1    
  162.     正在连接 demo.fdipzone.com|127.0.0.1|:80... 已连接。    
  163.     已发出 HTTP 请求,正在等待回应... 200 OK    
  164.     长度: 10445120 (10.0M) [application/octet-stream]    
  165.     正在保存至: “test.rar”    
  166.         
  167.     20% [==================>                                                                               ] 2,097,720    516K/s  估时 16s    
  168.     ^C    
  169.     fdipzone@ubuntu:~/Downloads$ wget -c -O test.rar http://demo.fdipzone.com/demo.php    
  170.     --2013-06-30 16:53:31--  http://demo.fdipzone.com/demo.php    
  171.     正在解析主机 demo.fdipzone.com... 127.0.0.1    
  172.     正在连接 demo.fdipzone.com|127.0.0.1|:80... 已连接。    
  173.     已发出 HTTP 请求,正在等待回应... 206 Partial Content    
  174.     长度: 10445121 (10.0M),7822971 (7.5M) 字节剩余 [application/octet-stream]    
  175.     正在保存至: “test.rar”    
  176.         
  177.     100%[++++++++++++++++++++++++=========================================================================>] 10,445,121   543K/s   花时 14s       
  178.         
  179.     2013-06-30 16:53:45 (543 KB/s) - 已保存 “test.rar” [10445121/10445121])    
  180.         
  181.     可以看到会从断点的位置(%20)开始下载。    
  182.   
  183. 源码下载地址:<a href="http://download.csdn.net/detail/fdipzone/5676439" target="_blank">点击下载 </a>  
  184. 摘自:http://blog.csdn.net/fdipzone/article/details/9208221  
  185.   
  186.   
  187. PHP上传实现断点续传文件的方法:  
  188. 其实说简单点就是通过这个变量$_SERVER['HTTP_RANGE']取得用户请求的文件的range,然后程序去控制文件的输出。比如第一次请求一个文件的从0到999字节,第二次请求1000到1999字节,以此类推,每次请求1000字节的内容,然后程序通过fseek函数去取得对应的文件位置,然后输出。  
  189. [codes=php]  
  190.     $fname = './05e58c19552bb26b158f6621a6650899';   
  191.     $fp = fopen($fname,'rb');   
  192.     $fsize = filesize($fname);   
  193.     if (isset($_SERVER['HTTP_RANGE']) && ($_SERVER['HTTP_RANGE'] != "") && preg_match("/^bytes=([0-9]+)-$/i", $_SERVER['HTTP_RANGE'], $match) && ($match[1] < $fsize)) {   
  194.     $start = $match[1];   
  195.     } else {   
  196.     $start = 0;   
  197.     }   
  198.     @header("Cache-control: public");   
  199.     @header("Pragma: public");   
  200.     if ($start > 0) {   
  201.     fseek($fp, $start);   
  202.     Header("HTTP/1.1 206 Partial Content");   
  203.     Header("Content-Length: " . ($fsize - $start));   
  204.     Header("Content-Ranges: bytes" . $start . "-" . ($fsize - 1) . "/" . $fsize);   
  205.     } else {   
  206.     header("Content-Length: $fsize");   
  207.     Header("Accept-Ranges: bytes");   
  208.     }   
  209.     @header("Content-Type: application/octet-stream");   
  210.     @header("Content-Disposition: attachment;filename=1.rm");   
  211.     fpassthru($fp);    

大家也可以看下Discuz!论坛软件的attachment.php文件是如何实现断点续传的。请看代码:也是通过$_SERVER['HTTP_RANGE']取得用户请求的文件的range,具体的大家可以查看其源码分析下。这里我就当抛砖引玉了。
  1.  $range = 0;   
  2. if($readmod == 4) {   
  3. dheader('Accept-Ranges: bytes');   
  4. if(!emptyempty($_SERVER['HTTP_RANGE'])) {   
  5. list($range) = explode('-',(str_replace('bytes=', '', $_SERVER['HTTP_RANGE'])));   
  6. $rangesize = ($filesize - $range) > 0 ? ($filesize - $range) : 0;   
  7. dheader('Content-Length: '.$rangesize);   
  8. dheader('HTTP/1.1 206 Partial Content');   
  9. dheader('Content-Range: bytes='.$range.'-'.($filesize-1).'/'.($filesize));   
  10. }   
  11. }    

摘自:http://www.yunsec.net/a/special/wzjs/wzbc/php/2010/0731/5120.html

作者:justwinit@向东博客 专注WEB应用 构架之美 --- 构架之美,在于尽态极妍 | 应用之美,在于药到病除
地址:http://www.justwinit.cn/post/7635/
版权所有。转载时必须以链接形式注明作者和原始出处及本声明!

本站仅提供存储服务,所有内容均由用户发布,如发现有害或侵权内容,请点击举报
打开APP,阅读全文并永久保存 查看更多类似文章
猜你喜欢
类似文章
文件下载原理
用Java实现断点续传(HTTP) - - JavaEye技术网站
HTTP消息头字段
Golang实现断点续传
从放弃迅雷和 IDM 到自己开发下载工具
java相关:基于断点续传下载原理的实现
更多类似文章 >>
生活服务
热点新闻
分享 收藏 导长图 关注 下载文章
绑定账号成功
后续可登录账号畅享VIP特权!
如果VIP功能使用有故障,
可点击这里联系客服!

联系客服