断点续传

1.原理

断点续传的理解可以分为两部分:一部分是断点,一部分是续传。断点的由来是在下载的过程中,将一个下载文件分成了多个部分。同时进行多个部分一起的下载,当某个时间点,任务被暂停了。此时下载暂停的位置就是断点了。续传就是一个未完成的任务再次开始时,会从上次断点继续传送。
使用多线程断点续传的时候,将下载后上传任务(一个文件或者一个压缩包)人为的划分为几个部分。每一部分采用一个线程进行上传或下载,多个线程并发可以占用服务器更多资源,从而加快下载速度。在下载(或上传)过程中,如果网络故障,点量不足等原因导致下载中断,就需要用到断点续传功能。下次启动时,可以从记录位置(已下载的部分)开始,继续下载没有下载的部分,避免重复部分的下载。断点续传的实质就是能记录上一次已下载完成的位置

断点续传的过程
1 断点续传需要在下载过程中记录每条线程的下载进度;
2 每次下载开始之前先读取数据库,查询是否有未完成的记录,有就继续下载,没有则创建记录插入数据库
3 在每次向文件中写入数据之后,在数据库中更新下载进度
4 下载完成之后删除数据库中的进度

2.代码

package com.zhouzhuo.multitaskdownload;

import android.app.Activity;
import android.os.AsyncTask;
import android.os.Bundle;
import android.os.Environment;
import android.os.Handler;
import android.os.Message;
import android.util.Log;
import android.widget.ProgressBar;

import java.io.File;
import java.io.InputStream;
import java.io.RandomAccessFile;
import java.net.HttpURLConnection;
import java.net.MalformedURLException;
import java.net.URL;
import java.util.Map;

/**
 * Created by zhouzhuo on 2018/1/17.
 */

public class MainActivity extends Activity {
    private String path = "http://117.169.69.238/mp3.9ku.com/m4a/186947.m4a";
    private ProgressBar progressBar;
    private String downloadPath = Environment.getDownloadCacheDirectory()
            + File.separator+"download";
    private String targetFilePath="/";  //下载文件存放目录
    @Override
    public void onCreate(Bundle savedInstanceState) {
        super.onCreate(savedInstanceState);
        setContentView(R.layout.activity_main);
        try {
            new MuchThreadDown(path, downloadPath, 3).downLoad();
        } catch (Exception e) {
            e.printStackTrace();
        }
    }

    public class MuchThreadDown {

        private String targetFilePath = "/";//下载文件存放目录
        private int threadCount = 3;//线程数量
        private Map<Integer,ProgressBar> progressBarMap;//键 线程iD,值 进度条控件
        private Handler handler;
        private String path;

        /**
         *
         * @param path 要下载文件的网络路径
         * @param targetFilePath 保存下载文件的目录
         * @param threadCount 开启的线程数量,默认为3
         */
        public MuchThreadDown(String path,String targetFilePath,int threadCount){
            this.path = path;
            this.targetFilePath = targetFilePath;
            this.threadCount = threadCount;
        }

        public Map<Integer,ProgressBar> getProgressBarMap(){
            return progressBarMap;
        }

        public Handler getHandler(){
            return handler;
        }

        public void setHandler(Handler handler){
            this.handler = handler;
        }

        public void setProgressBarMap(Map<Integer,ProgressBar> progressBarMap){
            this.progressBarMap = progressBarMap;
        }

        //下载文件
        public void downLoad() throws Exception{
            //连接资源
            URL url = new URL(path);

            HttpURLConnection connection = (HttpURLConnection) url.openConnection();
            connection.setRequestMethod("GET");
            connection.setConnectTimeout(10000);

            int code = connection.getResponseCode();
            if(code == 200){
                //获取资源大小
                int connectionLength  = connection.getContentLength();
                //在本地创建一个与资源文件同样大小的文件来占位
                RandomAccessFile randomAccessFile = new RandomAccessFile(new File(targetFilePath,getFileName(url)),"rw");
                randomAccessFile.setLength(connectionLength);
                //将下载任务分配给每个线程
                //计算每个线程理论上下载的数量
                int blockSize = connectionLength/threadCount;
                //为每个线程分配任务
                for (int threadId=0;threadId<threadCount;threadId++){
                    //线程开始下载的位置
                    int startIndex = blockSize*threadId;
                    //线程结束下载的位置
                    int endIndex = blockSize*(threadId+1)-1;
                    //如果是最后一个线程,将剩下的下载任务全部交给这个线程
                    if(threadId == threadCount -1){
                        endIndex = connectionLength - 1;
                    }

                    //TODO
                    if(progressBarMap !=null){
                        new DownloadThread(threadId,startIndex,endIndex,progressBarMap.get(threadId),handler);
                    }else {
                        new DownloadThread(threadId,startIndex,endIndex,null,handler).start();
                    }

                }
            }
        }


    }

    private class DownloadThread extends Thread{

        private int threadId;
        private int startIndex;
        private int endIndex;
        private ProgressBar progressBar;
        private int currentThreadTotal;//当前线程下载文件的总大小
        private Handler handler;

        public DownloadThread(int threadId,
                              int startIndex,
                              int endIndex,
                              ProgressBar progressBar,
                              Handler handler){
            this.threadId = threadId;
            this.startIndex = startIndex;
            this.endIndex = endIndex;
            this.currentThreadTotal = endIndex -startIndex+1;
            this.progressBar = progressBar;
            this.handler = handler;
        }

        @Override
        public void run() {
            super.run();
            Log.d("zhouzhuo","线程"+threadId+"开始下载");
            //分段请求网络,分段将文件保存到本地
            try {
                URL url = new URL(path);
                //加载下载文件的位置
                File downThreadFile = new File(targetFilePath,getFileName(url)+"_downThread_"+threadId+".dt");
                RandomAccessFile downThreadStream ;
                if(downThreadFile.exists()){//
                    downThreadStream = new RandomAccessFile(downThreadFile,"rwd");
                    String startIndex_str = downThreadStream.readLine();
                    //设置下载起点
                    this.startIndex = Integer.parseInt(startIndex_str);
                }else {
                    downThreadStream = new RandomAccessFile(downThreadFile,"rwd");
                }

                HttpURLConnection connection = (HttpURLConnection) url.openConnection();
                connection.setRequestMethod("GET");
                connection.setConnectTimeout(10000);
                //设置分段下载的头信息。Range:做分段数据请求用的。格式:Range types = 0-1024  或者 bytes:0-1024
                connection.setRequestProperty("Range","bytes="+startIndex+"-"+endIndex);
                Log.d("zhouzhuo","线程_"+threadId+"的下载起点是:"+startIndex+" 下载终点是:"+endIndex);
                if(connection.getResponseCode() == 206){
                    //200:请求全部资源成功
                    //206: 代表部分资源请求成功
                    //获取流
                    InputStream inputStream = connection.getInputStream();
                    //获取前面已创建的文件
                    RandomAccessFile randomAccessFile =new RandomAccessFile(
                            new File(targetFilePath,getFileName(url)),"rw"
                    );
                    //文件写入的开始位置
                    randomAccessFile.seek(startIndex);

                    //将网络流中的文件写入本地
                    byte[] buffer = new byte[1024*100];
                    int length = -1;
                    //记录本次下载文件的大小
                    int total = 0;
                    boolean flag = false;
                    if(progressBar !=null){
                        flag = true;
                        progressBar.setMax(currentThreadTotal);
                    }
                    while ((length = inputStream.read(buffer))>0){
                        randomAccessFile.write(buffer,0,length);
                        total += length;
                        //将当前下载到位置保持到文件中
                        int currentThreadPosition = startIndex +total;//当前文件下载位置
                        downThreadStream.seek(0);
                        downThreadStream.write(((currentThreadPosition)+"").getBytes("UTF-8"));
                        //设置进度条
                        if(flag){
                            progressBar.setProgress(currentThreadTotal-(endIndex-currentThreadPosition));
                        }
                    }
                    if(handler !=null){
                        Message message = Message.obtain();
                        message.what = 66;
                        message.obj = 1;
                        handler.sendMessage(message);
                    }
                    downThreadStream.close();
                    inputStream.close();
                    randomAccessFile.close();
                    //删除临时文件
                    cleanTemp(downThreadFile);

                }
            } catch (Exception e) {
                e.printStackTrace();
            }
        }
    }

    //获取下载文件的名称
    private String getFileName(URL url) {
        String filename = url.getFile();
        return  filename.substring(filename.lastIndexOf("/")+1);
    }

    //删除线程产生的临时文件
    private synchronized void cleanTemp(File file){
        file.delete();
    }
}

3.代码分析

首先根据下载的地址获取连接流,得到下载文件的大小。然后根据下载线程的个数把文件拆分成若干断,交给各个线程去下载。
每一个下载线程里面都有下载的起始和结束位置。
通过connection.setRequestProperty("Range","bytes="+startIndex+"-"+endIndex);设置分段请求。然后通过RandomAccessFile seek移动位置,然后在相应位置RandomAccessFileWrite()写入文件。

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 203,937评论 6 478
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 85,503评论 2 381
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 150,712评论 0 337
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 54,668评论 1 276
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 63,677评论 5 366
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 48,601评论 1 281
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 37,975评论 3 396
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 36,637评论 0 258
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 40,881评论 1 298
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 35,621评论 2 321
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 37,710评论 1 329
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 33,387评论 4 319
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 38,971评论 3 307
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 29,947评论 0 19
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 31,189评论 1 260
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 44,805评论 2 349
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 42,449评论 2 342

推荐阅读更多精彩内容