java-多线程加上断点下载多个文件文件出现问题了

问题描述

多线程加上断点下载多个文件文件出现问题了
 package cn.com.sinosoft.sfjy.util;

import java.io.BufferedReader;
import java.io.File;
import java.io.FileInputStream;
import java.io.InputStream;
import java.io.InputStreamReader;
import java.io.RandomAccessFile;
import java.net.HttpURLConnection;
import java.net.URL;
import java.util.Map;
import java.util.Set;

public class DonwloadUtil {

    public static Map<FileName, DownloadVo> map;

    public DonwloadUtil(Map<FileName, DownloadVo> map) {
        DonwloadUtil.map = map;
        being();
    }

    public void being() {
        System.out.println("++++++++++++++++++++++++++++++++++++++++++++");
        Set<FileName> keySet = map.keySet();
        for (FileName fileName : keySet) {
            map.get(fileName).setFinished(donwload(fileName));
        }
        System.out.println("++++++++++++++++++++++++++++++++++++++++++++");
    }

    public boolean donwload(FileName filename) {
        // 发送get请求,请求这个地址的资源
        try {
            // 构建请求路径
            URL url = new URL(DonwloadUtil.map.get(filename).getDonwloadPath());
            // 发送连接
            HttpURLConnection conn = (HttpURLConnection) url.openConnection();
            // 请求方式
            conn.setRequestMethod("GET");
            // 请求连接超时
            conn.setConnectTimeout(5000);
            // 连接中超时
            conn.setReadTimeout(5000);
            // 请求连接成功 200
            if (conn.getResponseCode() == 200) {
                // 拿到所请求资源文件的长度
                long length = conn.getContentLength();

                File file = new File(DonwloadUtil.map.get(filename).getTargetPath() + "/"
                        + DonwloadUtil.map.get(filename).getFileName());
                // 生成临时文件
                RandomAccessFile raf = new RandomAccessFile(file, "rwd");
                // 设置临时文件的大小
                raf.setLength(length);
                raf.close();
                // 计算出每个线程应该下载多少字节
                long size = length / DonwloadUtil.map.get(filename).getThreadCount();

                for (int i = 0; i < DonwloadUtil.map.get(filename).getThreadCount(); i++) {
                    // 计算线程下载的开始位置和结束位置
                    long startIndex = i * size;
                    long endIndex = (i + 1) * size - 1;
                    // 如果是最后一个线程,那么结束位置写死
                    if (i == DonwloadUtil.map.get(filename).getThreadCount() - 1) {
                        endIndex = length - 1;
                    }
                    System.out.println(filename+"线程" + i + "的下载区间是:" + startIndex + "---" + endIndex);
                    new DownLoadThread(startIndex, endIndex, i, filename).start();

                }
            }
            return true;
        } catch (Exception e) {
            e.printStackTrace();
            return false;
        }
    }

}

class DownLoadThread extends Thread {
    long startIndex;
    long endIndex;
    int threadId;
    FileName filename;

    public DownLoadThread(long startIndex, long endIndex, int threadId, FileName filename) {
        super();
        this.startIndex = startIndex;
        this.endIndex = endIndex;
        this.threadId = threadId;
        this.filename = filename;
    }

    @Override
    public  void run() {
        try {
            // 存放当前线程的下载进度文件
            File progressFile = new File(filename+""+threadId + ".txt");
            // 判断进度临时文件是否存在
            if (progressFile.exists()) {
                FileInputStream fis = new FileInputStream(progressFile);
                BufferedReader br = new BufferedReader(new InputStreamReader(fis));
                // 从进度临时文件中读取出上一次下载的总进度,然后与原本的开始位置相加,得到新的开始位置
                startIndex += Integer.parseInt(br.readLine());
                fis.close();
            }
            // System.out.println("线程" + threadId + "的下载区间是:" + startIndex +
            // "---" + endIndex);
            // 再次发送http请求,下载原文件
            HttpURLConnection conn;
            URL url = new URL(DonwloadUtil.map.get(filename).getDonwloadPath());
            // 发送连接
            conn = (HttpURLConnection) url.openConnection();
            // 请求方式
            conn.setRequestMethod("GET");
            // 请求连接超时
            conn.setConnectTimeout(5000);
            // 连接中超时
            conn.setReadTimeout(5000);
            // 设置本次http请求所请求的数据的区间
            conn.setRequestProperty("Range", "bytes=" + startIndex + "-" + endIndex);
            //System.out.println(filenaem+conn.getResponseCode());
            // 请求部分数据,相应码是206
            if (conn.getResponseCode() == 206) {
                // 流里此时只有1/3原文件的数据
                InputStream is = conn.getInputStream();
                byte[] b = new byte[1024];
                int len = 0;
                int total = 0;
                // 拿到临时文件的输出流
                File file = new File(DonwloadUtil.map.get(filename).getTargetPath() + "/"
                        + DonwloadUtil.map.get(filename).getFileName());
                // 生成临时文件
                RandomAccessFile raf = new RandomAccessFile(file, "rwd");
                // 把文件的写入位置移动至startIndex
                raf.seek(startIndex);
                while ((len = is.read(b)) != -1) {
                    // 每次读取流里数据之后,同步把数据写入临时文件
                    raf.write(b, 0, len);
                    total += len;
                    System.out.println(filename+"线程" + threadId + "下载了" + total);

                    // 生成一个专门用来记录下载进度的临时文件
                    RandomAccessFile progressRaf = new RandomAccessFile(progressFile, "rwd");
                    // 每次读取流里数据之后,同步把当前线程下载的总进度写入进度临时文件中
                    progressRaf.write((total + "").getBytes());
                    progressRaf.close();
                }
                System.out.println(filename+"线程" + threadId + "下载完毕!");
                raf.close();

                DonwloadUtil.map.get(filename)
                        .setFinishedThread(DonwloadUtil.map.get(filename).getFinishedThread() + 1);
                synchronized (DonwloadUtil.map.get(filename).getDonwloadPath()) {
                    if (DonwloadUtil.map.get(filename).getFinishedThread() == DonwloadUtil.map.get(filename)
                            .getThreadCount()) {
                        for (int i = 0; i < DonwloadUtil.map.get(filename).getThreadCount(); i++) {
                            File f = new File(filename+""+i+ ".txt");
                            f.delete();
                        }
                        DonwloadUtil.map.get(filename).setFinishedThread(0);
                    }
                }

            }
        } catch (Exception e) {
            e.printStackTrace();
        }
    }
}

解决方案

http://www.cnblogs.com/hoojo/archive/2011/09/30/2196767.html

解决方案二:

多线程断点下载文件
Android多线程断点下载文件
Android多线程实现文件断点下载

时间: 2024-12-21 22:53:10

java-多线程加上断点下载多个文件文件出现问题了的相关文章

java多线程读取集合对象后写入同一文件

问题描述 java多线程读取集合对象后写入同一文件 有一个学生对象,包含学号.姓名.班级属性 生成10个学生对象后放入集合中 运用多线程读取集合中学生对象后将学生信息写入到同一文件(按学生学号排序) 本人多线程实在不会,求大神解答.(不实现排序的也行)主要是能有多线程方面的代码提供下参考 解决方案 文件写使用多线程要加锁,还不如用单线程,你这是要干嘛

Android使用多线程实现断点下载_Android

多线程下载是加快下载速度的一种方式,通过开启多个线程去执行一个任务..可以使任务的执行速度变快..多线程的任务下载时常都会使用得到..比如说我们手机内部应用宝的下载机制..一定是通过使用了多线程创建的下载器..并且这个下载器可以实现断点下载..在任务被强行终止之后..下次可以通过触发按钮来完成断点下载...那么如何实现断点下载这就是一个问题了..   首先我们需要明确一点就是多线程下载器通过使用多个线程对同一个任务进行下载..但是这个多线程并不是线程的数目越多,下载的速度就越快..当线程增加的很

Android使用多线程实现断点下载

多线程下载是加快下载速度的一种方式,通过开启多个线程去执行一个任务..可以使任务的执行速度变快..多线程的任务下载时常都会使用得到..比如说我们手机内部应用宝的下载机制..一定是通过使用了多线程创建的下载器..并且这个下载器可以实现断点下载..在任务被强行终止之后..下次可以通过触发按钮来完成断点下载...那么如何实现断点下载这就是一个问题了.. 首先我们需要明确一点就是多线程下载器通过使用多个线程对同一个任务进行下载..但是这个多线程并不是线程的数目越多,下载的速度就越快..当线程增加的很多的

多线程-android 多个文件,每个文件都使用断点下载,线程是否会太多

问题描述 android 多个文件,每个文件都使用断点下载,线程是否会太多 我现在想使用文件的断点下载功能,每个文件可以分成几断,使用线程下载,如果存在多个文件都是用线程下载的话,线程有点多,怎样才是一个合适的方法 解决方案 可以试试线程池,或者做一个自己控制的线程队列 解决方案二: 线程池,或者就用AsyncTask,里面用的就是线程池.

Android原生实现多线程断点下载实例代码

各位父老乡亲,我单汉三又回来了,今天为大家带来一个用原生的安卓写的多线程断点下载Demo. 通过本文你可以学习到: SQLite的基本使用,数据库的增删改查. Handler的消息处理与更新UI. Service(主要用于下载)的进阶与使用. 原生的json文件解析(多层嵌套). RandomAccessFile的基本使用,可以将文件分段. 基于HttpURLConnection的大文件下载. 上面内容结合,实现多线程,断点下载. Demo是在TV上运行的,图片显示的问题不要纠结了. 文件下载的

Java 多线程断点下载文件_详解

基本原理:利用URLConnection获取要下载文件的长度.头部等相关信息,并设置响应的头部信息.并且通过URLConnection获取输入流,将文件分成指定的块,每一块单独开辟一个线程完成数据的读取.写入.通过输入流读取下载文件的信息,然后将读取的信息用RandomAccessFile随机写入到本地文件中.同时,每个线程写入的数据都文件指针也就是写入数据的长度,需要保存在一个临时文件中.这样当本次下载没有完成的时候,下次下载的时候就从这个文件中读取上一次下载的文件长度,然后继续接着上一次的位

使用java实现http多线程断点下载文件(一)_java

基本原理:利用URLConnection获取要下载文件的长度.头部等相关信息,并设置响应的头部信息.并且通过URLConnection获取输入流,将文件分成指定的块,每一块单独开辟一个线程完成数据的读取.写入.通过输入流读取下载文件的信息,然后将读取的信息用RandomAccessFile随机写入到本地文件中.同时,每个线程写入的数据都文件指针也就是写入数据的长度,需要保存在一个临时文件中.这样当本次下载没有完成的时候,下次下载的时候就从这个文件中读取上一次下载的文件长度,然后继续接着上一次的位

iOS开发网络篇—实现大文件的多线程断点下载_IOS

说明:本文介绍多线程断点下载.项目中使用了苹果自带的类,实现了同时开启多条线程下载一个较大的文件.因为实现过程较为复杂,所以下面贴出完整的代码. 实现思路:下载开始,创建一个和要下载的文件大小相同的文件(如果要下载的文件为100M,那么就在沙盒中创建一个100M的文件,然后计算每一段的下载量,开启多条线程下载各段的数据,分别写入对应的文件部分). 项目中用到的主要类如下: 完成的实现代码如下: 主控制器中的代码: #import "YYViewController.h" #import

java 多线程-为什么使用Java多线程下载文件时下载后的文件和服务器端文件大小一模一样但是无法打开

问题描述 为什么使用Java多线程下载文件时下载后的文件和服务器端文件大小一模一样但是无法打开 为什么使用Java多线程下载文件时下载后的文件和服务器端文件大小一模一样但是无法打开?? package com.miuitust.mutilethread; import java.io.File; import java.io.InputStream; import java.io.RandomAccessFile; import java.net.HttpURLConnection; impor