Java实现多线程断点下载(下载过程中可以暂停)
线程可以理解为下载的通道,一个线程就是一个文件的下载通道,多线程也就是同时开启好几个下载通道。当服务器提供下载服务时,使用下载者是共享带宽的,在优先级相同的情况下,总服务器会对总下载线程进行平均分配。不难理解,如果你线程多的话,那下载的越快。
现流行的下载软件都支持多线程,且支持中途暂停下载,再次开始时不会从头开始下载。
两种功能的实现步骤如下:
(1)连接到下载资源文件时,首先判断资源文件大小,同步的在本地创建一个大小相同的临时文件用于存储下载数据。
(2)根据线程数量确定每个线程所需下载的文件大小
(3)根据每个线程下载的文件大小以及线程数量,决定每个线程的开始下载位置以及结束下载位置
(4)为实现断点下载功能,需要对每个线程实时下载的位置做标记,方便下次开始时继续之前进度下载
开启3个线程下载视图(默认下载目录为java所辖项目):
整体实现代码如下(优化空间还有很大哦,大家不要只是看看就完事喽)
import java.io.BufferedReader;
import java.io.File;
import java.io.FileInputStream;
import java.io.InputStream;
import java.io.InputStreamReader;
import java.io.RandomAccessFile;
import java.net.HttpURLConnection;
import java.net.URL;
public class DownLoad {
// 声明下载路径“红色警戒2”
public static final String PATH = "http://soft3.xzstatic.com/2015/10/hsjj2ghgzh.rar";
public static int threadCount = 0;// 声明线程数量
public static void main(String[] args) {
try {
URL url = new URL(PATH);
// 获取连接
HttpURLConnection conn = (HttpURLConnection) url.openConnection();
// 通过获取连接定义文件名
String[] str = PATH.split("/");
String fileName = str[5];
// 获取下载文件大小
int fileLength = conn.getContentLength();
System.out.println(fileName);
// 在本地创建一个与服务器大小一致的可随机写入文件
RandomAccessFile raf = new RandomAccessFile(fileName, "rwd");
System.out.println(fileLength);// 测试用
raf.setLength(fileLength);
// 自定义线程数量
threadCount = 3;
// 计算每条线程下载数据的大小
int blockSize = fileLength / threadCount;
// 启动线程下载
for (int threadId = 1; threadId <= threadCount; threadId++) {
// 核心代码,定义每个线程开始以及结束的下载位置
int startPos = (threadId - 1) * blockSize;// 开始下载的位置
int endPos = (threadId * blockSize) - 1;// 结束下载的位置(不包含最后一块)
if (threadCount == threadId) {
endPos = fileLength;
}
new Thread(new DownLoadThread(threadId, startPos, endPos, PATH))
.start();
}
} catch (Exception e) {
e.printStackTrace();
}
} // 实现下载线程
static class DownLoadThread implements Runnable {
private int threadId;
private int startPos;
private int endPos;
private String path;
public DownLoadThread(int threadId, int startPos, int endPos,
String path) {
super();
this.threadId = threadId;
this.startPos = startPos;
this.endPos = endPos;
this.path = path;
}
public void run() {
try {
URL url = new URL(path);
String[] str = PATH.split("/");
String fileName = str[5];
HttpURLConnection conn = (HttpURLConnection) url
.openConnection();
// 设置URL请求的方法(具体参考API)
conn.setRequestMethod("GET");
// 设置500毫秒为超时值
conn.setReadTimeout(5000);
File file = new File(threadId + ".txt");
if (file.exists() && file.length() > 0) {
BufferedReader br = new BufferedReader(
new InputStreamReader(new FileInputStream(file)));
String saveStartPos = br.readLine();
if (saveStartPos != null && saveStartPos.length() > 0) {
startPos = Integer.parseInt(saveStartPos);
}
}
// 注意双引号内的格式,不能包含空格(等其他字符),否则报416
conn.setRequestProperty("Range", "bytes=" + startPos + "-"
+ endPos);
RandomAccessFile raf = new RandomAccessFile(fileName, "rwd");// 存储下载文件的随机写入文件
raf.seek(startPos);// 设置开始下载的位置
System.out.println("线程" + threadId + ":" + startPos + "~~"
+ endPos);
InputStream is = conn.getInputStream();
byte[] b = new byte[1024 * 1024 * 10];
int len = -1;
int newPos = startPos;
while ((len = is.read(b)) != -1) {
RandomAccessFile rr = new RandomAccessFile(file, "rwd");// 存储下载标记的文件
raf.write(b, 0, len);
// 将下载标记存入指定文档
String savaPoint = String.valueOf(newPos += len);
rr.write(savaPoint.getBytes());
rr.close();
}
is.close();
raf.close();
System.out.println("下载完成");
} catch (Exception e) {
e.printStackTrace();
}
}
}
}
注意事项:
(1)理解每个线程下载的开始和结束位置的计算方法(不包含最后一个线程,从0开始)
开始位置=(线程数-1)*每个线程所要下载的文件长度(大小)
结束位置=(线程数*每个线程下载的文件大小)-1
(2)最后一个线程所分配的下载开始位置为上一个线程的结束位置,结束位置为文件长度。
所以最后一个线程所下载的文件长度一般不会与之前线程相同
(3)本次演示下载路径默认为java项目所在目录,而且目录中不能包含与下载文件同名的文件,不然程序会报416网络请求错误。
(4)我个人在实现时犯的一个错误conn.setRequestProperty("Range","bytes="+ startPos+"-"+endPos);一定要注意引号没一定不能有多余的空格以及其他字符,我就是在引号内多了个空格,但错误定位一直是inputStream错误,找错找的很痛苦
Java实现多线程断点下载(下载过程中可以暂停)的更多相关文章
- Java:验证在类继承过程中equals()、 hashcode()、toString()方法的使用
以下通过实际例子对类创建过程汇中常用的equals().hashcode().toString()方法进行展示,三个方法的创建过程具有通用性,在项目中可直接改写. //通过超类Employee和其子类 ...
- 编写Java程序,模拟五子棋博弈过程中的异常声明和异常抛出
返回本章节 返回作业目录 需求说明: 模拟五子棋博弈过程中的异常声明和异常抛出,判断用户所下棋子的位置,是否超越了棋盘的边界. 棋盘的横坐标的范围为0-9,纵坐标范围为0-14,如果用户所放棋子的坐标 ...
- Java之多线程断点下载的实现
RandomAccessFile类: 此类的实例支持对随机訪问文件的读取和写入.随机訪问文件的行为相似存储在文件系统中的一个大型 byte 数组. 存在指向该隐含数组.光标或索引,称为文件指针.输入操 ...
- java多线程断点下载原理(代码实例演示)
原文:http://www.open-open.com/lib/view/open1423214229232.html 其实多线程断点下载原理,很简单的,那么我们就来先了解下,如何实现多线程的断点下载 ...
- JWebFileTrans(JDownload): 一款可以从网络上下载文件的小程序(三),多线程断点下载
一 前言 本篇博客是<JWebFileTrans(JDownload):一款可以从网络上下载文件的小程序>系列博客的第三篇,本篇博客的内容主要是在前两篇的基础上增加多线程的功能.简言之,本 ...
- iOS开发网络请求——大文件的多线程断点下载
iOS开发中网络请求技术已经是移动app必备技术,而网络中文件传输就是其中重点了.网络文件传输对移动客户端而言主要分为文件的上传和下载.作为开发者从技术角度会将文件分为小文件和大文件.小文件因为文件大 ...
- python安装过程中的一些问题
因为看到大神的教程是基于python V2.7,下载该版本且安装成功. 安装目录: https://www.python.org/download/releases/2.7/ 根据系统进行安装包下载 ...
- Android(java)学习笔记216:多线程断点下载的原理(Android实现)
之前在Android(java)学习笔记215中,我们从JavaSE的角度去实现了多线程断点下载,下面从Android角度实现这个断点下载: 1.新建一个Android工程: (1)其中我们先实现布局 ...
- Android学习记录(6)—将java中的多线程下载移植到Android中(即多线程下载在Android中的使用)③
在这一节中,我们就来讲多线程下载以及断点续传在android中怎么使用,前两节是为本节做准备的,没有看前两节的同学,最好看完前面的两篇文章再来看这篇.其实在android端的应用和java基本上是差不 ...
随机推荐
- 学习AOP之透过Spring的Ioc理解Advisor
花了几天时间来学习Spring,突然明白一个问题,就是看书不能让人理解Spring,一方面要结合使用场景,另一方面要阅读源代码,这种方式理解起来事半功倍.那看书有什么用呢?主要还是扩展视野,毕竟书是别 ...
- AutoFac在项目中的应用
技能大全:http://www.cnblogs.com/dunitian/p/4822808.html#skill 完整Demo:https://github.com/dunitian/LoTCode ...
- .NET Core的日志[5]:利用TraceSource写日志
从微软推出第一个版本的.NET Framework的时候,就在“System.Diagnostics”命名空间中提供了Debug和Trace两个类帮助我们完成针对调试和跟踪信息的日志记录.在.NET ...
- android通过webview调起支付宝app支付
webview在加载网页的时候会默认调起手机自带的浏览器加载网页,用户体验不好.但当用户设置浏览器客户端(setWebViewClient)设置这样的监听事件之后,当请求url的时候就不会打开手机自带 ...
- web服务器集群
概述 集群和分布式都是从集中式进化而来的.分布式和集群会相互合作的,同时的集群和分布式.在这里重点说说集群 集群是什么? 集群能提高单位时间内处理的任务数量,提升服务器性能 有多台服务器去处理任务,但 ...
- Dynamics CRM 之ADFS 使用 WID 的独立联合服务器
ADFS 的使用 WID 的独立联合服务器适用于自己的测试环境,常用的就是在虚机中使用. 拓扑图如下: wID:联合身份验证服务配置为使用 Windows 内部数据库
- atitit.细节决定成败的适合情形与缺点
atitit.细节决定成败的适合情形与缺点 1. 在理论界有两种观点:一种是"细节决定成败",另一种是"战略决定成败".1 1.1. 格局决定成败,方向决定成败 ...
- 在UPDATE中更新TOP条数据以及UPDATE更新中使用ORDER BY
正常查询语句中TOP的运用: SELECT TOP 1000 * FROM MP_MemberGrade 随意更新一张表中满足条件的前N条数据: UPDATE TOP (1) MP_Member ...
- Hadoop伪分布式集群环境搭建
本教程讲述在单机环境下搭建Hadoop伪分布式集群环境,帮助初学者方便学习Hadoop相关知识. 首先安装Hadoop之前需要准备安装环境. 安装Centos6.5(64位).(操作系统再次不做过多描 ...
- 在VMware上安装CentOS -7
1.下载好VMware 2.准备好CentOS的镜像文件 3.打开VMware创建新的虚拟机 选择自定义高级后按下一步 继续下一步 选择稍后安装操作系统 客户机操作系统选择Linux,版本选择Cent ...