更新時(shí)間:2021-05-13 10:33:09 來(lái)源:動(dòng)力節(jié)點(diǎn) 瀏覽1283次
使用多線程下載文件可以更快完成文件的下載,多線程下載文件之所以快,是因?yàn)槠鋼屨嫉姆?wù)器資源多。如:假設(shè)服務(wù)器同時(shí)最多服務(wù)100個(gè)用戶,在服務(wù)器中一條線程對(duì)應(yīng)一個(gè)用戶,100條線程在計(jì)算機(jī)中并非并發(fā)執(zhí)行,而是由CPU劃分時(shí)間片輪流執(zhí)行,如果A應(yīng)用使用了99條線程下載文件,那么相當(dāng)于占用了99個(gè)用戶的資源,假設(shè)一秒內(nèi)CPU分配給每條線程的平均執(zhí)行時(shí)間是10ms,A應(yīng)用在服務(wù)器中一秒內(nèi)就得到了990ms的執(zhí)行時(shí)間,而其他應(yīng)用在一秒內(nèi)只有10ms的執(zhí)行時(shí)間。就如同一個(gè)水龍頭,每秒出水量相等的情況下,放990毫秒的水肯定比放10毫秒的水要多。
1.首先得到下載文件的長(zhǎng)度,然后設(shè)置本地文件的長(zhǎng)度。
HttpURLConnection.getContentLength();
RandomAccessFile file = new RandomAccessFile("youdao.exe","rw");
file.setLength(filesize);//設(shè)置本地文件的長(zhǎng)度
2.根據(jù)文件長(zhǎng)度和線程數(shù)計(jì)算每條線程下載的數(shù)據(jù)長(zhǎng)度和下載位置。如:文件的長(zhǎng)度為6M,線程數(shù)為3,那么,每條線程下載的數(shù)據(jù)長(zhǎng)度為2M,每條線程開(kāi)始下載的位置如下圖所示。
3.使用Http的Range頭字段指定每條線程從文件的什么位置開(kāi)始下載,如:指定從文件的2M位置開(kāi)始下載文件,代碼如下:
HttpURLConnection.setRequestProperty("Range", "bytes=2097152-");
4.保存文件,使用RandomAccessFile類指定每條線程從本地文件的什么位置開(kāi)始寫(xiě)入數(shù)據(jù)
RandomAccessFile threadfile = new RandomAccessFile("<span style="font-family: Arial, Helvetica, sans-serif;">youdao.exe</span><span style="font-family: Arial, Helvetica, sans-serif;"> ","rw");</span>
threadfile.seek(2097152);//從文件的什么位置開(kāi)始寫(xiě)入數(shù)據(jù)
在寫(xiě)實(shí)現(xiàn)類之前我們首先要將要下載的文件放在服務(wù)器上并部署:
小編是放在了這里 D:\Tomcat\apache-tomcat-7.0.37\webapps\doudou目錄下,并啟動(dòng)D:\Tomcat\apache-tomcat-7.0.37\bin下的startup.bat
1.DownLoadTest.java
package www.csdn.net.down;
import java.io.File;
import java.io.FileInputStream;
import java.io.FileOutputStream;
import java.io.IOException;
import java.io.InputStream;
import java.io.RandomAccessFile;
import java.net.HttpURLConnection;
import java.net.MalformedURLException;
import java.net.URL;
public class DownLoadTest {
public File file;
public RandomAccessFile accessFile;
// 線程的數(shù)量
public static int threadNum = 3;
// 每個(gè)線程負(fù)責(zé)下載的大小
int blockSize;
// 創(chuàng)建訪問(wèn)的路徑
public String path = "http://localhost:8080/doudou/youdao.exe";
public static int threadCount;// 數(shù)量
public void testDown() {
try {
// 創(chuàng)建出URL對(duì)象
URL url = new URL(path);
// 創(chuàng)建出 HttpURLConnection對(duì)象
HttpURLConnection httpURLConnection = (HttpURLConnection) url
.openConnection();
// 設(shè)置 發(fā)請(qǐng)求發(fā)送的方式
httpURLConnection.setRequestMethod("GET");
// 設(shè)置請(qǐng)求是否超時(shí)時(shí)間
httpURLConnection.setConnectTimeout(5000);
// 設(shè)置
httpURLConnection
.setRequestProperty("User-Agent",
" Mozilla/5.0 (compatible; MSIE 10.0; Windows NT 6.2; Trident/6.0)");
// 是否響應(yīng)成功
if (httpURLConnection.getResponseCode() == 200) {
// 獲取文件的大小
int size = httpURLConnection.getContentLength();
System.out.println("文件的大小" + size);
// 創(chuàng)建文件
file = new File("youdao.exe");
accessFile = new RandomAccessFile(file, "rwd");
// 設(shè)置文件的大小
accessFile.setLength(size);
// 每個(gè)線程下載的大小
blockSize = size / threadNum;
// 開(kāi)三個(gè)線程 操作此文件
for (int i = 1; i <= threadNum; i++) {
// 1 2 3
// 計(jì)算出每個(gè)線程開(kāi)始的位置
int startSize = (i - 1) * blockSize;
// 結(jié)束位置
int endSize = (i) * blockSize;
// 當(dāng)線程是最后一個(gè)線程的時(shí)候
if (i == threadNum) {
// 判斷文件的大小是否大于計(jì)算出來(lái)的結(jié)束位置
if (size > endSize) {
// 結(jié)束位置 等于 文件的大小
endSize = size;
}
}
// 為每個(gè)線程創(chuàng)建一個(gè)隨機(jī)的讀取
RandomAccessFile threadAccessFile = new RandomAccessFile(
file, "rwd");
new Thread(new DownLoadThread(i, threadAccessFile,
startSize, endSize, path)).start();
}
}
} catch (MalformedURLException e) {
// TODO Auto-generated catch block
e.printStackTrace();
} catch (IOException e) {
// TODO Auto-generated catch block
e.printStackTrace();
}
}
public static void main(String[] args) {
DownLoadTest downLoadTest = new DownLoadTest();
// 調(diào)用下載方法
downLoadTest.testDown();
}
}
class DownLoadThread implements Runnable {
// 下載文件的封裝
public RandomAccessFile accessFile; // 每個(gè)線程 都擁有一個(gè)accessFile的文件對(duì)象 線程1 線程2 線程3
// 線程下載文件的起始位置
public int startSize;
public int endSize;
// 文件下載的path路徑
public String path;
public int threadId; // 線程的標(biāo)識(shí)
public DownLoadThread(int threadId, RandomAccessFile accessFile,
int startSize, int endSize, String path) {
this.threadId = threadId;
this.accessFile = accessFile;
this.startSize = startSize;
this.endSize = endSize;
this.path = path;
}
@Override
public void run() {
// 執(zhí)行run方法
try {
// 創(chuàng)建文件
File threadFile = new File(threadId + ".txt");
if (threadFile.exists()) {
// 讀取該文件的內(nèi)容
// 創(chuàng)建文件的輸入流對(duì)象
FileInputStream fis = new FileInputStream(threadFile);
// 采用工具類讀取
byte data[] = StreamTools.isToData(fis);
// 轉(zhuǎn)化成字符串
String threadLen = new String(data);
if ((threadLen != null) && (!"".equals(threadLen))) {
startSize = Integer.valueOf(threadLen);
// 解決 416bug的錯(cuò)誤
if (startSize > endSize) {
startSize = endSize - 1;
}
}
}
// 創(chuàng)建URL對(duì)象
URL url = new URL(path);
// 創(chuàng)建HttpURLConnection對(duì)象
HttpURLConnection httpURLConnection = (HttpURLConnection) url
.openConnection();
// 設(shè)置請(qǐng)求的頭
httpURLConnection.setRequestMethod("GET");
// 設(shè)置請(qǐng)求是否超時(shí)時(shí)間
httpURLConnection.setConnectTimeout(5000);
// 設(shè)置
httpURLConnection
.setRequestProperty("User-Agent",
" Mozilla/5.0 (compatible; MSIE 10.0; Windows NT 6.2; Trident/6.0)");
// 關(guān)鍵的設(shè)置
httpURLConnection.setRequestProperty("Range", "bytes=" + startSize
+ "-" + endSize);
// 輸出當(dāng)前線程
System.out.println("當(dāng)前線程" + threadId + " 下載開(kāi)始位置:" + startSize
+ " 下載結(jié)束位置:" + endSize);
// 響應(yīng)成功
// 設(shè)置隨機(jī)讀取文件的 開(kāi)始位置
accessFile.seek(startSize);
// 獲取相應(yīng)流對(duì)象
InputStream is = httpURLConnection.getInputStream();
// 創(chuàng)建輸出流對(duì)象
byte buffer[] = new byte[1024];
int len = 0;
int threadTotal = 0;// 每個(gè)線程下載后保存記錄 /
while ((len = is.read(buffer)) != -1) {
accessFile.write(buffer, 0, len);
threadTotal += len;// 記錄你寫(xiě)入的長(zhǎng)度 //xml文件
// 通過(guò)文件記錄文件下載的長(zhǎng)度
FileOutputStream fos = new FileOutputStream(threadFile);
fos.write((threadTotal + "").getBytes());
fos.flush();
fos.close();
}
accessFile.close();
is.close();
System.out.println(threadId + "線程執(zhí)行完畢");
//線程操作
synchronized (DownLoadTest.class) {
DownLoadTest.threadCount++;
if (DownLoadTest.threadCount >= DownLoadTest.threadNum) {
for(int i=1;i<=DownLoadTest.threadNum;i++){
File file = new File(i+".txt");
if(file.exists()){
file.delete();
}
}
}
}
} catch (MalformedURLException e) {
// TODO Auto-generated catch block
e.printStackTrace();
} catch (IOException e) {
// TODO Auto-generated catch block
e.printStackTrace();
}
}
}
2.流工具的封裝 StreamTools.java
package www.csdn.net.down;
import java.io.ByteArrayOutputStream;
import java.io.IOException;
import java.io.InputStream;
public class StreamTools {
public static byte[] isToData(InputStream is) throws IOException{
// 字節(jié)輸出流
ByteArrayOutputStream bops = new ByteArrayOutputStream();
// 讀取數(shù)據(jù)的緩存區(qū)
byte buffer[] = new byte[1024];
// 讀取長(zhǎng)度的記錄
int len = 0;
// 循環(huán)讀取
while ((len = is.read(buffer)) != -1) {
bops.write(buffer, 0, len);
}
// 把讀取的內(nèi)容轉(zhuǎn)換成byte數(shù)組
byte data[] = bops.toByteArray();
bops.flush();
bops.close();
is.close();
return data;
}
}
以上就是動(dòng)力節(jié)點(diǎn)小編介紹的"Java多線程下載實(shí)例詳解",希望對(duì)大家有幫助,如有疑問(wèn),請(qǐng)?jiān)诰€咨詢,有專業(yè)老師隨時(shí)為您服務(wù)。
0基礎(chǔ) 0學(xué)費(fèi) 15天面授
有基礎(chǔ) 直達(dá)就業(yè)
業(yè)余時(shí)間 高薪轉(zhuǎn)行
工作1~3年,加薪神器
工作3~5年,晉升架構(gòu)
提交申請(qǐng)后,顧問(wèn)老師會(huì)電話與您溝通安排學(xué)習(xí)
初級(jí) 202925
初級(jí) 203221
初級(jí) 202629
初級(jí) 203743