<%@ page contentType="text/html; charset=gb2312"%> 使用Java程序来实现HTTP文件的队列下载
网站公告:   ◆北天JAVA技术网热情为java爱好者服务,本网内容包括JAVA(JSP、servlet、EJB、webservice、j2ee、javabean、应用服务器、JavaScript),数据库(MYSQL、SQL Server、Sybase、Oracle、DB2、数据库综合知识),设计研究(设计模式、Struts、Spring、Hibernate、设计框架、设计综合知识),WEB2.0新技术(主要介绍AJAX),以及各种技术的入门、实例、例子等等,欢迎各位多来坐坐!◆  诚邀各位JAVA爱好者加盟!◆  本网站内容丰富,更新快,保证每周20篇以上!  
加入收藏
设为首页
联系站长
承接项目
  相关资源:网站首页 | 免费培训学院 | 技术论坛 | JAVA聊天室 | 作家专栏 | 开发工具 | 认证考试 | 会员俱乐部
  JAVA技术初学者园地 | jsp与servlet | javascript | Java源代码 | EJB | web service | 应用服务器 | JAVA综合知识
  设计研究设计模式 | 设计框架 | Struts | Spring | Hibernate | 开源项目 | 面向对象设计 | 设计综合知识
  数 据 库MYSQL | SQL Server | Sybase | Oracle | DB2 | Informix | Access | 数据库综合知识
  其他资源:AJAX新技术 | 网站开发 | ERP软件 | OA办公软件 | 商业智能BI | 开发综合知识 | 承接项目 | 项目试用

 
 
使用Java程序来实现HTTP文件的队列下载
     发布者: 发布时间:2007-08-08
序言

许多用户可能会遇到这样的情况:在网站上发现一个很好的资源,但是这个资源是分成了很多个文件存放的,如果想把它保存到本地,只有靠用户点击另存来完成保存,如果资源分了几百甚至上千上万,那简直是个灾难。

在Internet上很多的资源分成多个文件存放时,它的文件命名是有一定的规则的;正因如此,我们就可以用程序来完成这个资源的完全下载。

1. 基础知识

在Internet上,我们要下载网站上的某个资源,我们会获得一个URL(Uniform Resource Locator),它是一个服务器资源定位的描述,下载的过程总是如下步骤:

步骤1:客户端发起连接请求一个URL

步骤2:服务器解析URL,并将指定的资源返回一个输入流给客户

步骤3:客户端接收输入流,将流中的内容存到文件

2. 网络连接的建立

Java提供了对URL访问和大量的流操作的的API,我们可以很容易的完成对网络上资源的存取,下面的代码段就完成了对一个网站的资源进行访问:


......
destUrl="http://www.ebook.com/java/网络编程001.zip";
url = new URL(destUrl);
httpUrl = (HttpURLConnection) url.openConnection();
//连接指定的网络资源
httpUrl.connect();
//获取网络输入流
bis = new BufferedInputStream(httpUrl.getInputStream());
......


3. 代理的访问

Java 中通过代理服务器访问外网的方法已经是世人皆知的秘密了。这里就不再多描述了,访问的JAVA代码如下:


//设置代理服务器
System.getProperties().put("proxySet", "true");
System.getProperties().put("proxyHost", "10.154.134.110");
System.getProperties().put("proxyPort", "8080");


4. 网络资源的保存

在上节中,我们已经获取了指定网络资源的输入流,接下来我们要完成的就是读取输入流中的所以内容,并将其保存在文件中。示例代码:


......
fos = new FileOutputStream(fileName);
if (this.DEBUG)
System.out.println
("正在获取链接[" + destUrl + "]的内容...
将其保存为文件[" + fileName +"]");

//保存文件
while ( (size = bis.read(buf)) != -1)
fos.write(buf, 0, size);
......


上面的示例代码就将网络资源的内容保存到了本地指定的文件中。

5. 代码清单


import java.io.*;
import java.net.*;
import java.util.*;

/**
* <p>Title: 个人开发的API</p>
* <p>Description: 将指定的HTTP网络资源在本地以文件形式存放</p>
* <p>Copyright: Copyright (c) 2004</p>
* <p>Company: NewSky</p>
* @author MagicLiao
* @version 1.0
*/
public class HttpGet {

  public final static boolean DEBUG = true;//调试用
  private static int BUFFER_SIZE = 8096;//缓冲区大小
  private Vector vDownLoad = new Vector();//URL列表
  private Vector vFileList = new Vector();//下载后的保存文件名列表

  /**
  * 构造方法
  */
  public HttpGet() {}

  /**
  * 清除下载列表
  */
  public void resetList() {
   vDownLoad.clear();
   vFileList.clear();
  }

  /**
  * 增加下载列表项
  *
  * @param url String
  * @param filename String
  */

public void addItem(String url, String filename) {
  vDownLoad.add(url);
  vFileList.add(filename);
}

  /**
  * 根据列表下载资源
  */
public void downLoadByList() {
  String url = null;
  String filename = null;

  //按列表顺序保存资源
  for (int i = 0; i < vDownLoad.size(); i++) {
   url = (String) vDownLoad.get(i);
   filename = (String) vFileList.get(i);

   try {
    saveToFile(url, filename);
   }
   catch (IOException err) {
    if (DEBUG) {
     System.out.println("资源[" + url + "]下载失败!!!");
    }
   }
  }

  if (DEBUG) {
   System.out.println("下载完成!!!");
  }
}

/**
* 将HTTP资源另存为文件
*
* @param destUrl String
* @param fileName String
* @throws Exception
*/
public void saveToFile(String destUrl, String fileName)throws IOException{
  FileOutputStream fos = null;
  BufferedInputStream bis = null;
  HttpURLConnection httpUrl = null;
  URL url = null;
  byte[] buf = new byte[BUFFER_SIZE];
  int size = 0;

  //建立链接
  url = new URL(destUrl);
  httpUrl = (HttpURLConnection) url.openConnection();
  //连接指定的资源
  httpUrl.connect();
  //获取网络输入流
  bis = new BufferedInputStream(httpUrl.getInputStream());
  //建立文件
  fos = new FileOutputStream(fileName);

  if (this.DEBUG)
 System.out.println
("正在获取链接[" + destUrl + "]的内容...
将其保存为文件[" + fileName + "]");

  //保存文件
  while ( (size = bis.read(buf)) != -1)
   fos.write(buf, 0, size);

  fos.close();
  bis.close();
  httpUrl.disconnect();
}

/**
* 设置代理服务器
*
* @param proxy String
* @param proxyPort String
*/
public void setProxyServer(String proxy, String proxyPort) {
  //设置代理服务器
  System.getProperties().put("proxySet", "true");
  System.getProperties().put("proxyHost", proxy);
  System.getProperties().put("proxyPort", proxyPort);
}

/**
* 设置认证用户名与密码
*
* @param uid String
* @param pwd String
*/
public void setAuthenticator(String uid, String pwd) {
Authenticator.setDefault(new MyAuthenticator(uid, pwd));
}

/**
* 主方法(用于测试)
*
* @param argv String[]
*/
public static void main(String argv[]) {
  HttpGet oInstance = new HttpGet();
  try {
  //增加下载列表(此处用户可以写入自己代码来增加下载列表)
  oInstance.addItem("http://www.ebook.com/java/网络编程001.zip","./网络编程1.zip");
  oInstance.addItem("http://www.ebook.com/java/网络编程002.zip","./网络编程2.zip");
  oInstance.addItem("http://www.ebook.com/java/网络编程003.zip","./网络编程3.zip");
  oInstance.addItem("http://www.ebook.com/java/网络编程004.zip","./网络编程4.zip");
  oInstance.addItem("http://www.ebook.com/java/网络编程005.zip","./网络编程5.zip");
  oInstance.addItem("http://www.ebook.com/java/网络编程006.zip","./网络编程6.zip");
  oInstance.addItem("http://www.ebook.com/java/网络编程007.zip","./网络编程7.zip");
  //开始下载
  oInstance.downLoadByList();
  }
  catch (Exception err) {
   System.out.println(err.getMessage());
  }
}
}

    

 
 
(转载文章请保留出处:北天JAVA技术网(www.java114.com))
 
更多精彩文章:
解决JavaScript页面刷新与弹出窗口问题
Struts构架中的Session对象创建和控制
Java语言中抽取Office、PDF的四件兵器
详细讲解Struts构架中action的跳转大全
Windows时代即将结束 Web浏览器取而代之
基于WEB服务的异构数据库集成中间件
 
最近评论:
        
你曾悄悄的来过!
wow gold,wow gold,wow gold,ffxi gil max(1124)
        
冰封的往事!
wow power leveling,wow gold,wow power leveling,wow gold max(1247)
        
冰封的往事!
wow power leveling,wow gold,wow power leveling,wow gold max(2815)
        
冰封的往事!
wow power leveling,wow gold,WoW Gold,wow gold max(160)
        
飞舞的传奇!
传世私服,传世私服.传奇世界私服传奇世界私服,传世私服传世私服, 传奇世界私服传奇世界私服.传奇私服传奇私服. max(2991)
        
标 题:   
内 容:   
 
                                  
 
免责声明:该文章由网友发表,如果对您造成侵权,请联系站长

首页 - 承接项目 - 网站地图 - 联系我们 -
版权所有北天JAVA技术工作室 ICP证号:粤ICP备06079815号