Java用FTPClient类用线程池下载多个文件到本地？

0 0

Java用FTPClient类用线程池下载多个文件到本地？15

使用org.apache.commons.net.ftp.FTPClient 类，说说我的实现思想，我要创建一个线程池，如果有10个线程，要去FTP的一个目录下载文件到本地，假如这个目录有50个文件，假如这10个线程去下载50个文件，线程A下载一个文件时，其余的线程绕过这个文件去下载另外的文件，当线程A下载完毕后，继续下载其他没有下载的文件，请问这样如何实现，保证线程安全（避免几个线程同时下载一个文件的情况）？最好能贴代码，多谢！提升下载的速度！

问题补充：

avgguy 写道

用一个List保存要下载的文件列表，另一个List保存已下载的文件列表。每个线程下载开始前都去前面那个List获取要下载的文件，下载完成后将文件保存到已下载的List中。

你可以参考下面的简化线程类


//下载线程类
public class DownloadThread extend Thread{
   List<String>  fileList;
   FtpClient ftp;

   public DownloadThread(List<String>  fileList, FtpClient ftp){
       this.fileList = fileList;
       this.ftp = ftp;
   }

   public void start(){      
       String dstFn = "d:\\file"; 
         while(!fileList.isEmpty()){
           String fn = null;
           synchronized(fileList){
             fn = fileList.get(0);
             fileList.remove(0);
           }
           download(fn, dstFn, ftp);
         }
    }
           
   //下载文件
   private void download(String filename, String dstFilename, FtpClient ftp){
      //下载代码，还应该处理异常等
      FileOutputStream fos = new FIle(dstFilename);
      ftp.downloadFile(filename, fos);
      fos.close();
   }
       
     
}

有点慢！

2011年12月21日 21:02

itllpj520
0
0 0 0

2个答案按时间排序按投票排序

0 0

引用

avgguy 写道
用一个List保存要下载的文件列表，另一个List保存已下载的文件列表。每个线程下载开始前都去前面那个List获取要下载的文件，下载完成后将文件保存到已下载的List中。

你可以参考下面的简化线程类

Java代码收藏代码

    //下载线程类
    public class DownloadThread extend Thread{
       List<String> fileList;
       FtpClient ftp;

       public DownloadThread(List<String> fileList, FtpClient ftp){
           this.fileList = fileList;
           this.ftp = ftp;
       }

       public void start(){
           String dstFn = "d:\\file";
             while(!fileList.isEmpty()){
               String fn = null;
               synchronized(fileList){
                 fn = fileList.get(0);
                 fileList.remove(0);
               }
               download(fn, dstFn, ftp);
             }
        }

       //下载文件
       private void download(String filename, String dstFilename, FtpClient ftp){
          //下载代码，还应该处理异常等
          FileOutputStream fos = new FIle(dstFilename);
          ftp.downloadFile(filename, fos);
          fos.close();
       }


    }

有点慢！

你也可以尝试在 download 方法内创建 FtpClient。不过，那样应该也不能提高速度。如果FTP服务器限制了只能单线程下载的话，就只能每次下载一个文件了。

2011年12月26日 09:36

avgguy
284
0 0 0

添加评论

0 0


//下载线程类
public class DownloadThread extend Thread{
   List<String>  fileList;
   FtpClient ftp;

   public DownloadThread(List<String>  fileList, FtpClient ftp){
       this.fileList = fileList;
       this.ftp = ftp;
   }

   public void start(){      
       String dstFn = "d:\\file"; 
         while(!fileList.isEmpty()){
           String fn = null;
           synchronized(fileList){
             fn = fileList.get(0);
             fileList.remove(0);
           }
           download(fn, dstFn, ftp);
         }
    }
           
   //下载文件
   private void download(String filename, String dstFilename, FtpClient ftp){
      //下载代码，还应该处理异常等
      FileOutputStream fos = new FIle(dstFilename);
      ftp.downloadFile(filename, fos);
      fos.close();
   }
       
     
}

2011年12月22日 15:29

avgguy
284
0 0 0

添加评论

已解决问题

未解决问题

排行榜

查看全部排名>>