`
齐晓威_518
  • 浏览: 618635 次
  • 性别: Icon_minigender_1
  • 来自: 郑州
社区版块
存档分类
最新评论

webservice大文件传输

 
阅读更多
来自: http://blog.sina.com.cn/s/blog_5245a6580100vw5r.html

            和   http://blog.sina.com.cn/s/blog_5245a6580100w7wd.html 


好吧,我想我的写写了。我用的方法很简单,首先先把大文件转换成byte数组,然后调用webservice将byte数组转换成文件。但是如果文件大小超过25M的时候会超时,所以我将这个数组分批传输,每一批都是一个20M的byte数组,然后把这些数组追加,最后形成一个完整的文件。注意在形成文件的时候要判断要生成的文件是否存在,否则如果文件已经存在的话,该文件不会被覆盖,而是被追加。



using System;
using System.Collections.Generic;

using System.Text;
using System.IO;

namespace controtest
{
    classProgram
    {
       static byte[] buffer;
       static void Main(string[] args)
       {
           string rst =string.Empty ;
           PartnerWebservice.PartnerServices pa = newPartnerWebservice.PartnerServices();
           string path =System.Configuration.ConfigurationSettings.AppSettings["path"].ToString();//文件的存放目录
           string filename =System.Configuration.ConfigurationSettings.AppSettings["name"].ToString();//文件名称
           Console.WriteLine("ConvertToBinary start at"+DateTime.Now.ToString());
           buffer = ConvertToBinary(path);//将文件转换成byte数组
           int   index = buffer.Length /20971520;//20971520bite就是20M,1*1024*1024*20
           index += buffer.Length % 20971520 == 0 ? 0 : 1;
           bool ifEnd=false;//是否为最后一组
           for (int ii = 0; ii < index; ii++)
           {
               if (ii == index - 1)
                   ifEnd = true;
               Console.WriteLine("ConvertToBinary end at " +DateTime.Now.ToString());
               Console.WriteLine("Trans start at " +DateTime.Now.ToString());
               pa.TransFile(ConvertToBinary(ii, ifEnd),"XXXX.XXX");//分批传输数据,追加到XXXX.XXX文件,如果不存在会自动创建
               Console.WriteLine(rst);
               Console.WriteLine("Trans end at " + DateTime.Now.ToString());
           }
         
         
         Console.ReadLine();
       }
       public static byte[] ConvertToBinary(string Path)
       {
           FileStream stream = new FileInfo(Path).OpenRead();
           byte[] buffer = new byte[stream.Length];
           Console.WriteLine("The lenght of the file is"+buffer.Length);
           stream.Read(buffer, 0, Convert.ToInt32(stream.Length));
           return buffer;
       }
       public static byte[] ConvertToBinary(int index,boolifEnd)//index是第几批,从0开始这个方法名跟上边那个重名了注意区别,两个方法意义是不一样的,我懒得改了
      {
           //20971520
         
       
           //index = buffer.Length / 20971520;
           //index += buffer.Length % 20971520 == 0 ? 0 : 1;
           byte[] bys;//临时二进制数组,最大20M
           if (ifEnd == false)
           {
               bys = new byte[20971520];
               for (int ii = 20971520 * index; ii < 20971520 *(index + 1); ii++)
               {
                   bys[ii - 20971520 * index] = buffer[ii];
               }
           }
           else
           {
               bys = new byte[buffer.Length - 20971520 * (index )];
               for (int ii = 20971520 * index; ii < buffer.Length;ii++)
               {
                   bys[ii - 20971520 * index] = buffer[ii];
               }

           }
           Console.WriteLine("The length of the current buffer is " +bys.Length);
          return bys;
        
       }
       public static byte[] ChangeFileToByte(string path)
       {
           FileStream stream = new FileInfo(path).OpenRead();
           byte[] Filebuffer = new byte[stream.Length];
           stream.Read(Filebuffer, 0, Convert.ToInt32(stream.Length));
           return Filebuffer;
       }
    }
}
以下是webservice部分的方法

[WebMethod(Description = "TransFile")]
    publicstring  TransFile(byte[] fileBt, stringfileName)
    {
       string rst = "successful";
       if (fileBt.Length == 0)
           return "The length of the File"+fileName +"is 0";
       string filePath =System.Configuration.ConfigurationManager.AppSettings["CSVPath"].ToString();  //文件路径

       //FileStream fstream = File.Create(filePath + fileName,fileBt.Length);
       //FileStream fstream = File.AppendAllText(
       FileStream fstream = new FileStream(filePath + fileName,FileMode.Append);
       try
       {
           //MemoryStream m = new MemoryStream(fileBt);
           //m.WriteTo(fstream);
           fstream.Write(fileBt, 0,fileBt.Length);  //二进制转换成文件
         
           fstream.Close();
           //rst += "\r\n";
           rst += "File Name is:" + fstream.Name + "\r\n";
           rst += "File Lenght is:" + fstream.Length + "\r\n";
           rst += "File Position is:" + fstream.Position  +"\r\n";
       }
       catch (Exception ex)
       {
           //抛出异常信息
           rst = ex.ToString();
       }
       finally
       {
          
           fstream.Close();
       }
       StringBuilder sbd = new StringBuilder();
       sbd.AppendLine(rst);
       return sbd.ToString();

    }



webservice大文件传输(优化)

控制台程序,没有注释,在我本机10G数据量没有问题

using System;
using System.Collections.Generic;

using System.Text;
using System.IO;

namespace controtest
{
    classProgram
    {
     
       static void Main(string[] args)
       {
           string rst = string.Empty;
           PartnerWebservice.PartnerServices pa = newPartnerWebservice.PartnerServices();
           string path =System.Configuration.ConfigurationSettings.AppSettings["path"].ToString();
           string filename =System.Configuration.ConfigurationSettings.AppSettings["name"].ToString();
           Console.WriteLine("ConvertToBinary start at " +DateTime.Now.ToString());
         
           long fileLength = LengthOfFile(path);
           long  countOfPk =fileLength /Convert.ToInt64(20971520);
           countOfPk += fileLength % 20971520 == 0 ? 0 : 1;
           Console.WriteLine("The count of the pakeg is " + countOfPk);
           bool ifEnd = false;
           Console.WriteLine("Start");
           Console.WriteLine();
           for (long ii = 0; ii < countOfPk; ii++)
           {
               if (ii == countOfPk - 1)
                   ifEnd = true;
           
               Console.WriteLine("Trans start at " +DateTime.Now.ToString());
               Console.WriteLine("The index is "+(ii+1)+"/"+countOfPk);
               if (ii == 0)
                   pa.TransFile(ConvertToBinary(ii, ifEnd, fileLength), "test.CSV",true);
               else
                   pa.TransFile(ConvertToBinary(ii, ifEnd, fileLength), "test.CSV",false);
               Console.Write(rst);
               Console.WriteLine("Trans end at " + DateTime.Now.ToString());
               Console.WriteLine();
           }

           Console.WriteLine(LengthOfFile(path));
           //Console.WriteLine(ConvertToBinary(path).Length);
         Console.ReadLine();
       }
       public static byte[] ConvertToBinary(string Path)
       {
           FileStream stream = new FileInfo(Path).OpenRead();
           byte[] buffer = new byte[stream.Length];
           Console.WriteLine("The lenght of the file is"+buffer.Length);
           stream.Read(buffer, 0, Convert.ToInt32(stream.Length));
           return buffer;
       }
       /// <summary>
       /// 获取文件大小
       /// </summary>
       /// <paramname="path"></param>
       ///<returns></returns>
       public static  long LengthOfFile(stringpath)
       {
           FileInfo fi = new FileInfo(path);
           return fi.Length;
          
       }

       public static byte[] ConvertToBinary(long index,bool ifEnd,longfileLenght)
       {
           //20971520

           byte[] bysFile;//临时二进制数组,最大20M
           //index = buffer.Length / 20971520;
           //index += buffer.Length % 20971520 == 0 ? 0 : 1;
           //byte[] bys;//临时二进制数组,最大20M
           if (ifEnd == false)
           {
            
             bysFile = GetFileBloc(20971520 * index, 20971520);
            
           }
           else
           {

               bysFile = GetFileBloc(20971520 * index, fileLenght - 20971520 *(index));

           }
           Console.WriteLine("The length of the current buffer is " +bysFile.Length);
           return bysFile;
        
       }
       public static byte[] ChangeFileToByte(string path)
       {
           FileStream stream = new FileInfo(path).OpenRead();
           byte[] Filebuffer = new byte[stream.Length];
           stream.Read(Filebuffer, 0, Convert.ToInt32(stream.Length));
           return Filebuffer;
       }
       /// <summary>
       /// 获取文件二进制块
       /// </summary>
       /// <paramname="path"></param>
       /// <paramname="byteIndex"></param>
       /// <paramname="length"></param>
       ///<returns></returns>
       public static byte[] GetFileBloc( long byteIndex, longlength)
       {
           string path =System.Configuration.ConfigurationSettings.AppSettings["path"].ToString();
           FileStream stream = new FileInfo(path).OpenRead();
           stream.Position = byteIndex;
           byte[] Filebuffer = new byte[length];
           stream.Read(Filebuffer,0,Convert.ToInt32( length));
           return Filebuffer;
       }
    }
}
以下是webservice部分

[WebMethod(Description = "TransFile")]
    publicstring  TransFile(byte[] fileBt, stringfileName,bool ifCreate)
    {
       string rst = "0";
       if (fileBt.Length == 0)
           return rst ;
       string filePath =System.Configuration.ConfigurationManager.AppSettings["CSVPath"].ToString();  //文件路径

       //FileStream fstream = File.Create(filePath + fileName,fileBt.Length);
       //FileStream fstream = File.AppendAllText(
       FileStream fstream;
       if(ifCreate)
           fstream = new FileStream(filePath + fileName,FileMode.Create);
       else
           fstream = new FileStream(filePath + fileName, FileMode.Append);
       try
       {
           //MemoryStream m = new MemoryStream(fileBt);
           //m.WriteTo(fstream);
           fstream.Write(fileBt, 0,fileBt.Length);  //二进制转换成文件
         
        
           //rst += "\r\n";
        
           rst = fstream.Length.ToString() ;
       
           fstream.Close();
       }
       catch (Exception ex)
       {
           //抛出异常信息
           rst = ex.ToString();
       }
       finally
       {
          
           fstream.Close();
       }

       return rst;

    }

分享到:
评论

相关推荐

    C# webservice大文件传输实例源码

    在IT行业中,大文件传输是一项常见的需求,尤其是在网络服务中,如C#的WebService应用。本实例源码提供了一个解决方案,允许用户通过C#编写的WebServcie进行大文件的上传和下载。以下是对这个实例的详细解读: 1. *...

    java 利用webservice传输文件

    在“java 利用webservice传输文件”的场景中,JACOB可能被用来执行以下任务: 1. **文件操作**:Windows系统有许多内置的COM组件,如Scripting.FileSystemObject,可用于读写文件、创建目录等。通过JACOB,Java程序...

    webservice 传输文件

    7. **性能优化**:对于大文件传输,可能需要分块传输、断点续传等策略来提高效率和可靠性。 总之,“webservice传输文件”涉及到一系列的技术和流程,包括XML、SOAP、WSDL等,以及服务端和客户端的交互、数据安全和...

    基于webService 的文件传输

    【基于Web服务的文件传输】是一种通过网络进行文件交换的技术,它利用了Web Service的原理,使得不同...提供的“基于webService 的文件传输.pdf”文档可能包含了关于这些知识点的详细教程,建议仔细阅读以深入理解。

    基于webservice的文件传输

    基于webservice的文件传输。从理论角度详细说明了webservice传输文件的基本原理

    webservice用于上传文件

    在本例中,"webservice用于上传文件"指的是利用WebService技术实现文件上传的功能。这个过程通常涉及客户端(通常是用户界面或者应用程序)发送文件数据到服务器端,服务器接收并处理这些数据,然后可能返回一些处理...

    webservice服务上传文件

    - 文件上传可能涉及大容量的数据传输,因此需要考虑性能优化,如使用 chunked transfer encoding 分块传输编码,避免一次性加载整个文件到内存。 - 为了确保数据安全,可能需要实现HTTPS,提供加密的传输层安全。 ...

    WebService上传下载文件

    用webservice作为服务器端,以流的方式实现文件的上传和下载,可以自动调用winrar进行压缩和加密,支持多线程和断点续传功能,默认是16K一个包,全部源码,已经在实际项目中应用。客户端有winform和服务两种方式的...

    WebService CXF --- 传输文件MTOM

    在"WebService CXF --- 传输文件MTOM"这个主题中,我们将深入探讨CXF框架如何利用Message Transmission Optimization Mechanism (MTOM)高效地传输大文件。 MTOM是W3C制定的一种优化Web服务消息传输的技术,特别适用...

    webservice文件上传下载.zip

    在本案例中,"webservice文件上传下载.zip"是一个包含实现文件上传和下载功能的Web服务示例。这个压缩包提供的代码可以立即运行,帮助开发者理解如何在Web服务中处理文件操作。 一、Web服务基础 Web服务使用XML(可...

    通过webservice上传和下载文件

    标题中的“通过Web服务上传和下载文件”是指利用Web...通过学习和实践这两个示例,开发者可以掌握如何在C#和Delphi环境下利用Web服务进行文件交互,这对于开发分布式应用或集成不同系统间的文件传输功能非常有帮助。

    WebService大文件断点续传[归纳].pdf

    【WebService大文件断点续传】技术是一种在网络通信中实现大文件高效传输的方法,它允许在文件传输过程中中断,然后从上次中断的位置继续传输,提高了网络环境不稳定时的文件传输效率和成功率。以下是对该技术及其...

    基于spring+cxf实现用户文件传输的webservice

    基于spring+cxf实现用户文件传输的webservice 在本文中,我们将探讨如何使用Spring+CXF实现用户文件传输的Webservice。该Webservice提供了基本的报文上传和查询功能,同时还提供了用户身份验证功能。 Spring 和 ...

    使用Webservice实现大容量附件上传

    5. **安全性**:确保文件传输过程中的数据安全。 三、Web服务实现大容量附件上传策略 1. **分块上传**:将大文件切分为多个小块,逐个上传。这样可以降低单次请求的数据量,减轻服务器压力,同时有利于实现断点续传...

    WebService中上传文件

    在IT行业中,Web服务是一种通过网络提供功能和数据的方式,它允许不同的应用程序之间进行通信。在本场景中,我们关注的...开发者可以通过查看和分析这个服务来学习和理解如何在实际项目中实现WebService文件上传功能。

    javaweb service大文件上传下载 DataHandler.docx

    在这种情况下,可以利用`DataHandler`类和MTOM(Message Transmission Optimization Mechanism)技术来高效地处理大文件的传输。 MTOM是一种优化机制,它允许Web服务以更有效的方式传输二进制数据,比如大文件。...

    C# 通过WebService上传视频文件到服务器虚拟机下源码

    这里,我们设置了正确的请求头以上传文件,并指定了Web Service的URL以及本地要上传的文件路径。 为了在服务器虚拟机上运行Web Service,我们需要IIS(Internet Information Services),它是Windows操作系统中的...

    Webservice上传文件和断点续传

    在本场景中,"Webservice上传文件和断点续传"指的是利用WebService技术实现大文件的分段上传,允许在网络不稳定或中断后从上次中断的位置继续上传,提高文件传输的可靠性和效率。 首先,理解断点续传的基本原理:...

    webservice 上传下载文件

    根据给定的信息,本文将详细...通过定义服务接口、处理文件读写操作以及考虑安全性和性能等方面,可以构建出高效且安全的文件传输系统。希望这些知识点能够帮助读者更好地理解和掌握Web Service中文件处理的相关技术。

Global site tag (gtag.js) - Google Analytics