WebService下实现大数据量的传输

摘自csdn:  http://blog.csdn.net/qiujialongjjj/article/details/20033943

 设置RemotingFormat = SerializationFormat.Binary;再序列化,通过WebService传输,客户端接收,再反序列化,确实效果大大的优于直接传送DataSet,不仅网络传输中如此,即使本机,性能改善也非常明显.

      下面分别是WebService里面的方法和客户端反序列化取DataSet的方法.

      1. 服务器上面取数据,填充数据集,转换为二进制格式.

[csharp] view plain copy

 

 

1. /// <summary>  
2.     /// Method for users data query with binaryFormatter  
3.     /// </summary>  
4.     /// <param name="err"></param>  
5.     /// <returns></returns>  
6.     public byte[] BinaryUserSelect(ref string err)  
7.     {  
8.         ClearCommand();  
9.         m_commandStringBuilder.Append("SELECT * FROM t_Users ;");  
10.         DataSet dsResult = new DataSet();  
11.         byte[] bArrayResult = null;  
12.         try  
13.         {                                
14.             dsResult = SqlHelper.ExecuteDataset(m_currentConnectionString, CommandType.Text, m_commandStringBuilder.ToString());  
15.             // 上面都是取数据的,无需关心.二进制压缩数据集是下面一小段  
16.             dsResult.RemotingFormat = SerializationFormat.Binary;  
17.             MemoryStream ms = new MemoryStream();  
18.             IFormatter bf = new BinaryFormatter();  
19.             bf.Serialize(ms, dsResult);  
20.             bArrayResult = ms.ToArray();  
21.             ms.Close();  
22.             //   
23.         }  
24.         catch (Exception ee)  
25.         {  
26.             err = ee.ToString();  
27.         }  
28.         return bArrayResult;          
29.     }  

     2. 通过WebService把byte[]格式的数据发送到客户端,这里就是WebService自己的事情了,我们无需关心

     3.客户端接收到byte[]格式的数据,对其进行反序列化,得到数据集,进行客户端操作.

[csharp] view plain copy

 

 

1. /// <summary>  
2.        /// Get user data with Binary format  
3.        /// </summary>  
4.        /// <returns></returns>  
5.        public DataSet GetBinaryUserData()  
6.        {  
7.            string err = "";  
8.            byte[] bUserData = svc.ByteArrayUserSelect(ref err);  
9.            if (err != "")  
10.            {  
11.                MessageBox.Show(err);  
12.                err = "";  
13.                return null;  
14.            }  
15.            // 反序列化的过程  
16.            MemoryStream ms = new MemoryStream(bUserData);  
17.            IFormatter bf = new BinaryFormatter();  
18.            object obj = bf.Deserialize(ms);  
19.            DataSet dsResult = (DataSet)obj;  
20.            //  
21.            ms.Close();  
22.            return dsResult;  
23.        }  

     同样一台机器,手工生成12000条数据,在本地使用WebService分别读取、传输并在客户端显示数据集和byte[]格式的数据,前者平均时间2.3秒,后者平均时间为1.7秒,之间的差别仅在传输过程的格式,还有后者需要的序列化和反序列化的时间.本地WebService传输的差别尚且如此,通过网络传输的时间优化自然会更明显..

    在2.0 中对数据集序列化和反序列化的方法进行了一下简单的封装，使其可以得到重用的效果.见下面的类DatFormatter.通过GetBinaryFormatData方法可以转换数据集为二进制，在服务器端使用,转换数据集格式。发送，客户端接收，得到二进制格式数据，使用RetrieveDataSet方法，反序列化，得到数据集，进行客户端操作。通过这些简单的操作(序列化和反序列化，将数据压缩)，可以使数据集等体积庞大的对象在远程传递中的时间大大减少，并且可以减少网络中断等问题对程序的影响。

[csharp] view plain copy

 

 

1. using System;  
2. using System.IO;  
3. using System.Data;  
4. using System.Runtime.Serialization;  
5. using System.Runtime.Serialization.Formatters.Binary;  
6.   
7. namespace Common  
8. {  
9.     public class DataFormatter  
10.     {  
11.         private DataFormatter() { }  
12.         /// <summary>  
13.         /// Serialize the Data of dataSet to binary format  
14.         /// </summary>  
15.         /// <param name="dsOriginal"></param>  
16.         /// <returns></returns>  
17.         static public byte[] GetBinaryFormatData(DataSet dsOriginal)  
18.         {  
19.             byte[] binaryDataResult = null;  
20.             MemoryStream memStream = new MemoryStream();  
21.             IFormatter brFormatter = new BinaryFormatter();  
22.             dsOriginal.RemotingFormat = SerializationFormat.Binary;  
23.   
24.             brFormatter.Serialize(memStream, dsOriginal);  
25.             binaryDataResult = memStream.ToArray();  
26.             memStream.Close();  
27.             memStream.Dispose();  
28.             return binaryDataResult;  
29.         }  
30.         /// <summary>  
31.         /// Retrieve dataSet from data of binary format  
32.         /// </summary>  
33.         /// <param name="binaryData"></param>  
34.         /// <returns></returns>  
35.         static public DataSet RetrieveDataSet(byte[] binaryData)  
36.         {   
37.             DataSet dataSetResult = null;  
38.             MemoryStream memStream = new MemoryStream(binaryData);  
39.             IFormatter brFormatter = new BinaryFormatter();  
40.   
41.             object obj = brFormatter.Deserialize(memStream);  
42.             dataSetResult = (DataSet)obj;  
43.             return dataSetResult;  
44.         }  
45.     }  
46. }  

C#解决办法，已经在例子中实现！ 

WebServices: 
一个叫：GetBkmlDataStr()的函数，返回XML字符流。 
...... 
return ds.GetXml().ToString(); 

.net客户端转换成dataset: 
DataSet ds=new DataSet(); 
localhost.Service1 ltsr=new localhost.Service1(); 
ds.ReadXml(new StringReader(ltsr.GetBkmlDataStr(tb_bkdh.Text))); 
dataGrid1.DataSource = ds.Tables[0]; 

WebService下实现大数据量的传输

原文：http://www.cnblogs.com/Zpyboke/p/6274101.html