首页 > Web开发 > 详细

.net中自定义过滤器对Response内容进行处理

时间:2014-03-04 09:39:33      阅读:494      评论:0      收藏:0      [点我收藏+]
原文:http://www.cnblogs.com/zgqys1980/archive/2008/09/02/1281895.html

代码DEMO:http://files.cnblogs.com/peaceli/httpModuleTest.rar

因项目需要,对每一个访问网站的请求要做原始数据记录,其中要包括几个要素:
1.客户端的IP
2.客户端请求的页面路径
3.客户端发出的请求头
4.服务器返回的正文内容。

在代码设计前分析了一下,前三个都很好解决,对于截获服务器返回的正文,准备用HttpResponse 对象中的Output 和 OutputStream 属性输出信息来解决。

可是在正式编码的过程中,发现Output和OutputStream 并不是想像中可以直接把数据转出取回,耗费了近两天的时间,想尽了一切办法可还是仅仅可以追加内容并无法读取。

在网上查阅到,对于HttpResponse 对象,仅仅可以使用过滤器来对其中将要输出的内容进行修改。
这个过滤器要继承自Stream 类,并要实现其中的虚方法。看来之前企图使用HttpWriter,TextWriter,Stream,HttpStream 这些类来转出数据完全是错误的。

现在有信心来截获服务器返回内容了,说干就干吧!

1.首先要建立一个简易过滤器。
代码如下:

bubuko.com,布布扣using System;
bubuko.com,布布扣
using System.Collections.Generic;
bubuko.com,布布扣
using System.Text;
bubuko.com,布布扣
using System.Text.RegularExpressions;
bubuko.com,布布扣
using System.IO;
bubuko.com,布布扣
using System.Web;
bubuko.com,布布扣
bubuko.com,布布扣bubuko.com,布布扣    
/**////
<summary>
bubuko.com,布布扣    
/// 定义原始数据EventArgs,便于在截获完整数据后,由事件传递数据
bubuko.com,布布扣    
///
</summary>

bubuko.com,布布扣
public
class RawDataEventArgs : EventArgs
bubuko.com,布布扣bubuko.com,布布扣    
bubuko.com,布布扣{
bubuko.com,布布扣        
private
string sourceCode;
bubuko.com,布布扣
bubuko.com,布布扣        
public RawDataEventArgs(string SourceCode)
bubuko.com,布布扣bubuko.com,布布扣        
bubuko.com,布布扣{
bubuko.com,布布扣            sourceCode 
= SourceCode;
bubuko.com,布布扣        }

bubuko.com,布布扣        
public
string SourceCode
bubuko.com,布布扣bubuko.com,布布扣        
bubuko.com,布布扣{
bubuko.com,布布扣bubuko.com,布布扣            
get
bubuko.com,布布扣return sourceCode; }
bubuko.com,布布扣bubuko.com,布布扣            
set
bubuko.com,布布扣{ sourceCode = value; }
bubuko.com,布布扣        }

bubuko.com,布布扣    }

bubuko.com,布布扣
//自定义过滤器
bubuko.com,布布扣    
public
class RawFilter : Stream
bubuko.com,布布扣bubuko.com,布布扣    
bubuko.com,布布扣{
bubuko.com,布布扣
bubuko.com,布布扣        Stream responseStream;
bubuko.com,布布扣        
long position;
bubuko.com,布布扣        StringBuilder responseHtml;
bubuko.com,布布扣
bubuko.com,布布扣bubuko.com,布布扣        
/**////
<summary>
bubuko.com,布布扣        
/// 当原始数据采集成功后激发。
bubuko.com,布布扣        
///
</summary>

bubuko.com,布布扣
public
event EventHandler<RawDataEventArgs> OnRawDataRecordedEvent;
bubuko.com,布布扣
bubuko.com,布布扣        
public RawFilter(Stream inputStream)
bubuko.com,布布扣bubuko.com,布布扣        
bubuko.com,布布扣{
bubuko.com,布布扣            responseStream 
= inputStream;
bubuko.com,布布扣            responseHtml 
=
new StringBuilder();
bubuko.com,布布扣        }

bubuko.com,布布扣
bubuko.com,布布扣
//实现Stream 虚方法
bubuko.com,布布扣bubuko.com,布布扣

Filter Overrides#region Filter Overrides
bubuko.com,布布扣
bubuko.com,布布扣        
public
override
bool CanRead
bubuko.com,布布扣bubuko.com,布布扣        
bubuko.com,布布扣{
bubuko.com,布布扣            
get
bubuko.com,布布扣bubuko.com,布布扣            
bubuko.com,布布扣{
bubuko.com,布布扣                
return
true;
bubuko.com,布布扣            }

bubuko.com,布布扣        }

bubuko.com,布布扣
bubuko.com,布布扣        
public
override
bool CanSeek
bubuko.com,布布扣bubuko.com,布布扣        
bubuko.com,布布扣{
bubuko.com,布布扣            
get
bubuko.com,布布扣bubuko.com,布布扣            
bubuko.com,布布扣{
bubuko.com,布布扣                
return
true;
bubuko.com,布布扣            }

bubuko.com,布布扣        }

bubuko.com,布布扣
bubuko.com,布布扣        
public
override
bool CanWrite
bubuko.com,布布扣bubuko.com,布布扣        
bubuko.com,布布扣{
bubuko.com,布布扣            
get
bubuko.com,布布扣bubuko.com,布布扣            
bubuko.com,布布扣{
bubuko.com,布布扣                
return
true;
bubuko.com,布布扣            }

bubuko.com,布布扣        }

bubuko.com,布布扣        
public
override
void Close()
bubuko.com,布布扣bubuko.com,布布扣        
bubuko.com,布布扣{
bubuko.com,布布扣            responseStream.Close();
bubuko.com,布布扣        }

bubuko.com,布布扣
bubuko.com,布布扣        
public
override
void Flush()
bubuko.com,布布扣bubuko.com,布布扣        
bubuko.com,布布扣{
bubuko.com,布布扣            responseStream.Flush();
bubuko.com,布布扣        }

bubuko.com,布布扣
bubuko.com,布布扣        
public
override
long Length
bubuko.com,布布扣bubuko.com,布布扣        
bubuko.com,布布扣{
bubuko.com,布布扣            
get
bubuko.com,布布扣bubuko.com,布布扣            
bubuko.com,布布扣{
bubuko.com,布布扣                
return
0;
bubuko.com,布布扣            }

bubuko.com,布布扣        }

bubuko.com,布布扣
bubuko.com,布布扣        
public
override
long Position
bubuko.com,布布扣bubuko.com,布布扣        
bubuko.com,布布扣{
bubuko.com,布布扣            
get
bubuko.com,布布扣bubuko.com,布布扣            
bubuko.com,布布扣{
bubuko.com,布布扣                
return position;
bubuko.com,布布扣            }

bubuko.com,布布扣            
set
bubuko.com,布布扣bubuko.com,布布扣            
bubuko.com,布布扣{
bubuko.com,布布扣                position 
= value;
bubuko.com,布布扣            }

bubuko.com,布布扣        }

bubuko.com,布布扣
bubuko.com,布布扣        
public
override
int Read(byte[] buffer, int offset, int count)
bubuko.com,布布扣bubuko.com,布布扣        
bubuko.com,布布扣{
bubuko.com,布布扣            
return responseStream.Read(buffer, offset, count);
bubuko.com,布布扣        }

bubuko.com,布布扣
bubuko.com,布布扣        
public
override
long Seek(long offset, SeekOrigin origin)
bubuko.com,布布扣bubuko.com,布布扣        
bubuko.com,布布扣{
bubuko.com,布布扣            
return responseStream.Seek(offset, origin);
bubuko.com,布布扣        }

bubuko.com,布布扣
bubuko.com,布布扣        
public
override
void SetLength(long length)
bubuko.com,布布扣bubuko.com,布布扣        
bubuko.com,布布扣{
bubuko.com,布布扣            responseStream.SetLength(length);
bubuko.com,布布扣        }

bubuko.com,布布扣        
#endregion
bubuko.com,布布扣
bubuko.com,布布扣
//关键的点,在HttpResponse 输入内容的时候,一定会调用此方法输入数据,所以要在此方法内截获数据
bubuko.com,布布扣

public
override
void Write(byte[] buffer, int offset, int count)
bubuko.com,布布扣bubuko.com,布布扣        
bubuko.com,布布扣{
bubuko.com,布布扣            
string strBuffer = System.Text.UTF8Encoding.UTF8.GetString(buffer, offset, count);
bubuko.com,布布扣
bubuko.com,布布扣
//采用正则,检查输入的是否有页面结束符</html>
bubuko.com,布布扣
            Regex eof =
new Regex("</html>", RegexOptions.IgnoreCase);
bubuko.com,布布扣
bubuko.com,布布扣            
if (!eof.IsMatch(strBuffer))
bubuko.com,布布扣bubuko.com,布布扣            
bubuko.com,布布扣{
bubuko.com,布布扣              
//页面没有输出完毕,继续追加内容
bubuko.com,布布扣
                responseHtml.Append(strBuffer);
bubuko.com,布布扣            }

bubuko.com,布布扣            
else
bubuko.com,布布扣bubuko.com,布布扣            
bubuko.com,布布扣{
bubuko.com,布布扣              
//页面输出已经完毕,截获内容
bubuko.com,布布扣
                responseHtml.Append(strBuffer);
bubuko.com,布布扣                
string finalHtml = responseHtml.ToString();
bubuko.com,布布扣
bubuko.com,布布扣            
//激发数据已经获取事件
bubuko.com,布布扣
            OnRawDataRecordedEvent(thisnew RawDataEventArgs(finalHtml));
bubuko.com,布布扣
bubuko.com,布布扣                
//继续传递要发出的内容写入流
bubuko.com,布布扣

byte[] data = System.Text.UTF8Encoding.UTF8.GetBytes(finalHtml);
bubuko.com,布布扣
bubuko.com,布布扣                responseStream.Write(data, 
0, data.Length);
bubuko.com,布布扣            }

bubuko.com,布布扣        }

bubuko.com,布布扣    }

至此,过滤器定义完毕了,接下来还需要把这个过滤器装配到HttpResponse 对象中。
为了能够截获整站的aspx 页面输出的内容,我们可以定义一个HttpModule 来完成。
代码如下:

bubuko.com,布布扣using System;
bubuko.com,布布扣
using System.Web;
bubuko.com,布布扣
using System.Collections.Generic;
bubuko.com,布布扣
using System.Text;
bubuko.com,布布扣
using System.IO;
bubuko.com,布布扣
using System.Diagnostics;
bubuko.com,布布扣

bubuko.com,布布扣    
public
class HttpRawDataModule : IHttpModule
bubuko.com,布布扣bubuko.com,布布扣    
bubuko.com,布布扣{
bubuko.com,布布扣bubuko.com,布布扣        
IHttpModule 成员#region IHttpModule 成员
bubuko.com,布布扣
bubuko.com,布布扣        
public
void Dispose()
bubuko.com,布布扣bubuko.com,布布扣        
bubuko.com,布布扣{
bubuko.com,布布扣
bubuko.com,布布扣        }

bubuko.com,布布扣
bubuko.com,布布扣        
public
void Init(HttpApplication context)
bubuko.com,布布扣bubuko.com,布布扣        
bubuko.com,布布扣{
bubuko.com,布布扣            
//绑定事件,在对此请求处理过程全部结束后进行过滤操作
bubuko.com,布布扣
            context.ReleaseRequestState +=
new EventHandler(context_ReleaseRequestState);
bubuko.com,布布扣        }

bubuko.com,布布扣
bubuko.com,布布扣        
#endregion
bubuko.com,布布扣
bubuko.com,布布扣bubuko.com,布布扣        
/**////
<summary>
bubuko.com,布布扣        
/// 对此HTTP请求处理的过程全部结束
bubuko.com,布布扣        
///
</summary>
bubuko.com,布布扣        
///
<param name="sender"></param>
bubuko.com,布布扣        
///
<param name="e"></param>

bubuko.com,布布扣
void context_ReleaseRequestState(object sender, EventArgs e)
bubuko.com,布布扣bubuko.com,布布扣        
bubuko.com,布布扣{
bubuko.com,布布扣            HttpApplication application 
= (HttpApplication)sender;
bubuko.com,布布扣
bubuko.com,布布扣            
//这里需要针对ASPX页面进行拦截,测试发现如果不这么做,Wap 访问站点图片容易显示为X,奇怪
bubuko.com,布布扣

string[] temp = application.Request.CurrentExecutionFilePath.Split(.);
bubuko.com,布布扣            
if (temp.Length >
0
&& temp[temp.Length -
1].ToLower() ==
"aspx")
bubuko.com,布布扣bubuko.com,布布扣            
bubuko.com,布布扣{
bubuko.com,布布扣                
//装配过滤器
bubuko.com,布布扣
                application.Response.Filter =
new RawFilter(application.Response.Filter);
bubuko.com,布布扣
bubuko.com,布布扣                
//绑定过滤器事件
bubuko.com,布布扣
                RawFilter filter = (RawFilter)application.Response.Filter;
bubuko.com,布布扣                filter.OnRawDataRecordedEvent 
+=
new EventHandler<RawDataEventArgs>(filter_OnRawDataRecordedEvent);
bubuko.com,布布扣            }

bubuko.com,布布扣        }

bubuko.com,布布扣
bubuko.com,布布扣bubuko.com,布布扣        
/**////
<summary>
bubuko.com,布布扣        
/// 当原始数据采集到以后,入库 
bubuko.com,布布扣        
///
</summary>
bubuko.com,布布扣        
///
<param name="sender"></param>
bubuko.com,布布扣        
///
<param name="e"></param>

bubuko.com,布布扣
void filter_OnRawDataRecordedEvent(object sender, RawDataEventArgs e)
bubuko.com,布布扣bubuko.com,布布扣        
bubuko.com,布布扣{
bubuko.com,布布扣            
string allcode = e.SourceCode;
bubuko.com,布布扣            WapSite.SiteDataClass wapdata 
=
new WapSite.SiteDataClass();
bubuko.com,布布扣            wapdata.WriteRawDataLog(allcode);
bubuko.com,布布扣        }

bubuko.com,布布扣    }

bubuko.com,布布扣

HttpModule 准备完毕,也装配上了过滤器,接下来还需要在配置文件中配置HttpModules配置节 ,把自定义的HttpModule 加入到HTTP处理管道中。
在Web.config 中增加配置节如下:

bubuko.com,布布扣
<system.web>
bubuko.com,布布扣    
<httpModules>
bubuko.com,布布扣      
<add name="RawDataModule" type="HttpRawDataModule"/>
bubuko.com,布布扣    
</httpModules>
bubuko.com,布布扣  
</system.web>


测试成功,能准确的获得服务器向客户端输出的HTML内容。

其中,在过滤器中,可以直接对即将要输出的内容做 对于字符串的任意处理。

而且采用这样的方式来对站点即将输出的内容做修改和采集,可以通过修改配置文件,随时打开和关闭,有很强的优越性和灵活性还有重用性。

记得看到过很多需要产生静态页面的网站,都是通过代码HttpWebRequest 向自己请求并记录返回的代码产生静态页面,不知道我当前介绍的方法是否更好写,比如需要产生静态页面时,不管是谁发出请求,由服务器检查自己是否有静态页面,否则产生静态页面,并转向。给出引子,希望大家还是自己开阔思路比较好。
 

 .net中自定义过滤器对Response内容进行处理

.net中自定义过滤器对Response内容进行处理,布布扣,bubuko.com

.net中自定义过滤器对Response内容进行处理

原文:http://www.cnblogs.com/moonvan/p/3578814.html

(0)
(0)
   
举报
评论 一句话评论(0
关于我们 - 联系我们 - 留言反馈 - 联系我们:wmxa8@hotmail.com
© 2014 bubuko.com 版权所有
打开技术之扣,分享程序人生!