日志处理--Logo4Net与文件的并发处理
本文参考自:http://www.cnblogs.com/jiekzou/
多线程操作同一个文件时会出现并发问题。解决的一个办法就是给文件加锁(lock),但是这样的话,一个线程操作文件时,其它的都得等待,这样的话性能非常差。可以在代码中加锁,也可以在数据库中加锁。
另外一个解决方案,就是先将数据放在队列中,然后开启一个线程,负责从队列中取出数据,再写到文件中。
也就是运用到了生产者消费者模式,生产者就是MVC中捕获错误的过滤器(Golble.asax文件中的FilterConfig) ,消费者就是Log4Net组件负责将日志写在磁盘上,而他们之间可以是通过在内存中存储的队列来
实现的,也可以使用Redis,分布式队列来实现。
关于这个解决方案会有两种方法:
方法一:使用.net 内置的一个类 ConcurrentQueue<Exception>,线程安全的队列,
首先新创建一个类MyExceptionAttribute,这个类继承自HandleErrorAttribute 类 ,
而HandleErrorAttribute 则是在Golble.asax 注册好的一个接受未处理的异常的方法,
所以要用自定义类MyExceptionAttribute 告诉整个应用程序捕获异常有我们自己定义的类来进行处理。
来看一下自定义的异常处理类的代码(目的是为了截取未处理的错误日志,并存储到一个队列中):
public class MyExceptionAttribute : HandleErrorAttribute
{
// private static object obj = new object();
public static ConcurrentQueue<Exception> ExceptionQueue = new ConcurrentQueue<Exception>();//定义队列 /// <summary>
/// 在该方法中捕获异常。
/// </summary>
/// <param name="filterContext"></param>
public override void OnException(ExceptionContext filterContext)
{ base.OnException(filterContext);
Exception ex = filterContext.Exception;//捕获异常信息。
//将异常信息写到队列中。
ExceptionQueue.Enqueue(ex);
//跳转到错误页面.
filterContext.HttpContext.Response.Redirect("/Error.html"); }
}
然后在FilterConfig类,与 Golble.asax 文件中修改成如下代码
public class FilterConfig
{
public static void RegisterGlobalFilters(GlobalFilterCollection filters)
{
// filters.Add(new HandleErrorAttribute());
filters.Add(new MyExceptionAttribute());//告诉整个应用程序捕获异常有我们自己定义的类来进行处理。
}
}
在Golble.asax文件的 Application_Start() 中修改成如下代码(目的是将存储在队列中的错误日志,写在相应路径的错误日志文件之中):
protected void Application_Start()
{//开始一个线程,查看异常队列
string filePath = Server.MapPath("/Log/");
ThreadPool.QueueUserWorkItem((a) => { while (true)//注意:线程不能结束。后面写到队列中的数据没法处理。
{
if (MyExceptionAttribute.ExceptionQueue.Count() > )
{
// Exception ex= MyExceptionAttribute.ExceptionQueue.Dequeue();//从队列中取出数据.
Exception ex=null;
bool isResult = MyExceptionAttribute.ExceptionQueue.TryDequeue(out ex);
if (ex != null&&isResult)
{
//string fullPath = filePath + DateTime.Now.ToString("yyyy-MM-dd") + ".txt";
//File.AppendAllText(fullPath,ex.ToString());
ILog logger = LogManager.GetLogger("errorMsg");
logger.Error(ex.ToString());
}
else
{
Thread.Sleep();
}
}
else
{
Thread.Sleep();//避免造成CPU的空转。
}
} },filePath);
AreaRegistration.RegisterAllAreas(); WebApiConfig.Register(GlobalConfiguration.Configuration);
FilterConfig.RegisterGlobalFilters(GlobalFilters.Filters);
RouteConfig.RegisterRoutes(RouteTable.Routes);
BundleConfig.RegisterBundles(BundleTable.Bundles);
}
方法二 使用Redis与Log4Net完成分布式日志记录:
Log4Net是用来记录日志的,可以将程序运行过程中的信息输出到一些地方(文件、数据库、EventLog等),日志就是程序的黑匣子,可以通过
日志查看系统的运行过程,从而发现系统的问题。日志的作用:将运行过程的步骤、成功失败记录下来,将关键性的数据记录下来分析系统问题所在。
对于网站来讲,不能把异常信息显示给用户,异常信息只能记录到日志,出了问题把日志文件发给开发人员,就能知道问题所在。
配置Log4Net环境
(1)新建一个WebApplication
(2)添加对log4net.dll的引用(bin\net\2.0\release 不能引用debug版本)(把相应的dll文件拷贝到项目中的lib文件夹下。)
(3)在Web.Config (或App.Config)添加配置
(4)初始化:在程序最开始加入log4net.Config.XmlConfigurator.Configure()
在要打印日志的地方LogManager.GetLogger(typeof(Program)).Debug(“信息”); 。通过LogManager.GetLogger传递要记录的日志类类名获得这个类的ILog(这样在日志文件中就能看到这条日志是哪个类输出的了),然后调用Debug方法输出消息。因为一个类内部不止一个地方要打印日志,所以一般把ILog声明为一个static字段。
Private static ILog logger=LogManager.GetLogger(typeof(Test))
输出错误信息用ILog.Error方法,第二个参数可以传递Exception对象。log.Error("***错误"+ex),log.Error("***错误",ex)
Appender:可以将日志输出到不同的地方,不同的输出目标对应不同的Appender:RollingFileAppender(滚动文件)、AdoNetAppender(数据库)、SmtpAppender (邮件)等。
level(级别):标识这条日志信息的重要级别None>Fatal>ERROR>WARN>DEBUG>INFO>ALL,设定一个
Level,那么低于这个Level的日志是不会被写到Appender中的.
Log4Net还可以设定多个Appender,可以实现同时将日志记录到文件、数据、发送邮件等;可以设定不同的Appender的不同的Level,可以实现普通级别都记录到文件,Error以上级别发送邮件;可以实现对不同的类设定不同的Appender;还可以自定义Appender,这样可以自己实现将Error信息发短信等.
代码如下:
1、配置Log4Net,在Web.config中添加如下配置:
<configuration>
<configSections>
<section name="log4net" type="log4net.Config.Log4NetConfigurationSectionHandler, log4net"/>
</configSections>
<log4net>
<!-- Define some output appenders -->
<appender name="RollingLogFileAppender" type="log4net.Appender.RollingFileAppender">
<!-- 这里注意输出的是错误日志文件的输出路径-->
<file value="test.txt"/>
<appendToFile value="true"/>
<maxSizeRollBackups value=""/>
<maximumFileSize value="1024KB"/>
<rollingStyle value="Size"/>
<staticLogFileName value="true"/>
<layout type="log4net.Layout.PatternLayout">
<conversionPattern value="%date [%thread] %-5level %logger - %message%newline"/>
</layout>
</appender>
<root>
<level value="DEBUG"/>
<appender-ref ref="RollingLogFileAppender"/>
</root>
</log4net>
</configuration>
2、然后同样的创建 一个自定义的异常捕获类MyExceptionAttribute ,代码如下:
using System.Web.Mvc; using ServiceStack.Redis; public class MyExceptionAttribute : HandleErrorAttribute
{
public static IRedisClientsManager clientsManager = new PooledRedisClientManager(new string[] { "127.0.0.1:6379"}); public static IRedisClient redisClient = clientsManager.GetClient(); public override void OnException(ExceptionContext filterContext) { redisClient.EnqueueItemOnList("errorMsg", filterContext.Exception.ToString()); filterContext.HttpContext.Response.Redirect("~/Error.html"); base.OnException(filterContext); } }
3、在FilterConfig类中进行如下修改(目的是启用自定义捕获类 MyExceptionAttribute):
public class FilterConfig
{
public static void RegisterGlobalFilters(GlobalFilterCollection filters)
{
//filters.Add(new HandleErrorAttribute()); //filters.Add(new MyErrorAttribute());
filters.Add(new MyExceptionAttribute());
}
}
4、在Gobal.asax.cs中的Application_Start事件里添加如下代码:
log4net.Config.XmlConfigurator.Configure(); //获取Log4Net配置信息
ThreadPool.QueueUserWorkItem(o =>
{
while (true)
{
if (MyExceptionAttribute.redisClient.GetListCount("errorMsg") > )
{
string msg = MyExceptionAttribute.redisClient.DequeueItemFromList("errorMsg");
if (!string.IsNullOrEmpty(msg))
{
ILog logger=LogManager.GetLogger("testError");
logger.Error(msg); //将异常信息写入Log4Net中
}
else
{
Thread.Sleep();
}
}
else
{
Thread.Sleep();
}
}
});
日志处理--Logo4Net与文件的并发处理的更多相关文章
- C#中使用Log4net日志输出到本地文件、Textbox或Listview
网上很多配置log4net的方法,但是排行靠前的 根本就没有说明清除,导致浪费了两个小时来搞清楚如何配置,真是无语,特写此文,给那些刚接触log4net的朋友 1.参考链接:http://blog.s ...
- Apache日志不记录图片文件设置方法和来源日志的配置
Apache日志不记录图片文件设置方法 <FilesMatch "\.(ico|gif|jpg|swf)">SetEnv IMAG 1</FilesMatch&g ...
- ios 将Log日志重定向输出到文件中保存
对于真机,日志没法保存,不好分析问题.所以有必要将日志保存到应用的Docunment目录下,并设置成共享文件,这样才能取出分析. 首先是日志输出,分为c的printf和标准的NSLog输出,print ...
- JAVA使用Logback发送日志到控制台、文件、ELK的最简单用法
一.简述 本文讲JAVA使用Logback发送日志到控制台.文件.ELK的最简单用法. 二.教程 1.新建pom.xml项目引入下列依赖: <dependencies> <!--Be ...
- 将不同级别的logging 日志信息写入不同文件
将不同级别的logging 日志信息写入不同文件 # -*- coding: utf-8 -*- import os import time from logging.handlers import ...
- php 写内容到文件,把日志写到log文件
php 写内容到文件,把日志写到log文件 <?php header("Content-type: text/html; charset=utf-8"); /******** ...
- 快速php日志,写内容到文件,把日志写到log文件
php 写内容到文件,把日志写到log文件 //记录日志:要写入文件的文件名(可以是任意文件名),如果文件不存在,将会创建一个.log.txt位置在项目的根目录下. $file = 'log.txt' ...
- [译]如何将docker日志重定向到单个文件里
原文来源: how-to-redirect-docker-logs-to-a-single-file 问题: 我想把某一个docker的log全部导出到一个文件里进行分析,我该怎么做? 其实不用那样操 ...
- 使用SVN钩子强制提交日志和限制提交文件类型
Subversion本身有很好的扩展性,用户可以通过钩子实现一些自定义的功能.所谓钩子实际上是一种事件机制,当系统执行到某个特殊事件时,会触发我们预定义的动作,这样的特殊事件在Subversion里有 ...
随机推荐
- 详解Java GC的工作原理
JVM学习笔记之JVM内存管理和JVM垃圾回收的概念,JVM内存结构由堆.栈.本地方法栈.方法区等部分组成,另外JVM分别对新生代和旧生代采用不同的垃圾回收机制. 首先来看一下JVM内存结构,它是由堆 ...
- .NET 验证码/验证图片
/// <summary> /// 验证码类 /// </summary> public class Rand { #region 生成随机数字 /// <summary ...
- request.setCharacterEncoding 和常用内置对象 跳转
1.直接转码 new String(name.getBytes("ISO8859_1"),"GBK") 2. request.setCharactorEncod ...
- Oracle中的多表查询
多表查询 l 笛卡尔积: N*M l 使用关联字段消除笛卡尔积的多余数据: SELECT EMP.*,DEPT.DNAME,DEPT.LOC FROM EMP, DEPT WHERE EMP.DEPT ...
- Mac 下用 go 开发Android应用环境设置
需要的工具 设置代理 请参考:http://www.cnblogs.com/ghj1976/p/5087049.html Mac 下命令行设置代理: export http_proxy=http:// ...
- Mysql 学习笔记 20140219
1. Mysql常用命令:每个命令以分号结束. create database name; 创建数据库 use databasename; 选择数据库 dr ...
- HDU 5834 [树形dp]
/* 题意:n个点组成的树,点和边都有权值,当第一次访问某个点的时候获得利益为点的权值 每次经过一条边,丢失利益为边的权值.问从第i个点出发,获得的利益最大是多少. 输入: 测试样例组数T n n个数 ...
- arm交叉编译器gnueabi、none-eabi、arm-eabi、gnueabihf、gnueabi区别
命名规则 交叉编译工具链的命名规则为:arch [-vendor] [-os] [-(gnu)eabi] arch – 体系架构,如ARM,MIPSvendor – 工具链提供商os – 目标操作系统 ...
- 502 Bad Gateway什么意思
http://baike.baidu.com/link?url=U2ijg5T5PG_tTkY67mqfx07co7qGqvMB32rbLwq4S2ThBSRIWWvU76Y0Mb8Z3z6nbViN ...
- C#中的委托和事件(续)
转自张子阳的博客http://www.tracefact.net/CSharp-Programming/Delegates-and-Events-Advanced.aspx 引言 如果你看过了 C#中 ...