用c#读取并分析sql2005日志
用过logExplorer的朋友都会被他强悍的功能吸引,我写过一篇详细的操作文档可以参考
http://blog.csdn.net/jinjazz/archive/2008/05/19/2459692.aspx
我们可以自己用开发工具来实现sql日志的读取,这个应用还是很酷的,具体思路
1、首先要了解一个没有公开的系统函数::fn_dblog,他可以读取sql日志,并返回二进制的行数据
2、然后要了解sql的二进制数据是如何存储的,这个可以参考我的blog文章
http://blog.csdn.net/jinjazz/archive/2008/08/07/2783872.aspx
3、用自己擅长的开发工具来分析数据,得到我们需要的信息
我用c#写了一个测试样例,分析了int,char,datetime和varchar的日志情况而且没有考虑null和空字符串的保存,希望感兴趣的朋友能和我一起交流打造属于自己的日志分析工具
详细的试验步骤以及代码如下:
1、首先建立sqlserver的测试环境,我用的sql2005,这个过程不能保证在之前的版本中运行
以下sql语句会建立一个dbLogTest数据库,并建立一张log_test表,然后插入3条数据之后把表清空
- usemaster
- go
- createdatabasedbLogTest
- go
- usedbLogTest
- go
- createtablelog_test(idint,codechar(10),namevarchar(20),datedatetime,memovarchar(100))
- insertintolog_testselect100,'id001','jinjazz',getdate(),'剪刀'
- insertintolog_testselect65549,'id002','游客',getdate()-1,'这家伙很懒,没有设置昵称'
- insertintolog_testselect-999,'id003','这家伙来自火星',getdate()-1000,'a'
- deletefromlog_test
- --usemaster
- --go
- --dropdatabasedbLogTest
2、我们最终的目的是要找到被我们删掉的数据
3、分析日志的c#代码:我已经尽量详细的写了注释
- usingSystem;
- usingSystem.Collections.Generic;
- usingSystem.Text;
- namespaceConsoleApplication21
- {
- classProgram
- {
- ///<summary>
- ///分析sql2005日志,找回被delete的数据,引用请保留以下信息
- ///作者:jinjazz(csdn的剪刀)
- ///作者blog:http://blog.csdn.net/jinjazz
- ///</summary>
- ///<paramname="args"></param>
- staticvoidMain(string[]args)
- {
- using(System.Data.SqlClient.SqlConnectionconn=newSystem.Data.SqlClient.SqlConnection())
- {
- conn.ConnectionString="server=localhost;uid=sa;pwd=sqlgis;database=dbLogTest";
- conn.Open();
- using(System.Data.SqlClient.SqlCommandcommand=conn.CreateCommand())
- {
- //察看dbo.log_test对象的sql日志
- command.CommandText=@"SELECTallocunitname,operation,[RowLogContents0]asr0,[RowLogContents1]asr1
- from::fn_dblog(null,null)
- whereallocunitnamelike'dbo.log_test%'and
- operationin('LOP_INSERT_ROWS','LOP_DELETE_ROWS')";
- System.Data.SqlClient.SqlDataReaderreader=command.ExecuteReader();
- //根据表字段的顺序建立字段数组
- Datacolumn[]columns=newDatacolumn[]
- {
- newDatacolumn("id",System.Data.SqlDbType.Int),
- newDatacolumn("code",System.Data.SqlDbType.Char,10),
- newDatacolumn("name",System.Data.SqlDbType.VarChar),
- newDatacolumn("date",System.Data.SqlDbType.DateTime),
- newDatacolumn("memo",System.Data.SqlDbType.VarChar)
- };
- //循环读取日志
- while(reader.Read())
- {
- byte[]data=(byte[])reader["r0"];
- try
- {
- //把二进制数据结构转换为明文
- TranslateData(data,columns);
- Console.WriteLine("数据对象{1}的{0}操作:",reader["operation"],reader["allocunitname"]);
- foreach(Datacolumncincolumns)
- {
- Console.WriteLine("{0}={1}",c.Name,c.Value);
- }
- Console.WriteLine();
- }
- catch
- {
- //to-do...
- }
- }
- reader.Close();
- }
- conn.Close();
- }
- Console.WriteLine("************************日志分析完成");
- Console.ReadLine();
- }
- //自定义的column结构
- publicclassDatacolumn
- {
- publicstringName;
- publicSystem.Data.SqlDbTypeDataType;
- publicshortLength=-1;
- publicobjectValue=null;
- publicDatacolumn(stringname,System.Data.SqlDbTypetype)
- {
- Name=name;
- DataType=type;
- }
- publicDatacolumn(stringname,System.Data.SqlDbTypetype,shortlength)
- {
- Name=name;
- DataType=type;
- Length=length;
- }
- }
- ///<summary>
- ///sql二进制结构翻译,这个比较关键,测试环境为sql2005,其他版本没有测过。
- ///</summary>
- ///<paramname="data"></param>
- ///<paramname="columns"></param>
- staticvoidTranslateData(byte[]data,Datacolumn[]columns)
- {
- //我只根据示例写了Char,DateTime,Int三种定长度字段和varchar一种不定长字段,其余的有兴趣可以自己补充
- //这里没有暂时没有考虑Null和空字符串两种情况,以后会补充。
- //引用请保留以下信息:
- //作者:jinjazz
- //sql的数据行二进制结构参考我的blog
- //http://blog.csdn.net/jinjazz/archive/2008/08/07/2783872.aspx
- //行数据从第5个字节开始
- shortindex=4;
- //先取定长字段
- foreach(Datacolumncincolumns)
- {
- switch(c.DataType)
- {
- caseSystem.Data.SqlDbType.Char:
- //读取定长字符串,需要根据表结构指定长度
- c.Value=System.Text.Encoding.Default.GetString(data,index,c.Length);
- index+=c.Length;
- break;
- caseSystem.Data.SqlDbType.DateTime:
- //读取datetime字段,sql为8字节保存
- System.DateTimedate=newDateTime(1900,1,1);
- //前四位1/300秒保存
- intsecond=BitConverter.ToInt32(data,index);
- date=date.AddSeconds(second/300);
- index+=4;
- //后四位1900-1-1的天数
- intdays=BitConverter.ToInt32(data,index);
- date=date.AddDays(days);
- index+=4;
- c.Value=date;
- break;
- caseSystem.Data.SqlDbType.Int:
- //读取int字段,为4个字节保存
- c.Value=BitConverter.ToInt32(data,index);
- index+=4;
- break;
- default:
- //忽略不定长字段和其他不支持以及不愿意考虑的字段
- break;
- }
- }
- //跳过三个字节
- index+=3;
- //取变长字段的数量,保存两个字节
- shortvarColumnCount=BitConverter.ToInt16(data,index);
- index+=2;
- //接下来,每两个字节保存一个变长字段的结束位置,
- //所以第一个变长字段的开始位置可以算出来
- shortstartIndex=(short)(index+varColumnCount*2);
- //第一个变长字段的结束位置也可以算出来
- shortendIndex=BitConverter.ToInt16(data,index);
- //循环变长字段列表读取数据
- foreach(Datacolumncincolumns)
- {
- switch(c.DataType)
- {
- caseSystem.Data.SqlDbType.VarChar:
- //根据开始和结束位置,可以算出来每个变长字段的值
- c.Value=System.Text.Encoding.Default.GetString(data,startIndex,endIndex-startIndex);
- //下一个变长字段的开始位置
- startIndex=endIndex;
- //获取下一个变长字段的结束位置
- index+=2;
- endIndex=BitConverter.ToInt16(data,index);
- break;
- default:
- //忽略定长字段和其他不支持以及不愿意考虑的字段
- break;
- }
- }
- //获取完毕
- }
- }
- }
4、更改你的sql连接字符串后运行以上代码,会看到如下输出信息:
- 数据对象dbo.log_test的LOP_INSERT_ROWS操作:
- id=100
- code=id001
- name=jinjazz
- date=2008-8-718:14:03
- memo=剪刀
- 数据对象dbo.log_test的LOP_INSERT_ROWS操作:
- id=65549
- code=id002
- name=游客
- date=2008-8-618:14:03
- memo=这家伙很懒,没有设置昵称
- 数据对象dbo.log_test的LOP_INSERT_ROWS操作:
- id=-999
- code=id003
- name=这家伙来自火星
- date=2005-11-1118:14:03
- memo=a
- 数据对象dbo.log_test的LOP_DELETE_ROWS操作:
- id=100
- code=id001
- name=jinjazz
- date=2008-8-718:14:03
- memo=剪刀
- 数据对象dbo.log_test的LOP_DELETE_ROWS操作:
- id=65549
- code=id002
- name=游客
- date=2008-8-618:14:03
- memo=这家伙很懒,没有设置昵称
- 数据对象dbo.log_test的LOP_DELETE_ROWS操作:
- id=-999
- code=id003
- name=这家伙来自火星
- date=2005-11-1118:14:03
- memo=a
- ************************日志分析完成
试验成功~~
用c#读取并分析sql2005日志的更多相关文章
- c#读取并分析sql Server2005数据库日志
用过logExplorer的朋友都会被他强悍的功能吸引,我写过一篇详细的操作文档可以参考http://blog.csdn.net/jinjazz/archive/2008/05/19/2459692. ...
- web后门排查与高效分析web日志技巧
今年一直大大小小的事情忙,很少有时间能静下心写个文章,所以最近博客更新也越来越少了,公司现在安全团队在我这边,一直在玩命的招人.下个月8号有一个互联网金融的会,4月在qcon北京站,都以嘉宾的身份去分 ...
- 一天,python搞个分析NGINX日志的脚本
准备给ZABBIX用的. 统计接口访问字次,平均响应时间,4XX,5XX次数 以后可以再改进.. #!/usr/bin/env python # coding: utf-8 ############# ...
- C# 分析 IIS 日志(Log)
由于最近又要对 IIS日志 (Log) 分析,以便得出各个搜索引擎每日抓取的频率,所以这两天一直在尝试各个办法来分析 IIS 日志 (Log),其中尝试过:导入数据库.Log parser.Powse ...
- 利用LogParser分析IIS日志
LogParser是微软官方出品的用于读取分析IIS日志的工具,使用类SQL语句过滤文本日志内容,并可将内容导出到csv.sqlserver作进一步分析 下载地址:http://www.micr ...
- 使用awstats分析nginx日志
1.awstats介绍 本文主要是记录centos6.5下安装配置awstats,并统计nginx访问日志 1.1 awstats介绍 awstats是一款日志统计工具,它使用Perl语言编写,可统计 ...
- 烂泥:利用awstats分析nginx日志
本文由ilanniweb提供友情赞助,首发于烂泥行天下 想要获得更多的文章,可以关注我的微信ilanniweb 昨天把nginx的日志进行了切割,关于如何切割nginx日志,可以查看<烂泥:切割 ...
- 用OSSIM轻松分析网络设备日志
用OSSIM轻松分析网络设备日志 基于插件的日志收集与处理模式,使得用户可以轻松的利用OSSIM来分析异构网络环境下的各种网络设备日志,下面展示一些硬件设备日志的实例,我们在RAW LOG界面里,搜索 ...
- Spring AOP在函数接口调用性能分析及其日志处理方面的应用
面向切面编程可以实现在不修改原来代码的情况下,增加我们所需的业务处理逻辑,比如:添加日志.本文AOP实例是基于Aspect Around注解实现的,我们需要在调用API函数的时候,统计函数调用的具体信 ...
随机推荐
- Oracle数据库中的违规策略规则的修正
如笔者计算机上违规的策略与规则: 为了安全,可如下方式对齐进行修正:
- vim简单使用教程
vim的学习曲线相当的大(参看各种文本编辑器的学习曲线),所以,如果你一开始看到的是一大堆VIM的命令分类,你一定会对这个编辑器失去兴趣的.下面的文章翻译自<Learn Vim Progress ...
- 使ViewFlipper中的WebView实现手势效果
使ViewFlipper中的WebView实现手势效果 今天写Blog阅读器的时候遇到了这个问题,把它分享给大家,让同样是新手们少走冤枉路始初写这个功能的时候,用过了好多方法,也耗了不少时间去研究 ...
- Devexpress DateEdit选年月 z
Mask与Display只显示年月2012-02这种格式,但用户选择起来还是不爽,体验太差. 效果如下: 代码: using Microsoft.VisualBasic; using System; ...
- .net 接口返回json格式示例
1.新建 InterfaceTestPro1 项目: FILE - New - Project... - Web - ASP.NET Web Forms Application name:Interf ...
- Cutting Sticks
题意: l长的木棒,给出n个切割点,每切一次的费用为切得木棒的长度,完成切割的最小费用. 分析: 区间dp入门,区间dp的特点,一个大区间的解可以转换成小区间的解组合起来,每个切割点的标号代表边界. ...
- <译>Selenium Python Bindings 6 - WebDriver API
本章涉及Selenium WebDriver的所有接口. Recommended Import Style 推荐的导入风格如下: from selenium import webdriver 然后,你 ...
- Selenium用户扩展
Selenium用户扩展 这很容易扩展Selenium IDE加入自定义操作,断言和定位,策略,这是通过添加方法,在JavaScript的帮助下Selenium 对象原型.在启动时,Selenium会 ...
- 基于51,人体红外感应和RC522的门禁系统
总结一下最近学的东西,这两天学的东西,rfid门卡系统终于弄出来来了,这个程序算现在写过的比较满意的程序,大家可以参考参考 主函数: #include<reg52.h> #include& ...
- Cocos2d-x使用iOS游戏内付费IAP(C++篇)
本文章转载 http://www.ityran.com/archives/5515.非本人原创! 前期准备 设备与账号 在开始编码之前我们需要准备测试环境. IAP只能真机测试,准备一台iOS设备是必 ...