分享一个SQLSERVER脚本(计算数据库中各个表的数据量和每行记录所占用空间)

很多时候我们都需要计算数据库中各个表的数据量和每行记录所占用空间

这里共享一个脚本

  1. CREATE TABLE #tablespaceinfo
  2. (
  3. nameinfo VARCHAR(500) ,
  4. rowsinfo BIGINT ,
  5. reserved VARCHAR(20) ,
  6. datainfo VARCHAR(20) ,
  7. index_size VARCHAR(20) ,
  8. unused VARCHAR(20)
  9. )
  10.  
  11. DECLARE @tablename VARCHAR(255);
  12.  
  13. DECLARE Info_cursor CURSOR
  14. FOR
  15. SELECT '[' + [name] + ']'
  16. FROM sys.tables
  17. WHERE type = 'U';
  18.  
  19. OPEN Info_cursor
  20. FETCH NEXT FROM Info_cursor INTO @tablename
  21.  
  22. WHILE @@FETCH_STATUS = 0
  23. BEGIN
  24. INSERT INTO #tablespaceinfo
  25. EXEC sp_spaceused @tablename
  26. FETCH NEXT FROM Info_cursor
  27. INTO @tablename
  28. END
  29.  
  30. CLOSE Info_cursor
  31. DEALLOCATE Info_cursor
  32.  
  33. --创建临时表
  34. CREATE TABLE [#tmptb]
  35. (
  36. TableName VARCHAR(50) ,
  37. DataInfo BIGINT ,
  38. RowsInfo BIGINT ,
  39. Spaceperrow AS ( CASE RowsInfo
  40. WHEN 0 THEN 0
  41. ELSE DataInfo / RowsInfo
  42. END ) PERSISTED
  43. )
  44.  
  45. --插入数据到临时表
  46. INSERT INTO [#tmptb]
  47. ( [TableName] ,
  48. [DataInfo] ,
  49. [RowsInfo]
  50. )
  51. SELECT [nameinfo] ,
  52. CAST(REPLACE([datainfo], 'KB', '') AS BIGINT) AS 'datainfo' ,
  53. [rowsinfo]
  54. FROM #tablespaceinfo
  55. ORDER BY CAST(REPLACE(reserved, 'KB', '') AS INT) DESC
  56.  
  57. --汇总记录
  58. SELECT [tbspinfo].* ,
  59. [tmptb].[Spaceperrow] AS '每行记录大概占用空间(KB)'
  60. FROM [#tablespaceinfo] AS tbspinfo ,
  61. [#tmptb] AS tmptb
  62. WHERE [tbspinfo].[nameinfo] = [tmptb].[TableName]
  63. ORDER BY CAST(REPLACE([tbspinfo].[reserved], 'KB', '') AS INT) DESC
  64.  
  65. DROP TABLE [#tablespaceinfo]
  66. DROP TABLE [#tmptb]

注意:使用之前要计算哪个数据库的记录,请先USE一下要统计表记录数的那个数据库!!


工作中遇到的问题

可以说我在实际的工作中 ,在100个问题中有90个都会先用到这个脚本

这里举一个我本人工作中遇到的一些问题

问题一:

程序员反映数据库查询慢,5分钟还没有出结果

我先用这个脚本看一下这个表有多少记录,大概有1000w+条数据

然后在本地的SSMS里查询,确实也是大概4分钟的样子才出来数据,看一下执行计划,发现查询能使用到索引

看一下数据库的压力,并不是很大,我跟会不会跟数据量有关系呢?

程序员要查询的结果条数是500条数据,业务表是做了分区的,按道理应该不会慢成这样。。。

后来我再看一下共享出来的那个脚本的结果,发现查询的结果大小=每行记录的大小*记录数

要查询大概500MB的数据,再传到客户端,不慢才怪

为什麽查询出的结果这么大?

主要是有几个大字段:例如:二进制字段和NVARCHAR(MAX)

并且时间范围跨度比较大

马上叫程序员改一下查询的语句,由于是entity framework程序,怎麽改我就不太清楚了,主要是不必要的字段就不查询处理并且缩小时间范围

问题二:

还有一些问题也需要知道每行记录的大小,例如删除表的历史数据,QA说要保留2013年之前的数据,你需要查出保留的数据或者2013年之前的数据占用多少G空间

再结合当前服务器的磁盘可用空间,来评估删除的数据是否太多或者太少

那么流程是:先查出2013年之前的记录数有多少-》计算表的总记录数-》计算表的大小-》手工计算每行记录的大小-》乘以2013年之前的记录数

如果没有每行记录数这个字段,那么你手工计算,是不是效率就变慢了???

问题三:

导数据的时候,你想知道当前已经导了多少数据了,那么执行一下这个脚本就可以了,这个脚本基本不会被阻塞

很快就能查出结果


脚本的计算方法

方法一

实际上利用的就是数据行大小的信息除以记录数

  1. CASE RowsInfo
  2. WHEN 0 THEN 0
  3. ELSE DataInfo / RowsInfo

 方法二

  1. SELECT AVG(DATALENGTH(C0))+AVG(DATALENGTH(C1))+AVG(DATALENGTH(C2))+AVG(DATALENGTH(C3)) FROM [dbo].[TB106]

说一下两种方法的区别

第一种方法是效率高,当表有上亿条记录的时候,如果你使用第二种方法执行AVG(DATALENGTH(C0))是很慢的,因为SQLSERVER要统计字段大小信息

可能十几分钟都出不来结果

当然,第一种方法也有一些缺陷,就是当表的记录数少的时候,统计出来的每行记录占用空间是不准确的

因为datainfo这个值是以数据页大小为单位的,因为就算表只有一条记录,那么也会占用一个数据页(8KB)

那么当8KB/1 =8KB,一条记录肯定不会是8KB大小的,所以记录少的时候会不准确

但是当记录数很多的时候,就准确了

看一下TB106这个表统计出来的结果值

  1. SELECT AVG(DATALENGTH(C0))+AVG(DATALENGTH(C1))+AVG(DATALENGTH(C2))+AVG(DATALENGTH(C3)) FROM [dbo].[TB106]

可以看到是比较准确的

注意:

无论方法一还是方法二都不包括索引所占用的空间 !!


总结

大家平时一定会想:究竟DBA有什么作用?

在这里就给大家一个例子了,在工作中,程序员是不会关心他要查询的数据的大小的,他不管三七二十一只要把数据select出来就行了,然后收工

DBA这里就要解决数据查询不出来的问题,一般的程序员觉得查询500条数据是很少的,根本不会关心表设计,表的字段的数据类型

当工作越来越多,开发任务越来越重的时候更是这样

 
所以本人觉得DBA这个角色还是比较重要的o(∩_∩)o 
 
如有不对的地方,欢迎大家拍砖o(∩_∩)o 
 
 
2014-7-7 脚本bug修复
由于算出来每行记录的精度有问题,我又对脚本的精度进行了改进
  1. CREATE TABLE #tablespaceinfo
  2. (
  3. nameinfo VARCHAR(500) ,
  4. rowsinfo BIGINT ,
  5. reserved VARCHAR(20) ,
  6. datainfo VARCHAR(20) ,
  7. index_size VARCHAR(20) ,
  8. unused VARCHAR(20)
  9. )
  10.  
  11. DECLARE @tablename VARCHAR(255);
  12.  
  13. DECLARE Info_cursor CURSOR
  14. FOR
  15. SELECT '[' + [name] + ']'
  16. FROM sys.tables
  17. WHERE type = 'U';
  18.  
  19. OPEN Info_cursor
  20. FETCH NEXT FROM Info_cursor INTO @tablename
  21.  
  22. WHILE @@FETCH_STATUS = 0
  23. BEGIN
  24. INSERT INTO #tablespaceinfo
  25. EXEC sp_spaceused @tablename
  26. FETCH NEXT FROM Info_cursor
  27. INTO @tablename
  28. END
  29.  
  30. CLOSE Info_cursor
  31. DEALLOCATE Info_cursor
  32.  
  33. --创建临时表
  34. CREATE TABLE [#tmptb]
  35. (
  36. TableName VARCHAR(50) ,
  37. DataInfo BIGINT ,
  38. RowsInfo BIGINT ,
  39. Spaceperrow AS ( CASE RowsInfo
  40. WHEN 0 THEN 0
  41. ELSE CAST(DataInfo AS decimal(18,2))/CAST(RowsInfo AS decimal(18,2))
  42. END ) PERSISTED
  43. )
  44.  
  45. --插入数据到临时表
  46. INSERT INTO [#tmptb]
  47. ( [TableName] ,
  48. [DataInfo] ,
  49. [RowsInfo]
  50. )
  51. SELECT [nameinfo] ,
  52. CAST(REPLACE([datainfo], 'KB', '') AS BIGINT) AS 'datainfo' ,
  53. [rowsinfo]
  54. FROM #tablespaceinfo
  55. ORDER BY CAST(REPLACE(reserved, 'KB', '') AS INT) DESC
  56.  
  57. --汇总记录
  58. SELECT [tbspinfo].* ,
  59. [tmptb].[Spaceperrow] AS '每行记录大概占用空间(KB)'
  60. FROM [#tablespaceinfo] AS tbspinfo ,
  61. [#tmptb] AS tmptb
  62. WHERE [tbspinfo].[nameinfo] = [tmptb].[TableName]
  63. ORDER BY CAST(REPLACE([tbspinfo].[reserved], 'KB', '') AS INT) DESC
  64.  
  65. DROP TABLE [#tablespaceinfo]
  66. DROP TABLE [#tmptb]

适合于不是默认架构dba的版本

  1. --数据分析适合不是默认架构dbo
  2. --在它的基础上做了些修改,适合不同的框架
  3. IF OBJECT_ID('tempdb..#TablesSizes') IS NOT NULL
  4. DROP TABLE #TablesSizes
  5.  
  6. CREATE TABLE #TablesSizes
  7. (
  8. TableName sysname ,
  9. Rows BIGINT ,
  10. reserved VARCHAR() ,
  11. data VARCHAR() ,
  12. index_size VARCHAR() ,
  13. unused VARCHAR()
  14. )
  15.  
  16. DECLARE @sql VARCHAR(MAX)
  17. SELECT @sql = COALESCE(@sql, '') + '
  18. INSERT INTO #TablesSizes execute sp_spaceused ''' + QUOTENAME(TABLE_SCHEMA,
  19. '[]') + '.'
  20. + QUOTENAME(Table_Name, '[]') + ''''
  21. FROM INFORMATION_SCHEMA.TABLES
  22. WHERE TABLE_TYPE = 'BASE TABLE'
  23.  
  24. PRINT ( @SQL )
  25. EXECUTE (@SQL)
  26.  
  27. SELECT *
  28. FROM #TablesSizes
  29. ORDER BY Rows DESC

MySQL版本

  1. --查看每个表大小和记录数
  2. SELECT table_name,TABLE_ROWS,ENGINE, CONCAT(ROUND(DATA_LENGTH//,),'MB') AS DATA_LENGTH,
  3. CONCAT(ROUND(INDEX_LENGTH//,),'MB') AS INDEX_LENGTH,
  4. CONCAT(ROUND((INDEX_LENGTH+DATA_LENGTH)//,),'MB') AS TOTAL_DATASIZE
  5. FROM information_schema.TABLES WHERE table_schema='zabbix' ORDER BY TOTAL_DATASIZE DESC

本文版权归作者所有,未经作者同意不得转载。

分享一个SQLSERVER脚本(计算数据库中各个表的数据量和每行记录所占用空间)的更多相关文章

  1. SQLSERVER:计算数据库中各个表的数据量和每行记录所占用空间

    转:http://www.cnblogs.com/lyhabc/p/3828496.html CREATE TABLE #tablespaceinfo ( nameinfo ) , rowsinfo ...

  2. (转)分享一个SQLSERVER脚本(计算数据库中各个表的数据量和每行记录所占用空间)

    分享一个SQLSERVER脚本(计算数据库中各个表的数据量和每行记录所占用空间) 很多时候我们都需要计算数据库中各个表的数据量和每行记录所占用空间 这里共享一个脚本 CREATE TABLE #tab ...

  3. SQL查看数据库中每张表的数据量和总数据量

    查看所有表对应的数据量 SELECT a.name AS 表名, MAX(b.rows) AS 记录条数 FROM sys.sysobjects AS a INNER JOIN sys.sysinde ...

  4. mysql 查看某个数据库中所有表的数据量

    1.登录mysql 2.使用命令:use information_schema; 3.使用命令:select table_name,table_rows from tables where TABLE ...

  5. 分享一个SQLSERVER脚本

    原文:分享一个SQLSERVER脚本 分享一个SQLSERVER脚本 很多时候我们都需要计算数据库中各个表的数据量很每行记录所占用空间 这里共享一个脚本 CREATE TABLE #tablespac ...

  6. SQLServer清空数据库中所有表的数据

    今早同事跟进客户反馈的问题时,提了个要求,要求清空数据库中所有表的数据. 记得之前用游标遍历所有的表名 + exec 动态语句 truncate table 表名 实现过这个功能. 网上搜了下,有更简 ...

  7. 快速查看SQL Server 中各表的数据量以及占用空间大小

    快速查看SQL Server 中各表的数据量以及占用空间大小. CREATE TABLE #T (NAME nvarchar(100),ROWS char(20),reserved varchar(1 ...

  8. SQL SERVER 将一个数据库中的表和数据复制到另一个数据库中

    第一种情况:将A数据库.dbo.A表的数据追加到B数据库.dbo.B表中 (条件:此时B数据库中已创建好了B表) insert into B数据库.dbo.B表 select * from A数据库. ...

  9. SQLserver删除某数据库中所有表 方法 二

    方便删除数据库中所有的数据表,清空数据库,有些有约束,不能直接delete,需要先删除库中的约束,代码如下: --删除所有约束DECLARE c1 cursor for select 'alter t ...

随机推荐

  1. Asp.Net WebApi核心对象解析(下篇)

    在接着写Asp.Net WebApi核心对象解析(下篇)之前,还是一如既往的扯扯淡,元旦刚过,整个人还是处于晕的状态,一大早就来处理系统BUG,简直是坑爹(好在没让我元旦赶过来该BUG),队友挖的坑, ...

  2. 【社工】NodeJS 应用仓库钓鱼

    前言 城堡总是从内部攻破的.再强大的系统,也得通过人来控制.如果将入侵直接从人这个环节发起,那么再坚固的防线,也都成为摆设. 下面分享一个例子,利用应用仓库,渗透到开发人员的系统中. 应用仓库 应用仓 ...

  3. RPC 使用中的一些注意点

    最近线上碰到一点小问题,分析其原因发现是出在对 RPC 使用上的一些细节掌握不够清晰导致.很多时候我们做业务开发会把 RPC 当作黑盒机制来使用,但若不对黑盒的工作原理有个基本掌握,也容易犯一些误用的 ...

  4. ASP.NET Core的路由[4]:来认识一下实现路由的RouterMiddleware中间件

    虽然ASP.NET Core应用的路由是通过RouterMiddleware这个中间件来完成的,但是具体的路由解析功能都落在指定的Router对象上,不过我们依然有必要以代码实现的角度来介绍一下这个中 ...

  5. canvas与html5实现视频截图功能

    这段时间一直在研究canvas,突发奇想想做一个可以截屏视频的功能,然后把图片拉去做表情包,哈哈哈哈哈哈~~ 制作方法: 1.在页面中加载视频 在使用canvas制作这个截图功能时,首先必须保证页面上 ...

  6. Javacript实现字典结构

    字典是一种用[键,值]形式存储元素的数据结构.也称作映射,ECMAScript6中,原生用Map实现了字典结构. 下面代码是尝试用JS的Object对象来模拟实现一个字典结构. <script& ...

  7. Git分布式版本控制教程

    Git分布式版本控制Git 安装配置Linux&Unix平台 Debian/Ubuntu $ apt-get install git Fedora $ ) $ dnf and later) G ...

  8. H3 BPM:为石化企业提供一个不一样的全停大修平台

    H3 BPM大型炼化企业装置全停检修管理平台(简称"全停大修")结合国际化的流程管理理念.成熟的系统技术架构.优秀的行业解决方案,为石油化工行业全停大修提供了卓越的信息化管理方案, ...

  9. nginx安装

    nginx工作模式-->1个master+n个worker进程 安装nginx的所需pcre库[用于支持rewrite模块] 下载软件方法: 搜索 pcre  download 网址:http: ...

  10. Prometheus 系统监控方案 一

    最近一直在折腾时序类型的数据库,经过一段时间项目应用,觉得十分不错.而Prometheus又是刚刚推出不久的开源方案,中文资料较少,所以打算写一系列应用的实践过程分享一下. Prometheus 是什 ...