SQL 报表制作和整形
本文章主要介绍制作报表的查询,这些查询通常需要考虑与报表相关的格式设置,还需使用多级聚合。
1.将结果集转置为一行(行转列)
将多行中的值转换为单行中的列。
情景:有一个员工表,统计出一个结果集,显示了每个部门的员工数量,如下图一。现在需要调整输出格式,显示成一行,如图二。
图一
图二
解决方案:使用 case 表达式和 SUM 聚合函数来转置结果集。
使用 case 表达式将行拆分成列,并且标记每行数据是否属于这个部门。然后,由于这里的问题是计算每个部门的员工数量,因此使用 SUM 聚合函数。
select
sum(case DeptNo when 10 then 1 else 0 end) as DeptNo_10,
sum(case DeptNo when 20 then 1 else 0 end) as DeptNo_20,
sum(case DeptNo when 30 then 1 else 0 end) as DeptNo_30
from test.emps;
拆解:
(1)第一步将行转换为列,并标记每行数据属于哪个部门。
(2)第二步是计算每个部门的人数,根据DeptNo分组。第二步属于过渡步骤,熟练了可以直接跳过。
(3)第三步,目标是返回一行数据,所以删除 DeptNo 和 group by 即可。
也可以使用另一种写法,先分组统计出每个部门的人数,然后再行转列。
select
sum(case DeptNo when 10 then cnt else 0 end ) as DeptNo_10 ,
sum(case DeptNo when 20 then cnt else 0 end ) as DeptNo_20 ,
sum(case DeptNo when 30 then cnt else 0 end ) as DeptNo_30
from (
select DeptNo,count(*) cnt from test.emps group by DeptNo) a ;
2.将结果集转置为多行
通过为给定列中每个不同的值都创建一列,也是行转列。不同的是要输出多行。
情景:图一是每个员工及其角色。想让每个角色为一列,每列下面为是该角色的员工名称,如图二。
图一 图二
解决方案:
该情景不同于上一个情景,这次需要返回多行,所以不能按照角色分组然后使用聚合函数。要解决这个问题,必须让每个 角色/员工名 组合是独一无二。可以使用窗函数 row_number() over(partition by 角色 order by 员工名) 给每个组合做编号。然后再使用 case 表达式和聚合函数 Max 对结果进行转置,最后根据窗函数做的编号进行分组。
SELECT
max(case Role when 'PPS' then EName else '' end) as PPS,
Max(case Role when 'PM' then EName else '' end) as PM,
max(case Role when 'BD' then EName else '' end) as BD,
max(case Role when 'CS' then EName else '' end) as CS
from (
select Role,EName, row_number() over(partition by Role order by EName) rn FROM test.emps) a
group by rn
拆解:
(1)图一是按照上个解决方案查询出的结果。虽然给每个角色显示了每一列,也返回了多行,但是中间存在间隙。所以不能直接转置,需要先给每个 角色/员工名 组合做编号,如图二。
图一 图二
(2)现在根据上述结果集进行转置。
SELECT rn,
case Role when 'PPS' then EName else '' end as PPS,
case Role when 'PM' then EName else '' end as PM,
case Role when 'BD' then EName else '' end as BD,
case Role when 'CS' then EName else '' end as CS
from (
select Role,EName, row_number() over(partition by Role order by EName) rn FROM test.emps) a;
(3)最后要做的就是删除空值,消除间隙。只需要按照编号 rn 分组然后使用 MAX 聚合函数即可解决。
SELECT rn,
max(case Role when 'PPS' then EName else '' end) as PPS,
Max(case Role when 'PM' then EName else '' end) as PM,
max(case Role when 'BD' then EName else '' end) as BD,
max(case Role when 'CS' then EName else '' end) as CS
from (
select Role,EName, row_number() over(partition by Role order by EName) rn FROM test.emps) a
group by rn
3.对结果集进行逆转置(列转行)
情景:将第一个情景中的结果集转换为多行。
转换为
解决方案:需要一个透视表,然后使用笛卡尔积。
需要事先知道转换为行的行数,就是列数。生成一个该行数的透视表,然后进行关联。再使用 case 表达式选择其中一列。
这里生成透视表使用递归生成,也可以从员工表查询去重部门编号的结果集作为透视表。
with recursive t3 as
(
select 1 as id
union all
select id+1 as id from t3
where id < 3
) select id*10 as DeptNo,
case id
when 1 then DeptNo_10
when 2 then DeptNo_20
when 3 then DeptNo_30
end as Count
from t3
join deptcounts a ;
4.将结果集逆转置为一列
将查询返回的所有列都放在一列中,并返回它们。
情景:返回10号部门所有员工的名字、角色和薪水,并将这三个值放在一列中。并在员工之间添加一行。如下:
解决方案:由结果可以看出,每个员工需要返回四行,由此我们需要一张包含四行数据的透视表(使用 CTE)进行笛卡尔积。然后使用 case 表达式将三列转换为一列。
with recursive t4 as
(
select 1 as id
union all
select id +1 as id from t4
where id < 4
) /*
select t4.id,a.EName,a.SAL,a.Role from test.emps a
join t4
where a.DeptNo = 10
order by Ename ;
*/ select
case t4.id
when 1 then EName
when 2 then Role
when 3 then SAL
when 4 then ''
end as EMPS
from test.emps a
join t4
where a.DeptNo = 10
order by Ename
5.消除结果集中的重复值
在制作报表时,出现多行的同一列的值相同,需要这个列值只显示一次。
情景:从员工表返回部门编号和员工名字并按部门编号分组,对于每个部门编号只需显示一次。如下:
解决方案:使用窗函数 Lag over 返回当前数据前一行的部门编号,并与当前数据的部门编号进行比较。如果相同就显示空值,即与前一行数据属于同一部门;如果不同就显示当前数据的部门编号,即当前数据是下一个部门数据的第一条数据。
SELECT case when lag(DeptNo) over(order by DeptNo) = DeptNo then '' else DeptNo end as DeptNo,EName FROM test.emps;
6.转置结果集以简化涉及多行的计算
要执行的计算涉及多行的数据,为简化工作,你想要将这些行转置为列,这样你需要的所有数据都会出现在同一行中。
情景:薪水总额最高的部门是10号,如图一。想要计算20号部门和30号部门的薪水总额分别比10号部门少多少。最终结果如图二:
图一 图二
解决方案:通过 SUM 聚合函数和 Case 表达式,先将各部门薪水总额转置成一行,然后作为子结果集进行运算。
select DeptNo_10-DeptNo_20 as diff_20_10,DeptNo_10-DeptNo_30 as diff_30_10
from (
select
sum(case DeptNo when 10 then SAL end) as DeptNo_10,
sum(case DeptNo when 20 then SAL end) as DeptNo_20,
sum(case DeptNo when 30 then SAL end) as DeptNo_30
from test.emps ) a
7.创建尺寸固定的数据桶
情景:基于员工表中的员工进行分,每组包含5位员工。最终结果集如下图:
解决方案:主要要解决的问题是将数据分组,所以要给数据编号,然后划分组。
使用排名函数 row_number 进行排名,然后执行除法运算并将商向上取整,最后的值既是组号。
SELECT row_number() over() 排名,
row_number() over() / 5.0 商,
ceil(row_number() over() / 5.0) 组号,EName FROM test.emps;
8.创建预定数量的桶数
将数据划分到数量固定的几个桶中。这是一种组织分类数据的常见方式,因为在很多分析中,将一个集合分成多个规模相同的集合是第一步。
情景:将员工表中的数据划分到3个组内。如下:
解决方案:
1.使用窗函数 ntile ,ntile 会将一个集合划分到指定数量的桶中。如果无法均分,就将多出来的元素放到前面的捅中。
SELECT EName,ntile(3) over() 组号 FROM test.emps;
2.另一种方法是,对数据进行分组。按顺序将数据放到三个桶中,先将数据编号,然后取余数,余数即组号。最后按照组号排序。
SELECT EName,((row_number() over()) % 3 ) + 1 组号,row_number() over() 编号,(row_number() over()) % 3 余数 FROM test.emps order by 组号
注意:根据上一个情景和本次情景找到规律。将一个集合划分到固定尺寸的组中时使用求商数,将集合划分到固定组数时使用求余数。
9.创建水平直方图
情景:创建沿水平方向延伸的直方图。以水平直方图的方式显示每个角色的员工数量,在直方图中每个星号表示一个员工。
解决方案:方案的关键是,将统计后的数字用 * 字符的形式展示。可以使用字符串函数 lpad 填充生成对应数量的字符串。
SELECT Role,lpad('*',count(*),'*') 数量 FROM test.emps group by Role;
10.创建垂直直方图
情景:以垂直直方图的方式显示每个部门的员工数量,如下:
解决方案:从最终结果集看出,首先需要行转列,然后替换字符串。最关键的是需要是按照部门编号分区分组编号,再根据这个编号分组去除空值。
select rn,max(Dept10) Dept10Count,max(Dept20) Dept20Count,max(Dept30) Dept30Count
from (
SELECT row_number() over(partition by DeptNo) rn,
case DeptNo when 10 then '*' else '' end as Dept10,
case DeptNo when 20 then '*' else '' end as Dept20,
case DeptNo when 30 then '*' else '' end as Dept30
FROM test.emps order by DeptNo ) a group by rn order by rn desc
分拆:
(1)行转列,且替换字符串:
SELECT
case DeptNo when 10 then '*' else '' end as Dept10,
case DeptNo when 20 then '*' else '' end as Dept20,
case DeptNo when 30 then '*' else '' end as Dept30
FROM test.emps order by DeptNo
(2)因为需要去除空值,把 Dept20 和 Dept30 的数据移上去。使用窗函数 row_number ,并且分组。
select rn,max(Dept10) Dept10Count,max(Dept20) Dept20Count,max(Dept30) Dept30Count
from (
SELECT row_number() over(partition by DeptNo) rn,
case DeptNo when 10 then '*' else '' end as Dept10,
case DeptNo when 20 then '*' else '' end as Dept20,
case DeptNo when 30 then '*' else '' end as Dept30
FROM test.emps order by DeptNo ) a group by rn
(3)最后根据编号倒序排序即可完成。
select rn,max(Dept10) Dept10Count,max(Dept20) Dept20Count,max(Dept30) Dept30Count
from (
SELECT row_number() over(partition by DeptNo) rn,
case DeptNo when 10 then '*' else '' end as Dept10,
case DeptNo when 20 then '*' else '' end as Dept20,
case DeptNo when 30 then '*' else '' end as Dept30
FROM test.emps order by DeptNo ) a group by rn order by rn desc
11.返回未被作用分组依据的列
返回未包含在 Group By 子句中的列,标准SQL是不允许的。因为未被作用分组依据的列在各行中不是唯一的。
情景:找出各部门中薪水最高和最低的员工,以及每个角色中薪水最高和最低的员工。并显示每个员工的名字、部门、角色和薪水。如下:
解决方案:使用窗函数 max over 和 min over 返回相应部门和角色的最高和最低薪水作为子结果集。然后只保留等于这些薪水的员工。
select Ename,DeptNo,Role,SAL,
case SAL when max_by_DeptNo then '部门最高'
when min_by_DeptNo then '部门最低'
end '部门薪水',
case SAL when max_by_Role then '角色最高'
when min_by_Role then '角色最低'
end '角色薪水'
from (
SELECT Ename,DeptNo,Role,SAL,
max(SAL) over(partition by DeptNo) max_by_DeptNo,
min(SAL) over(partition by DeptNo) min_by_DeptNo,
max(SAL) over(partition by Role) max_by_Role,
min(SAL) over(partition by Role) as min_by_Role
FROM test.emps ) a
where SAL in(max_by_DeptNo,min_by_DeptNo,max_by_Role,min_by_Role) ;
保留相应薪水员工使用了 in 查询 where SAL in(max_by_DeptNo,min_by_DeptNo,max_by_Role,min_by_Role) 。
12.计算简单的小计
返回一个结果集,其中包含小计(聚合分组的特定列)和总计(聚合整张表的特定列)。
情景:返回每种角色的薪水总额,以及整张表的所有薪水总额。
解决方案:可以使用 group by 子句的 rollup 扩展。rollup 表示汇总。
SELECT COALESCE(Role,'总计') 角色,sum(SAL) 薪水 FROM test.emps group by Role with rollup;
13.计算各种可能的小计
情景:找出不同部门、角色、部门/角色组合的薪水小计,同时显示整个员工表的薪水总计。
解决方案:使用 group by 子句的 cube 扩展,以及 grouping 函数(MySQL 不支持,这里使用 SqlServer 演示)。
select * from (
SELECT
case grouping([DeptNo]) when 0 then [DeptNo] else '全部' end as 部门,
case grouping([Role]) when 0 then [Role] else '全部' end as 角色,
sum(SAL) 薪水总额
FROM [yesmro_db].[dbo].[Emps] group by [DeptNo],[Role] with cube ) a
order by 部门,角色
......
未完待续
SQL 报表制作和整形的更多相关文章
- 11月16日《奥威Power-BI基于SQL的存储过程及自定义SQL脚本制作报表》腾讯课堂开课啦
上周的课程<奥威Power-BI vs微软Power BI>带同学们全面认识了两个Power-BI的使用情况,同学们已经迫不及待想知道这周的学习内容了吧!这周的课程关键词—— ...
- 11月30日《奥威Power-BI智能分析报表制作方法》腾讯课堂开课啦
这么快一周就过去了,奥威公开课又要与大家见面咯,上节课老师教的三种报表集成方法你们都掌握了吗?大家都知道,学习的结果在于实际应用,想要熟练掌握新内容的要点就在于去应用它.正是基于这一要点,每一期的课程 ...
- 第二篇:Power BI数据可视化之基于Web数据的报表制作(经典级示例)
前言 报表制作流程的第一步显然是从各个数据源导入数据,Power BI能从很多种数据源导入数据:如Excel,CSV,XML,以及各类数据库(SQL Server,Oracle,My SQL等),两大 ...
- iReport 4.1 报表制作,子报表,实例解析
开发使用步骤(iReport 4.1.1) (个人总结,如有问题请留言,另外知道table控件用法的给我留言或者发邮件谢谢.Email:jiazx0107@163.com) 目录 1. 开发 ...
- rpt水晶报表制作过程
原文:rpt水晶报表制作过程 最近公司安排一个以前的项目,里面需要用到水晶报表,由于原来做这个项目的同事离职,所在公司的同事报表做成了rdlc类型的,而这类报表在加载的时候很难动态的从数据库加载数据, ...
- SQL报表(Report Builder)里面的几个常见问题(持续更新)
一 SQL报表常常会遇到在表格中的相除,如果分母为零,一般会显示错误号,我们可以这么处理:(加上是A/B) ,, B) 但是我们不能这么写: ,,A/B) //我们不能这么写,会产生BUG,至于什么B ...
- 推荐6款常用的Java开源报表制作工具
JasperReports是一个基于Java的开源报表工具,它可以在Java环境下像其它IDE报表工具一样来制作报表.JasperReports 支持PDF.HTML.XLS.CSV和XML文件输出格 ...
- 汽车4S店经验指标完成情况报表制作分享
集团公司一般为了加强下属的经营管理,以及项经营指标完情况,需要制定一些报表.我们平时也经常遇到这种情况,而这些报表要包括什么内容呢?该怎么制作呢?用什么制作呢?今天小编就以4s店为例,分享给大家一个报 ...
- 《奥威Power-BI智能分析报表制作方法》精彩回顾
年的最后一个月,一年又快过去.工作和学习都不能耽误,本周三奥威公开课又如约与大家见面咯!不知老师教的图文报表在课后你们都有练习吗?趁热打铁,我们现在再次来温习一下吧. 本期分享的内容:<奥威Po ...
随机推荐
- 使用SSH连接解决git报错:fatal: unable to access 'https://github.com/xxx/xxx.github.io.git/': Proxy CONNECT aborted
TL;DRs 这个错误的原因和HTTPS的代理配置有关,使用SSH方式连接可以避免这一问题 最近git pull和push的时候总是报错 fatal: unable to access 'https: ...
- Docker 12 数据卷
参考源 https://www.bilibili.com/video/BV1og4y1q7M4?spm_id_from=333.999.0.0 https://www.bilibili.com/vid ...
- 记录Java类型推断关键字var的一种特殊用法
关于Java的var类型推断,有一种特殊用法,如下: 没有var类型之前声明一个匿名类对象,并调用它的方法. Object obj = new Object() { public void test( ...
- 微服务性能分析|Pyroscope 集合 Spring Cloud Pig 的实践分享
随着微服务体系在生产环境落地,也会伴随着一些问题出现,比如流量过大造成某个微服务应用程序的性能瓶颈.CPU利用率高.或内存泄漏等问题.要找到问题的根本原因,我们通常都会通过日志.进程再结合代码去判断根 ...
- 057_末晨曦Vue技术_处理边界情况之强制更新($forceUpdate)与通过 v-once 创建低开销的静态组件
强制更新($forceUpdate) 点击打开视频讲解更加详细 在vue中,如果data中有基本数据类型变量:age,修改他,页面会自动更新. 但如果data中的变量为数组或对象(引用数据类型),我们 ...
- SecureCRT 和 Xshell 连接ENSP 教程
前言:很多人问我说想尝试使用 CRT和Xshell连接 ENSP的某台设备,以模拟现网中的工作状态,所以出了这篇随笔. ENSP版本: Xshell 连接教程 Xshell 7 评估版(其他版本没测试 ...
- Vue 监听器和计算属性到底有什么不同?
各自的适用场景 计算属性临时快照 官方文档对于计算属性提到了一个重要的点子--"临时快照"(可能就是前面说的计算属性缓存),每当源状态发生变化时,就会创建一个新的快照. 有时候创建 ...
- smile——Java机器学习引擎
资源 https://haifengl.github.io/ https://github.com/haifengl/smile 介绍 Smile(统计机器智能和学习引擎)是一个基于Java和Scal ...
- Java方法总结
什么是方法 何谓方法 就是一个方法只完成一个功能,这样利于后期的扩展 例子: public static void main(String[] args) { System.out.printl ...
- C语言小游戏:贪吃蛇
#include <graphics.h> #include <conio.h> #include <stdio.h> #define WIDTH 40 //设置宽 ...