T-SQL——数据透视和逆透视
0. 测试数据集及说明
0.1 准备测试数据
【测试数据1】
WITH Temp1 AS
(
SELECT '张三' AS Name, '语文' AS Subject, 100 AS Scores
UNION ALL
SELECT '张三' AS Name, '数学' AS Subject, 90 AS Scores
UNION ALL
SELECT '张三' AS Name, '英语' AS Subject, 80 AS Scores
UNION ALL
SELECT '李四' AS Name, '语文' AS Subject, 90 AS Scores
UNION ALL
SELECT '李四' AS Name, '数学' AS Subject, 70 AS Scores
UNION ALL
SELECT '李四' AS Name, '英语' AS Subject, 60 AS Scores
)
SELECT * FROM Temp1
结果：
Name Subject Scores
---- ------- -----------
张三 语文 100
张三 数学 90
张三 英语 80
李四 语文 90
李四 数学 70
李四 英语 60
【测试数据2】
WITH Temp2 AS
(
SELECT '张三' AS Name, '八年级二班' AS Class, NULL AS 英语, NULL AS 数学, 100 AS 语文
UNION ALL
SELECT '李四' AS Name, '三年级二班' AS Class, 60 AS 英语, 70 AS 数学, 90 AS 语文
UNION ALL
SELECT '张三' AS Name, '三年级二班' AS Class, 80 AS 英语, 90 AS 数学, NULL AS 语文
)
SELECT * FROM Temp2
结果：
Name Class 英语 数学 语文
---- ---------- ----------- ----------- -----------
张三 八年级二班 NULL NULL 100
李四 三年级二班 60 70 90
张三 三年级二班 80 90 NULL
0.2 对一维表和二维表理解
测试数据1：
- 称为：一维表
- 特征：每条记录的特定字段可能出现值重复
- 一维表是数据记录的最原始的样子。
- 一维表包含一列字段表示每条记录的属性。比如说测试数据1中的Subject列
- 一维表的字段名称即表示该字段下的数据的实际含义。比如说测试数据1中的Scores列下的数据表示成绩
测试数据2：
- 称为：二维表
- 特征：列字段名称就是种类信息，每条记录的
- 二维表则是展示出分类汇总后的数据信息
- 二维表若无说明，是无法明确数据含义的，比如测试数据2，若是不告诉你这是成绩，你是无法理解数据值的真实含义的
一维表和二维表对比：
按照数据库第一范式：一个实体中不应该包含重复类型的特性，对应到表就是：类似的值不能在一个表的多个列上重复
- 创建表应该按照一维表的格式创建，记录产生信息。
- 若是建表的时候创建为二维表，将所有的种类做为字段，则可能出现表的字段非常的多，当种类有所添加的时候，后续还要继续添加字段。
一维表方便存储数据，同样也是便于后期查询
二维表可以直观的表现数据的信息，是用于展示的报表和报告
1. 透视转换
1.1 使用标准SQL进行数据透视
--注意这里实现业务场景，在CASE WHEN语句中
--我们应该使用默认的ELSE NULL ,而不是ELSE 0。没有数据是没有数据，0是0
SELECT Name,
SUM(CASE WHEN Subject ='语文' THEN Temp1.Scores ElSE NULL END) AS 语文 ,
SUM(CASE WHEN Subject ='数学' THEN Temp1.Scores ELSE NULL END) AS 数学 ,
SUM(CASE WHEN Subject ='英语' THEN Temp1.Scores ELSE NULL END) AS 英语
FROM Temp1 GROUP BY Temp1.Name
结果：
Name 英语 数学 语文
---- ----------- ----------- -----------
李四 60 70 90
张三 80 90 100
【说明】：使用标准的SQL语句进行数据的透视转换，我们可以直白的发现透视转换，是分为三个阶段的：
分组-->扩展-->聚合
以上例说明：
- 分组：我们按照Name字段进行分组，使每一个用户产生一条记录
- 使用GROUP BY实现分组
- 扩展：扩展是对列的扩展，使用case语句， 对三个科目（语文，数学，英语）扩展为列
- 使用SELECT 配合CASE WHEN实现
- 聚合：按照分组依据进行聚合，这里按照Name字段分组，使用SUM函数对Scores字段聚合
- 使用任一聚合函数聚合
对照上述三个逻辑步骤：
- Name字段：分组依据字段（分组元素）。指定要用于透视结果表的左侧列，也称为设置键
- Subject字段：待扩展字段（待扩展元素）。透视结果表中的列头所在的列，也称为透视键，"语文，数学，英语"为目标列的列名的集合，又称为透视输出列
- Scores字段：聚合字段（聚合元素）。透视结果表中的主要显示的数据就是来自这个字段的值，又称为透视值
1.2 使用T-SQL中pivot函数进行数据透视
【函数】：pivot
【作用】：行转列函数，SQL Server2005
【语法】：pivot(任一聚合函数 for 需转列的值所在列名 in (需转为列名的值))
【用法】：select …from table pivot(……) as T
【示例1】：
现有一张成绩表，表中记录了每个学生每科目的成绩，如下。
现在需要将科目作为列头，统计每个学生的成绩。
WITH Temp1 AS
(
SELECT '张三' AS Name, '语文' AS Subject, 100 AS Scores
UNION ALL
SELECT '张三' AS Name, '数学' AS Subject, 90 AS Scores
UNION ALL
SELECT '张三' AS Name, '英语' AS Subject, 80 AS Scores
UNION ALL
SELECT '李四' AS Name, '语文' AS Subject, 90 AS Scores
UNION ALL
SELECT '李四' AS Name, '数学' AS Subject, 70 AS Scores
UNION ALL
SELECT '李四' AS Name, '英语' AS Subject, 60 AS Scores
)
SELECT T.Name, T.英语, T.数学, T.语文 FROM Temp1 PIVOT(SUM(Scores) FOR [Subject] IN (语文,数学,英语)) T;
结果：
Name 英语 数学 语文
---- ----------- ----------- -----------
李四 60 70 90
张三 80 90 100
【注意1】：
我们是按照以下格式：
select …from table pivot(任意聚合函数(聚合字段) for 待扩展字段名 in (待扩展元素集)) as T
使用pivot对table进行数据透视
若是table中的字段既不是聚合字段，又不是待扩展字段，则会默认为pivot函数中的分组依据的字段。
所以使用pivot函数进行数据透视的结果集一般不会是数据库中的原表，而是一个查询出的特定字段的结果集
【注意2】：
若待扩展元素集是非常规标识符，比如说日期或数字开头的其他类型数据，则我们需要使用方括号将每一个待扩展展元素括起。
【示例2】：
现在在测试数据1中添加一个Class字段，使用pivot函数透视数据
WITH Temp1 AS
(
SELECT '张三' AS Name, '语文' AS Subject, 100 AS Scores,'八年级一班' AS Class
UNION ALL
SELECT '张三' AS Name, '数学' AS Subject, 90 AS Scores,'三年级二班' AS Class
UNION ALL
SELECT '张三' AS Name, '英语' AS Subject, 80 AS Scores,'三年级二班' AS Class
UNION ALL
SELECT '李四' AS Name, '语文' AS Subject, 90 AS Scores,'三年级二班' AS Class
UNION ALL
SELECT '李四' AS Name, '数学' AS Subject, 70 AS Scores,'三年级二班' AS Class
UNION ALL
SELECT '李四' AS Name, '英语' AS Subject, 60 AS Scores,'三年级二班' AS Class
)
SELECT T.Name,T.Class, T.英语, T.数学, T.语文 FROM Temp1 PIVOT(SUM(Scores) FOR [Subject] IN (语文,数学,英语)) T;
结果：
Name Class 英语 数学 语文
---- ---------- ----------- ----------- -----------
张三 八年级一班 NULL NULL 100
李四 三年级二班 60 70 90
张三 三年级二班 80 90 NULL
【说明】：结果集Temp1中的class既不是聚合字段，也不是待扩展字段，所以会被默认为是分组依据！
而往往，我们期望的分组依据只要Name字段，
所以一般都是建议不要直接对数据库中的基础表进行透视操作，而是将特定字段查询出来作为一个表结果集，之后在对这个结果集进行透视操作。
1.3 关于 待扩展元素集合获取的方式
2. 逆透视转换
【逆透视】：逆透视转换将来自单个记录中多个列的值扩展为单个列中具有同样值的多个记录，使得非规范的数据集成为较规范的版本。
2.1 使用标准SQL进行数据逆透视
数据的逆透视也是分为三步：请客，斩首，收下当狗
啊唾，不对，应该是是：生成副本-->提取元素-->删除不相干交叉
WITH Temp AS
(
--测试数据集
SELECT '张三' AS Name, '八年级二班' AS Class, NULL AS 英语, NULL AS 数学, 100 AS 语文
UNION ALL
SELECT '李四' AS Name, '三年级二班' AS Class, 60 AS 英语, 70 AS 数学, 90 AS 语文
UNION ALL
SELECT '张三' AS Name, '三年级二班' AS Class, 80 AS 英语, 90 AS 数学, NULL AS 语文
)
,Temp1 AS
(
--为每一行生成副本
--与需要逆透视的列交叉连接获取笛卡尔积
SELECT * FROM Temp CROSS JOIN( VALUES('英语'),('数学'),('语文')) AS T(SubjectName)
--结果
--Name Class 英语 数学 语文 SubjectName
--张三 八年级二班 NULL NULL 100 英语
--张三 八年级二班 NULL NULL 100 数学
--张三 八年级二班 NULL NULL 100 语文
--李四 三年级二班 60 70 90 英语
--李四 三年级二班 60 70 90 数学
--李四 三年级二班 60 70 90 语文
--张三 三年级二班 80 90 NULL 英语
--张三 三年级二班 80 90 NULL 数学
--张三 三年级二班 80 90 NULL 语文
)
,Temp2 AS
(
--当前行SubjectName为英语则取英语列
SELECT Name,Class,Temp1.SubjectName,
CASE Temp1.SubjectName
WHEN '英语' THEN
英语
WHEN '数学' THEN
数学
WHEN '语文' THEN
语文
END AS Scores
FROM Temp1
--结果
--Name Class SubjectName Scores
--张三 八年级二班 英语 NULL
--张三 八年级二班 数学 NULL
--张三 八年级二班 语文 100
--李四 三年级二班 英语 60
--李四 三年级二班 数学 70
--李四 三年级二班 语文 90
--张三 三年级二班 英语 80
--张三 三年级二班 数学 90
--张三 三年级二班 语文 NULL
)
--删除不相关交叉行（排除NULL值行）
SELECT * FROM Temp2 WHERE Temp2.Scores IS NOT NULL
--结果
--Name Class SubjectName Scores
--张三 八年级二班 语文 100
--李四 三年级二班 英语 60
--李四 三年级二班 数学 70
--李四 三年级二班 语文 90
--张三 三年级二班 英语 80
--张三 三年级二班 数学 90
2.2 使用T-SQL中unpivot函数进行数据逆透视
【函数】：unpivot
【作用】：列转行函数，SQL Server2005
【语法】：unpivot(作为属性值列的列名 for 属性名 in (同一属性的列名))
【用法】：select …from table unpivot(……) as T
【示例1】
WITH Temp2 AS
(
SELECT '张三' AS Name, '八年级二班' AS Class, NULL AS 英语, NULL AS 数学, 100 AS 语文
UNION ALL
SELECT '李四' AS Name, '三年级二班' AS Class, 60 AS 英语, 70 AS 数学, 90 AS 语文
UNION ALL
SELECT '张三' AS Name, '三年级二班' AS Class, 80 AS 英语, 90 AS 数学, NULL AS 语文
)
SELECT * FROM Temp2 UNPIVOT(Socore FOR Subject IN(英语, 数学, 语文)) T;
结果：
Name Class Socore Subject
---- ---------- -------- ----------
张三 八年级二班 100 语文
李四 三年级二班 60 英语
李四 三年级二班 70 数学
李四 三年级二班 90 语文
张三 三年级二班 80 英语
张三 三年级二班 90 数学
3. 透视之后再逆透视数据信息减少
上面的示例数据中，将原数据（测试数据1）进行透视操作，变为测试数据2。将测试数据2逆透视结果变回了测试数据1。
这只是巧合而已，因为我们的测试数据1中没有出现相同属性（同一个人相同科目）的多条记录：
比如说，如果李四有两条英语成绩如下：
WITH Temp1 AS
(
SELECT '张三' AS Name, '语文' AS Subject, 100 AS Scores
UNION ALL
SELECT '张三' AS Name, '数学' AS Subject, 90 AS Scores
UNION ALL
SELECT '张三' AS Name, '英语' AS Subject, NULL AS Scores--张三英语成绩没有记录
UNION ALL
SELECT '李四' AS Name, '语文' AS Subject, 90 AS Scores
UNION ALL
SELECT '李四' AS Name, '数学' AS Subject, 70 AS Scores
UNION ALL
SELECT '李四' AS Name, '英语' AS Subject, 60 AS Scores--李四有两条英语成绩
UNION ALL
SELECT '李四' AS Name, '英语' AS Subject, 60 AS Scores--李四有两条英语成绩
)
,Temp2 AS --数据透视
(
SELECT * FROM Temp1 PIVOT(SUM(Scores) FOR Subject IN (语文,数学,英语))AS T
)
SELECT * FROM Temp2 UNPIVOT(Scores FOR Subject IN (语文,数学,英语))AS T
透视结果：
Name 语文 数学 英语
---- ----------- ----------- -----------
李四 90 70 120
张三 100 90 NULL
对透视结果逆透视：
Name Scores Subject
---- ----------- -------------
李四 90 语文
李四 70 数学
李四 120 英语--这里逆透视就无法还原为原始数据（这里就是聚合成一条数据了）
张三 100 语文
张三 90 数学
--张三英语为NULL的记录在原始数据中是存在，而透视再逆透视后则没有了
之前详述了透视包含三个逻辑步骤，分组-->扩展-->聚合。
因为透视包含了聚合，表的信息量减少了，所以在做逆透视无法还原成原始数据。
简单的说：
UNPIVOT 并不完全是 PIVOT 的逆操作。
PIVOT 执行聚合，并将多个可能的行合并为输出中的一行。
UNPIVOT 不重现原始表值表达式的结果，因为行已被合并。
另外，UNPIVOT 输入中的 NULL 值也在输出中消失了。
如果值消失，表明在执行 PIVOT 操作前，输入中可能就已存在原始 NULL 值。
4. 参考
T-SQL——数据透视和逆透视的更多相关文章
- SQL点滴19—T-SQL中的透视和逆透视
原文:SQL点滴19-T-SQL中的透视和逆透视 透视 今天抽一点时间来看看透视和逆透视语句,简单的说就是行列转换.假设一个销售表中存放着产品号,产品折扣,产品价格三个列,每一种产品号可能有多种折扣, ...
- SQL SERVER技术内幕之7 透视与逆透视
1.透视转换 透视数据(pivoting)是一种把数据从行的状态旋转为列的状态的处理,在这个过程中可能须要对值进行聚合. 每个透视转换将涉及三个逻辑处理阶段,每个阶段都有相关的元素:分组阶段处理相关的 ...
- T-SQL中的透视和逆透视
透视 今天抽一点时间来看看透视和逆透视语句,简单的说就是行列转换.假设一个销售表中存放着产品号,产品折扣,产品价格三个列,每一种产品号可能有多种折扣,每一种折扣只对应一个产品价格.下面贴出建表语句和插 ...
- T-SQL基础(7) - 透视，逆透视和分组集
透视转换: use tempdb;if object_id('dbo.Orders', 'U') is not null drop table dbo.Orders;create table dbo. ...
- 《BI那点儿事》数据流转换——逆透视转换
逆透视转换将来自单个记录中多个列的值扩展为单个列中具有同样值的多个记录,使得非规范的数据集成为较规范的版本.例如,每个客户在列出客户名的数据集中各占一行,在该行的各列中显示购买的产品和数量.逆透视转换 ...
- SQL Server进阶（八）查询——开窗函数、四大排名函数、透视数据、逆透视数据
概述 ROW_NUMBER() OVER(PARTITION BY CustId ORDER BY ID DESC) https://www.jb51.net/article/75533.htm 开窗 ...
- PIVOT(透视转换)和UNPIVOT(逆透视转换)
一.原数据状态 二.手动写透视转换1 三.手动写透视转换2 四.PIVOT(透视转换)和UNPIVOT(逆透视转换)详细使用 使用标准SQL进行透视转换和逆视转换 --行列转换 create tabl ...
- UNPIVOT逆透视以及动态逆透视存储过程
前几天一直练习PIVOT透视,还实现了动态透视的存过程<动态透视表>https://www.cnblogs.com/insus/p/10888277.html 今天练习MS SQL Ser ...
- 批量处理sql 数据存入xml类型列
个人记录 需求:当表T1 ItemCode和表T2 ItemName的数据相等时,将表T2所对应的ID和ItemName列的数据分别存入表T1 CAOZUO字段的id元素和text元素的文本中. 下面 ...
随机推荐
- C#异步编程 Task await的理解
async/await是C#5.0中推出的,先上用法: static void Main(string[] args) { Console.WriteLine("-------主线程启动-- ...
- Lambda Expressions and Functional Interfaces: Tips and Best Practices
转载自https://www.baeldung.com/java-8-lambda-expressions-tips 1. Overview Now that Java 8 has reached ...
- 一些Java知识点
1 import java.util.ArrayList; 2 3 public class Main { 4 5 public static void main(String[] args) { 6 ...
- go defer关键字使用规则
defer 用于延迟函数的调用,每次defer都会把一个函数压入栈中,函数返回前再把延迟的函数取出并执行 数据结构 type _defer struct { sp uintptr //函数栈指针 pc ...
- SpringMVC笔记（1）
一.SpringMVC简介 1.1 MVC模型 MVC模型 MVC全名是Model View Controller,是模型(model)- 视图(view)- 控制器(controller)的缩写,是 ...
- Qt 自定义事件
Qt 自定义事件很简单,同其它类库的使用很相似,都是要继承一个类进行扩展.在 Qt 中,你需要继承的类是 QEvent. 继承QEvent类,你需要提供一个QEvent::Type类型的参数,作为自定 ...
- Linux系统的内核编译
<1>给虚拟机分配2048M内存 <2>配置高可用yum源 <3>下载软件 <1>安装内核源码包 根据依赖性提示,安装对应的包 下载并安装软件包(3个) ...
- Java并发之锁升级：无锁->偏向锁->轻量级锁->重量级锁
Java并发之锁升级:无锁->偏向锁->轻量级锁->重量级锁 对象头markword 在lock_bits为01的大前提下,只有当是否偏向锁位值为1的时候,才表明当前对象处于偏向锁定 ...
- Mybatis（三）——全局配置文件
二.properties 三.settings 四.typeAilases 这里不做介绍.
- Spring基于XML方式加载Bean定义信息(又名：Spring IOC源码时序图)-图解