实例演示 C# 中 Dictionary<Key, Value> 的检索速度远远大于 hobbyList.Where(c => c.UserId == user.Id)
前言
我们知道,有时候在一些项目中,为了性能,往往会一次性加载很多条记录来进行循环处理(备注:而非列表呈现)。比如:从数据库中加载 10000 个用户,并且每个用户包含了 20 个“爱好”,在 WinForm 界面我们需要用进度条的方式实时显示每个用户处理的进度,这时候当然是一次性加载很多条记录来进行循环处理更加快速。如下图:
问题和解决方案
通常,我们会先 foreach 从数据库中加载的用户集合,然后从“爱好”集合中筛选出某个用户的所有爱好来进行处理。比如如下代码:
foreach (var userItem in userList)
{
List<Hobby> tempHobbyList = hobbyList.Where(c => c.UserId == userItem.Id).ToList();
foreach (var hobbyItem in tempHobbyList)
{
string hobbyName = hobbyItem.HobbyName;
//...其它的代码
}
}
如下图,我们编写了如上面的代码来进行实际测试,结果发现,当 userList 足够多、或者 hobbyList 足够多,或者 userList、hobbyList 同时都足够多时,性能会大大的降低,这时候就需要我们改变方式,采用先把 hobbyList 安装 userId 进行分组(GroupBy)变成 Dictionary<int, List<Hobby>>,然后在 userList 的循环体中直接从 Dictionary<int, List<Hobby>> 从检索,这样性能会大大提高。
实际测试
namespace ConsAppTest
{
class User
{
public int Id { get; set; }
public string Name { get; set; }
public int? Age { get; set; }
} class Hobby
{
public int HobbyId { get; set; }
public string HobbyName { get; set; }
public int UserId { get; set; }
} class Program
{
private const int UserCountForNew = ;
private const int HobbyCountForEveryUser = ; private static async Task Main(string[] args)
{
string messageTemplate = $"产生 { UserCountForNew } 个虚拟用户,并且每个虚拟用户产生了 { HobbyCountForEveryUser } 个“爱好”共耗时 {{0}} 秒。"; //下面是方案1 - 开始
Stopwatch globalWatch1 = Stopwatch.StartNew();
List<User> userList1;
List<Hobby> hobbyList1;
CreateUserListAndHobbyList(out userList1, out hobbyList1);
globalWatch1.Stop();
double totalSeconds1 = (double)globalWatch1.ElapsedMilliseconds / ;
Console.WriteLine(messageTemplate, totalSeconds1.ToString("#.##")); Stopwatch stage1Watch = Stopwatch.StartNew();
foreach (var userItem in userList1)
{
List<Hobby> tempHobbyList = hobbyList1.Where(c => c.UserId == userItem.Id).ToList();
foreach (var hobbyItem in tempHobbyList)
{
string hobbyName = hobbyItem.HobbyName;
}
}
stage1Watch.Stop();
double stage1WatchTotalSeconds = (double)stage1Watch.ElapsedMilliseconds / ;
Console.WriteLine("方案1总耗时:{0}\n\n", stage1WatchTotalSeconds.ToString("#.##"));
//下面是方案1 - 结束 //下面是方案2 - 开始
Stopwatch globalWatch2 = Stopwatch.StartNew();
List<User> userList2;
List<Hobby> hobbyList2;
CreateUserListAndHobbyList(out userList2, out hobbyList2);
globalWatch2.Stop();
double totalSeconds2 = (double)globalWatch2.ElapsedMilliseconds / ;
Console.WriteLine(messageTemplate, totalSeconds2.ToString("#.##")); Stopwatch stage2Watch = Stopwatch.StartNew();
foreach (var userItem in userList2)
{
List<Hobby> tempHobbyList = hobbyList2.Where(c => c.UserId == userItem.Id).ToList();
foreach (var hobbyItem in tempHobbyList)
{
string hobbyName = hobbyItem.HobbyName;
}
hobbyList2.RemoveAll(c => c.UserId == userItem.Id);
}
stage2Watch.Stop();
double stage2WatchTotalSeconds = (double)stage2Watch.ElapsedMilliseconds / ;
Console.WriteLine("方案2总耗时:{0}\n\n", stage2WatchTotalSeconds.ToString("#.##"));
//下面是方案2 - 结束 //下面是方案3 - 开始
Stopwatch globalWatch3 = Stopwatch.StartNew();
List<User> userList3;
List<Hobby> hobbyList3;
CreateUserListAndHobbyList(out userList3, out hobbyList3);
globalWatch3.Stop();
double totalSeconds3 = (double)globalWatch3.ElapsedMilliseconds / ;
Console.WriteLine(messageTemplate, totalSeconds3.ToString("#.##")); Stopwatch stage3Watch = Stopwatch.StartNew();
Dictionary<int, List<Hobby>> keyValuePairs = hobbyList3.GroupBy<Hobby, int>(c => c.UserId).ToDictionary(c => c.Key, c => c.ToList());
foreach (var userItem in userList3)
{
List<Hobby> tempHobbyList = keyValuePairs[userItem.Id];
foreach (var hobbyItem in tempHobbyList)
{
string hobbyName = hobbyItem.HobbyName;
}
}
stage3Watch.Stop();
double stage3WatchTotalSeconds = (double)stage3Watch.ElapsedMilliseconds / ;
Console.WriteLine("方案3总耗时:{0}\n\n", stage3WatchTotalSeconds.ToString("#.##")); //下面是方案3 - 结束 Console.ReadLine(); } private static void CreateUserListAndHobbyList(out List<User> rightUserList, out List<Hobby> rightHobbyList)
{
List<User> userList = new List<User>();
List<Hobby> hobbyList = new List<Hobby>();
int hobbyIndex = ;
for (int i = ; i <= UserCountForNew; i++)
{
int userId = i;
userList.Add(new User { Id = userId, Name = "张三" + userId, Age = userId });
for (int j = ; j < HobbyCountForEveryUser; j++)
{
hobbyIndex++;
hobbyList.Add(new Hobby
{
HobbyId = hobbyIndex,
HobbyName = "唱歌" + hobbyIndex,
UserId = userId
});
}
}
rightUserList = userList;
rightHobbyList = hobbyList;
} }
}
运行截图
结论
最终,我们看到,这三种方案,每种方案都产生 6000 个虚拟用户,并且每个虚拟用户产生了 20 个“爱好”。第一二种方案检索的速度要 8秒、9秒左右,而第三种方案从 Dictionary<int, List<Hobby>> 中检索只需要 0.01 到 0.02 秒,可谓是性能大大提升。
谢谢浏览!
实例演示 C# 中 Dictionary<Key, Value> 的检索速度远远大于 hobbyList.Where(c => c.UserId == user.Id)的更多相关文章
- vue.js(09)--v-for中的key
v-for中key的使用注意事项 <!DOCTYPE html> <html lang="en"> <head> <meta charse ...
- ASP.NET中Dictionary基本用法实例分析
本文实例讲述了ASP.NET中Dictionary基本用法.分享给大家供大家参考,具体如下: //Dictionary位于System.Collections.Generic命名空间之下 /* * ...
- 最简实例演示asp.net5中用户认证和授权(3)
上接: 最简实例演示asp.net5中用户认证和授权(2) 在实现了角色的各种管理接口后,下一步就是实现对用户的管理,对用户管理的接口相对多一些,必须要实现的有如下三个: 1 public inter ...
- 最简实例演示asp.net5中用户认证和授权(2)
上接最简实例演示asp.net5中用户认证和授权(1) 基础类建立好后,下一步就要创建对基础类进行操作的类了,也就是实现基础类的增删改查(听起来不太高大上),当然,为了使用asp.net5的认证机制, ...
- .Net 中HashTable,HashMap 和 Dictionary<key,value> 和List<T>和DataTable的比较
参考资料 http://www.cnblogs.com/MichaelYin/archive/2011/02/14/1954724.html http://zhidao.baidu.com/link? ...
- 最简实例演示asp.net5中用户认证和授权(4)
上篇: 最简实例演示asp.net5中用户认证和授权(3) 上面我们把自定义认证和授权的相关的最小基础类和要实现的接口都实现了,下面就是如何来进行认证和授权的配置. 首先我们要告诉系统,我们的用户和角 ...
- 最简实例演示asp.net5中用户认证和授权(1)
asp.net5中,关于用户的认证和授权提供了非常丰富的功能,如果结合ef7的话,可以自动生成相关的数据库表,调用也很方便. 但是,要理解这么一大堆关于认证授权的类,或者想按照自己项目的特定要求对认证 ...
- ASP.NET Core 6框架揭秘-实例演示版[持续更新中…]
作为<ASP.NET Core 3框架揭秘>的升级版,<ASP.NET Core 6框架揭秘>提供了很多新的章节,同时对现有的内容进行大量的修改.虽然本书旨在对ASP.NET ...
- ASP.NET Core 6框架揭秘实例演示[08]:配置的基本编程模式
.NET的配置支持多样化的数据源,我们可以采用内存的变量.环境变量.命令行参数.以及各种格式的配置文件作为配置的数据来源.在对配置系统进行系统介绍之前,我们通过几个简单的实例演示一下如何将具有不同来源 ...
随机推荐
- java全栈项目
文档地址:https://course.7yue.pro/lin/sleeve/ http://talelin.unna.com.cn/ 1.小程序里,我把结构分为三部分:wxml(view).pag ...
- 修改Docker容器的时间和宿主时间一致
在查看容器的日志的,发现时间有和宿主主机时间相差有8个小时,而且宿主主机使用的是CST时间,容器容器使用的是UTC时间 主机时间 [root@hz-d-crm01 ~]$ date Thu May 2 ...
- [译]Vulkan教程(01)入门
[译]Vulkan教程(01)入门 接下来我将翻译(https://vulkan-tutorial.com)上的Vulkan教程.这可能是我学习Vulkan的最好方式,但不是最理想的方式. 我会用“d ...
- java之对象创建时各成员变量的初始值
除了byte short int long float double char bollean这基础类型外,其余的都是引用类型 成员变量类型 初始值 byte 0 short 0 int 0 long ...
- 记一起Java大对象引起的FullGC事件及GC知识梳理
背景 最近发生了一起 Java 大对象引起的 FullGC 事件.记录一下. 有一位商家刷单,每单内有 50+ 商品.然后进行订单导出.订单导出每次会从订单详情服务取100条订单数据.由于 100 条 ...
- Mybatis基本类型参数非空判断(异常:There is no getter for property...)
先看一小段代码 <select id="queryByPhone" parameterType="java.lang.String" resultType ...
- ROS基础-基本概念和简单工具(1)
1.什么是ROS? Robot operating System ,简单说机器人操作系统,弱耦合的分布式进程框架,通过进程间的消息传递和管理.实现硬件抽象和设备控制. 2.节点(node) node ...
- ASP.NET Core 2.2 WebApi 系列【一】搭建ASP.NET Core WebApi项目
一.步骤 从“文件”菜单中选择“新建”>“项目” . 选择“ASP.NET Core Web 应用程序”模板,再单击“下一步” . 将项目命名为 NetCoreWebApi,然后单击“创建” . ...
- (转)isolation forest进行异常点检测
原文链接:https://www.cnblogs.com/gczr/p/9156971.html 一.简介 孤立森林(Isolation Forest)是另外一种高效的异常检测算法,它和随机森林类似, ...
- [browser location和history] 简单实现了个路由[转载]
今天看了1下前面写的,好像缺乏交流性,周末再来弄吧 -0- 今天看了browser 的 location 和 history location属性 // //location.hash 性是一个可读可 ...