C# 大型电商项目性能优化(一)
经过几个月的忙碌,我厂最近的电商平台项目终于上线,期间遇到的问题以及解决方案,也可以拿来和大家多做交流了。
我厂的项目大多采用C#.net,使用逐渐发展并流行起来的EF(Entity Framework)框架,并搭配使用丹麦的一款主打CMS, DMS的.net web应用程序sitecore。
本篇为基础篇,侧重于阐述编码规范和一些编码技巧对系统性能的影响。不规范的编码方式,可能对单个方法或模块产生的性能影响是微不足道的,但在大型电商项目中,高并发的场景随处可见,欠妥的编码方式,可能会对整个系统的性能及用户体验,造成很大的影响。
作为电商项目,对性能影响最明显的模块,莫过于下订单及修改库存。在高并发场景下,这些模块的数据库存取的性能要求是非常高的,少许的性能浪费,都可能使系统在使用中的表现差强人意。
首先,我们来阐述一下EF框架下得编码规范。这里我们可以参考msdn关于IQueryable<T>及IEnumerable<T>的介绍:
对于在内存中集合上运行的方法(即扩展 IEnumerable< T> 的那些方法),返回的可枚举对象将捕获传递到方法的参数。在枚举该对象时,将使用查询运算符的逻辑,并返回查询结果。
与之相反,扩展 IQueryable <T> 的方法不会实现任何查询行为,但会生成一个表示要执行的查询的表达式树。查询处理由源 IQueryable<T> 对象处理。
IQueryable<T>会生成一个查询表达式树,并不会将数据直接取出来,但该对象的扩展方法为我们提供了大量的高效辅助功能,例如判断数据是否存在的Any(),查询数据数量的Count(),统计计数属性的Sum()等,EF会帮助我们生成最优的sql,以减少数据库存取时的性能损耗。这些方法,我们都可以用比较笨拙的编码方式进行实现,但其效率会低很多。
另外,编码过程中应尽可能避免使用ToList()方法及GetById()方法,这里依旧可以参考msdn,但笔者可以直白地去描述:采用这两种方法后,程序会直接将数据从数据库中读取出来,并加载到内存,接下来我们可以直接操作这些实实在在的数据,并使用List<T>所扩展的方法。然而这种方案会造成以下性能问题:
1.将未经业务处理的表达式树直接用来查询数据,其数据量太大,数据库的存取,磁盘的IO,都需要消耗大量的时间和空间。
2.EF支持的导航属性,会将相关联的对象都查出来,届时庞大的数据又拥有更庞大的分支,让内存和CPU飙升。
为了避免上述问题,EF为我们提供了行之有效的方法:
1.查询初期少用ToList()及GetDtoById()方法。
2.查询过程中,使用Select()和SelectMany()方法,只选取自己所需要的属性或对象。
为了看出不规范的编码方式带来的性能损耗,我们来看一段例子比较:
1.以下是只选取自己所需的属性的代码:
var productSKU = unitOfWork.ProductSku.Get(p => p.Id == item.SKUId)
.Select(p => new { p.Id, p.ProductId, p.Product })
.FirstOrDefault();
提交订单耗时的截图:
2.采用GetById()方法:
var productSKU = unitOfWork.ProductSku.GetByID(item.SKUId);
提交订单耗时截图:
笔者电脑老旧,该数据在i5 8G ram的计算机中仅需要200ms的时长,在性能更强的服务器上耗时更短。
从对比中我们可以看到:仅仅只修改了一个方法,程序请求的耗时竟有将近一倍的误差!如果我们的代码中充斥着这种懒惰的不规范写法,在高并发场景下,系统会被拖得很慢,甚至会出现程序报错。
接下来,我们说下抛开EF框架的做法,擅长sql编程的园友,可能会不屑EF的提供的各种方案,直接写sql,采用ADO不是更快吗?的确,直接运行sql会让程序更快,ADO的速度是大家所认可的。EF也支持大家使用直接编写sql的方式:
var productSKU = dbContext.Database.SqlQuery<ProductSku>(sqlStr);
如果sql编程功力深厚,笔者是非常支持这种编程方案的。但EF框架也有其天生的优势:
1.EF框架让更多的初级软件从业者更快地学习和编写程序
2.EF提供的完善的扩展方法,帮助软件从业人员实现各种功能
3.规范编写的EF C#代码,并不会比原生的sql慢太多
这让笔者想起C#.net与Java程序员之间的矛盾^_^。笔者因为机缘巧合,也写过一段时间的Java。
二者的设计理念确实有所不同:
1.C#.net让初学者更快地入门,提供了更多的类库和方法,其出色的IDE让编程人员省心省力。且C#.net已经开源。
2.Java则需要编程人员做更多的思考,自己配置环境变量,自己敲命令行,让编程人员在思考的过程中加深对计算机原理、操作系统和软件工程的认识。
毫无疑问:两者都是当代最出色的高级程序语言(PHP,Python,JavaScript等的同行勿喷^_^)与其花时间争论谁才是最好的语言,不如兼而学之。
以上是本次性能优化介绍的基础篇,后续会为大家带来数据库层面的优化经验及体会。
C# 大型电商项目性能优化(一)的更多相关文章
- Java开源生鲜电商平台-性能优化以及服务器优化的设计与架构(源码可下载)
Java开源生鲜电商平台-性能优化以及服务器优化的设计与架构(源码可下载) 说明:Java开源生鲜电商平台-性能优化以及服务器优化的设计与架构,我采用以下三种维度来讲解 1. 代码层面. 2. 数 ...
- Spark大型电商项目实战-及其改良之番外(1)-将spark前端页面效果高效拷贝至博客
Spark大型电商项目实战-及其改良这个系列的时间轴展示图一直在变....1-3篇是用图直接表示时间轴,用一段简陋的html代码表示时间表.第4篇开始才是用比较完整的前端效果,能移动.缩放时间轴,鼠标 ...
- C#大型电商项目优化(二)——嫌弃EF与抛弃EF
上一篇博文中讲述了使用EF开发电商项目的代码基础篇,提到EF后,一语激起千层浪.不少园友纷纷表示:EF不适合增长速度飞快的互联网项目,EF只适合企业级应用等等. 也有部分高手提到了分布式,确实,性能优 ...
- vue大型电商项目尚品汇(前台篇)day01
学完vue2还是决定先做一个比较经典,也比较大的项目来练练手好一点,vue3的知识不用那么着急,先把vue2用熟练了,vue3随时都能学. 这个项目确实很经典包含了登录注册.购物车电商网站该有的都有, ...
- Spark大型电商项目实战-及其改良(3) 分析sparkSQL语句的性能影响
之前的运行数据被清除了,只能再运行一次,对比一下sparkSQL语句的影响 纯SQL的时间 对应时间表 th:first-child,.table-bordered tbody:first-child ...
- Spark大型电商项目实战-及其改良(2) RDD优化效果不稳定的真正原因
首先看没有map join的第2任务: 时间线如下 接着是对应id的算子计算时间表 Stage Id Description Submitted Duration Tasks: Succeeded/T ...
- C#大型电商项目优化(三)——扩展性与支付
上一篇文章引来不少非议,笔者并非对EF有看法,而是针对不同的业务场景和框架背景,挑选不同的方案.每个方案都有其优势劣势,挑选最快速,最简单的方案,是笔者的初衷. 看评论也是学习的过程,然而有些只做评价 ...
- Spark大型电商项目实战-及其改良(1) 比对sparkSQL和纯RDD实现的结果
代码存在码云:https://coding.net/u/funcfans/p/sparkProject/git 代码主要学习https://blog.csdn.net/u012318074/artic ...
- vue大型电商项目尚品汇(前台篇)day02
现在正式回归,开始好好做项目了,正好这一个项目也开始慢慢的开始起色了,前面的准备工作都做的差不多了. 而且我现在也开始慢慢了解到了一些项目才开始需要的一些什么东西了,vuex.router这些都是必备 ...
随机推荐
- [20171124]xxd与通配符.txt
[20171124]xxd与通配符.txt --//linux 上许多命令都支持通配符,比如$ ls -l *.txt-rw-r--r-- 1 oracle oinstall 44801024 201 ...
- python第五十四天--第十周作业
SELECT版FTP:使用SELECT或SELECTORS模块实现并发简单版FTP允许多用户并发上传下载文件 必须使用select or selectors模块支持多并发,禁止使用多线程或多进程 RE ...
- sleep和Sleep区别
windows Sleep 单位是毫秒 linux sleep 单位是秒
- Hadoop2.7.6_05_mapreduce-Yarn
1. MAPREDUCE原理 Mapreduce是一个分布式运算程序的编程框架,是用户开发“基于hadoop的数据分析应用”的核心框架: Mapreduce核心功能是将用户编写的业务逻辑代码和自带默认 ...
- Alpha版本 - 用户反馈
Alpha版本 - 用户反馈 使用情况 (前天发出了内测apk给身边的人小范围使用,到目前共有31名用户使用过产品) 新增用户数: 用户事件数: Bug反馈 登录/注册出现"无响应" ...
- DAG 动态规划 巴比伦塔 B - The Tower of Babylon
题目:The Tower of Babylon 这是一个DAG 模型,有两种常规解法 1.记忆化搜索, 写函数,去查找上一个符合的值,不断递归 2.递推法 方法一:记忆化搜索 #include < ...
- Django之权限管理
Django权限管理之初步完整版 项目背景:这是一个权限管理系统(给一些角色和他们的权限指URL和页面可以删除的按钮比如:增删改查) 使用到了中间件,和初始化权限,使用了admin的后台管理系统. 我 ...
- Android中消息系统模型和Handler Looper
http://www.cnblogs.com/bastard/archive/2012/06/08/2541944.html Android中消息系统模型和Handler Looper 作为Andro ...
- linux(centos 7)下安装elasticsearch 5 的 IK 分词器
(一)到IK 下载 对应的版本(直接下载release版本,避免mvn打包),下载后是一个zip压缩包 (二)将压缩包上传至elasticsearch 的安装目录下的plugins下,进行解压,运行如 ...
- ethereum/EIPs-712 Ethereum typed structured data hashing and signing
https://github.com/ethereum/EIPs/blob/master/EIPS/eip-712.md eip title author discussions-to status ...