前言

在日常开发当中,excel的上传与解析是很常见的。根据业务不同,解析的数据模型也都不一样。不同的数据模型也就需要不同的校验逻辑,这往往需要写多套的代码进行字段的检验,如必填项,数据格式。为了避免重复编写逻辑检验代码,于是有了这篇文章。

第一步、读取Excel表格数据

         public ActionResult UploadExcel()
{
ResultInfo<List<User>> result = new ResultInfo<List<User>>(); var files = Request.Files;
var form = Request.Form;
if (files.Count > )
{
var file = files[];
//获取文件扩展名
var ext = System.IO.Path.GetExtension(file.FileName);
var newPath = "";
try
{
//获取文件路径
var path = HttpContext.Server.MapPath("/Upload/Excels/");
if (!System.IO.Directory.Exists(path))
{
System.IO.Directory.CreateDirectory(path);
}
//保存文件
var newFileName = System.Guid.NewGuid().ToString("N") + ext;//新文件名
newPath = path + newFileName;
file.SaveAs(newPath);
DataTable dt = FileUtil.ExcelToDataTable(newPath, true);
result = ValidateExcelData<User>(dt);
}
catch (Exception ex)
{
result.IsError = true;
result.Msg = ex.Message;
}
finally
{
//清除文件
System.IO.File.Delete(newPath);
}
}
var obj = new {
success = result.IsError,
msg = result.Msg
};
return Json(obj);
}

前端界面-上传Excel

PS:这里的上传,使用了前面文章中关于文件上传的,如有不明白,自行翻看前面IT轮子系列的文章拉。

关于excel的读取,使用的是NPOI组件,网上关于NPOI的文章也很多,这里也不再重复。代码(这代码也是从网上copy来的,已经找不到连接了,在这里感谢一下这位博友): )如下:

         /// <summary>
/// 将excel导入到datatable
/// </summary>
/// <param name="filePath">excel路径</param>
/// <param name="isColumnName">第一行是否是列名</param>
/// <returns>返回datatable</returns>
public static DataTable ExcelToDataTable(string filePath, bool isColumnName)
{
DataTable dataTable = null;
FileStream fs = null;
DataColumn column = null;
DataRow dataRow = null;
IWorkbook workbook = null;
ISheet sheet = null;
IRow row = null;
ICell cell = null;
int startRow = ;
try
{
using (fs = File.OpenRead(filePath))
{
// 2007版本
if (filePath.IndexOf(".xlsx") > )
workbook = new XSSFWorkbook(fs);
// 2003版本
else if (filePath.IndexOf(".xls") > )
workbook = new HSSFWorkbook(fs); if (workbook != null)
{
sheet = workbook.GetSheetAt();//读取第一个sheet,当然也可以循环读取每个sheet
dataTable = new DataTable();
if (sheet != null)
{
int rowCount = sheet.LastRowNum;//总行数
if (rowCount > )
{
IRow firstRow = sheet.GetRow();//第一行
int cellCount = firstRow.LastCellNum;//列数 //构建datatable的列
if (isColumnName)
{
startRow = ;//如果第一行是列名,则从第二行开始读取
for (int i = firstRow.FirstCellNum; i < cellCount; ++i)
{
cell = firstRow.GetCell(i);
if (cell != null)
{
if (cell.StringCellValue != null)
{
column = new DataColumn(cell.StringCellValue);
dataTable.Columns.Add(column);
}
}
}
}
else
{
for (int i = firstRow.FirstCellNum; i < cellCount; ++i)
{
column = new DataColumn("column" + (i + ));
dataTable.Columns.Add(column);
}
} //填充行
for (int i = startRow; i <= rowCount; ++i)
{
row = sheet.GetRow(i);
if (row == null) continue; dataRow = dataTable.NewRow();
for (int j = row.FirstCellNum; j < cellCount; ++j)
{
cell = row.GetCell(j);
if (cell == null)
{
dataRow[j] = "";
}
else
{
//CellType(Unknown = -1,Numeric = 0,String = 1,Formula = 2,Blank = 3,Boolean = 4,Error = 5,)
switch (cell.CellType)
{
case CellType.Blank:
dataRow[j] = "";
break;
case CellType.Numeric:
short format = cell.CellStyle.DataFormat;
//对时间格式(2015.12.5、2015/12/5、2015-12-5等)的处理
if (format == || format == || format == || format == )
dataRow[j] = cell.DateCellValue;
else
dataRow[j] = cell.NumericCellValue;
break;
case CellType.String:
dataRow[j] = cell.StringCellValue;
break;
}
}
}
dataTable.Rows.Add(dataRow);
}
}
}
}
}
return dataTable;
}
catch (Exception)
{
if (fs != null)
{
fs.Close();
}
return null;
}
}

NPOI读取Excel

第二步、使用泛型检验数据

这里所说的通用,只不过是把检验的规则、配置放到了数据库中。然后根据类名从数据库读取配置规则。在这篇文章中,配置是没有使用到数据库的,直接使用了一个配置类,代码如下:

   /// <summary>
/// excel导入配置表
/// </summary>
public class Sys_ExcelImportConfig
{
/// <summary>
/// 表名
/// </summary>
public string TableName { get; set; }
/// <summary>
/// 表列名
/// </summary>
public string TableColumnName { get; set; }
/// <summary>
/// excel列名
/// </summary>
public string ExcelColumnName { get; set; }
/// <summary>
/// 数据类型
/// </summary>
public string DataType { get; set; }
/// <summary>
/// 是否必填项
/// </summary>
public bool IsRequired { get; set; }
/// <summary>
/// 是否值类型
/// </summary>
public bool IsValueType { get; set; }
/// <summary>
/// 是否检验数据格式,如手机号、email
/// </summary>
public bool IsDataChecked { get; set; }
/// <summary>
/// 正则表达式 若IsDataChecked为true则使用正则进行校验
/// </summary>
public string Reg { get; set; } }

配置数据模型

PS:在实际项目中,可以在后台添加一个配置界面。这个配置数据模型就对应数据库中一个表。因此,如果系统需要导入多个业务模型的Excel 只需做好配置就OK拉。


数据解析的泛型方法

代码如下:

         /// <summary>
/// 验证excel数据的格式
/// </summary>
/// <typeparam name="T">泛型</typeparam>
/// <param name="dt">NPOI读取的数据表</param>
/// <returns>泛型结果集</returns>
private ResultInfo<List<T>> ValidateExcelData<T>(DataTable dt) where T : new()
{
ResultInfo<List<T>> result = new ResultInfo<List<T>>();
//从数据库读取本次导入的excel配置表
/*
* 这里的demo就直接写到程序里,不做数据库配置
* 在实际项目中,list可以从一个表获取,类的属性就对应
* 表中配置的字段
*/
//1、定义配置数据源,这里配置三列
List<Sys_ExcelImportConfig> configList = new List<Sys_ExcelImportConfig> {
new Sys_ExcelImportConfig{
TableName="User",
TableColumnName="Name",
DataType=typeof(System.String).FullName,
ExcelColumnName="姓名",
IsRequired = true
},
new Sys_ExcelImportConfig{
TableName="User",
TableColumnName="Position",
DataType=typeof(System.String).FullName,
ExcelColumnName="职位",
IsRequired = true
},
new Sys_ExcelImportConfig{
TableName="User",
TableColumnName="Age",
DataType=typeof(int).FullName,
ExcelColumnName="年龄",
IsValueType = true
}
};
//2、遍历数据源
var count = dt.Rows.Count;
var isError = false;
var msg = "";
if (count > )
{
//获取所有的公共属性
var proInfos = typeof(T).GetProperties();
//遍历所有的行
for (int i = ; i < count; i++)
{
T obj = new T();
/*
* 遍历所有的配置列
* 不在配置列中都不导入
*/
foreach (Sys_ExcelImportConfig config in configList)
{
var isContain = dt.Columns.Contains(config.ExcelColumnName);
if (isContain)//如果包含
{
//读取该行该列的值
var value = dt.Rows[i][config.ExcelColumnName].ToString();
if (config.IsRequired)//是否为表填项
{
if ("".Equals(value))//为空,退出循环体
{
isError = true;
//返回错误信息
msg = string.Format("Excel表中第{0}中{1}的值不允许为空", i, config.ExcelColumnName);
break;
}
}
if (config.IsValueType)//是否值类型:是,则验证数据格式
{
Type methodType = Type.GetType(config.DataType); //这里关键的是& 引用类型的参数
Type[] parameters = new Type[] { typeof(string), Type.GetType(config.DataType + "&") };
var method = methodType.GetMethod("TryParse", parameters);
Object[] paraObjs = new Object[];
paraObjs[] = value;
var objResult = method.Invoke(null, paraObjs);
//值类型是否转换成功
if (!(bool)objResult)
{
isError = true;
//返回错误信息
msg = string.Format("Excel表中第{0}行中[{1}]的值数据格式不正确", i + , config.ExcelColumnName);
break;
}
} //给公共属性并赋值
var property = proInfos.FirstOrDefault(t => t.Name == config.TableColumnName);
if (property != null)
{
property.SetValue(obj, value);
}
}
}
if (isError)
{
//退出所有的循环
break;
}
//验证通过
//添加到数据列表
result.Data.Add(obj);
}
}
/*
* 这里可以返回isError和msg
*/
result.IsError = isError;
result.Msg = msg;
return result;
}

泛型解析方法

代码中注释写的很详细,如有看不明白,欢迎砸砖头和留言......

对于其他业务的EXCEL上传,只需在后台做配置就可以了,将数据模型传到方法中,如demo中的User. 在拿到返回的List后 可以做进一步的处理,如写入到数据库。在实际项目中,为了做到共用,可以将这个泛型方法放到一个common项目中,这样别的项目可以直接引用这个common项目。

  public class ResultInfo<T>
{
public ResultInfo()
{
IsError = false;
Msg = "操作成功";
Data = default(T);
}
/// <summary>
/// 状态true/false
/// </summary>
public bool IsError { get; set; }
/// <summary>
/// 结果信息
/// </summary>
public string Msg { get; set; }
/// <summary>
/// 数据
/// </summary>
public T Data { get; set; }
}

ResultInfo数据模型

后记

从10月初,确切的说9月29号起,也写了7、8篇技术类文章。有的文章也有几百的阅读量,可评论留言的人却少之又少,点赞、推荐就更没有。如果这些文章确实帮到了你,对你的工作有那么一点点的用,希望路过的兄弟姐妹们可以有赞的点个赞,有推荐的来个推荐,有转载的来个转载,为我这个博客园增添点人气。

谢谢拉。。。。。。。 GOOD NIGHT.

ps:最后来张阅读量的截图:

IT轮子系列(六)——Excel上传与解析,一套代码解决所有Excel业务上传,你Get到了吗的更多相关文章

  1. linux上备份Oracle时EXP-00091的错误解决方法

    unix/linux上备份Oracle时EXP-00091的错误解决方法 unix/linux上备份数据时的错误解决方法 EXP-00091: Exporting questionable stati ...

  2. 传统业务上云:跨AZ容灾架构解析

    本文由  网易云发布. 数字化转型浪潮之下,采用云计算服务提升业务敏捷性.降低运维成本,成为了传统企业的优选方案.网易云资深解决方案架构师张亮通过某物流企业客户的实际案例,分享了传统业务系统在云上的架 ...

  3. IT轮子系列(五)——MVC API 文件上传,总有一款是你需要的

    前言 在对外提供的接口时,也常常需要提供上传文件的.在这篇文章中会描述三种上传方式. 1.第一款,通过Base64字符上传——PostFromBase64Str 首先,定义上传数据模型.对于模型的定义 ...

  4. 学习ASP.NET Core Blazor编程系列六——新增图书(上)

    学习ASP.NET Core Blazor编程系列一--综述 学习ASP.NET Core Blazor编程系列二--第一个Blazor应用程序(上) 学习ASP.NET Core Blazor编程系 ...

  5. 结合bootstrap fileinput插件和Bootstrap-table表格插件,实现文件上传、预览、提交的导入Excel数据操作流程

    1.bootstrap-fileinpu的简单介绍 在前面的随笔,我介绍了Bootstrap-table表格插件的具体项目应用过程,本篇随笔介绍另外一个Bootstrap FieInput插件的使用, ...

  6. java将Excel文件上传并解析为List数组

    前端 //导入excel文件 layui.use('upload', function() { var upload =layui.upload; //指定允许上传的文件类型 var uploadIn ...

  7. 简单的Excel导入(上传、解析、持久化)

    /** * excel导入 * @param req * @param resp * @return */ public void excelImport(){ //先将要上传的Excel文件上传到项 ...

  8. Web攻防系列教程之文件上传攻防解析(转载)

    Web攻防系列教程之文件上传攻防解析: 文件上传是WEB应用很常见的一种功能,本身是一项正常的业务需求,不存在什么问题.但如果在上传时没有对文件进行正确处理,则很可能会发生安全问题.本文将对文件上传的 ...

  9. 项目一:第四天 1、快递员的条件分页查询-noSession,条件查询 2、快递员删除(逻辑删除) 3、基于Apache POI实现批量导入区域数据 a)Jquery OCUpload上传文件插件使用 b)Apache POI读取excel文件数据

    1. 快递员的条件分页查询-noSession,条件查询 2. 快递员删除(逻辑删除) 3. 基于Apache POI实现批量导入区域数据 a) Jquery OCUpload上传文件插件使用 b) ...

随机推荐

  1. android自定义View-继承

    介绍anroid通过继承系统的控件自定义view 方法是通过对OnDraw()方法进行复写来实现的 举例继承TextView 在textView的背景加上矩形的效果 代码实现 testView的代码 ...

  2. android 填满手机磁盘空间方法

    http://blog.csdn.net/fulinwsuafcie/article/details/9700619 很多时候我们需要进行临界测试. 譬如当手机盘空间存满的条件下应用会有何表现等. 之 ...

  3. there was no endpoint listening at net.pipe://localhost/PreviewProcessingService/ReportProcessing

    当你在开发reporting service报表时,进行报表的preview时报下图中的错误,以下方法可以让你直接跳过这个错误,继续查看报表的运行结果. 直接选择你需要运行查看的报表右击run就可以, ...

  4. gcov辅助脚本

    gcov辅助脚本(金庆的专栏)代码覆盖测试查看结果时,需要进入代码所在目录,调用gcov,然后vi查看.因为代码目录结构复杂,进出子目录太麻烦,所以用以下脚本直接生成与查看.一般是用TSVN列出有更改 ...

  5. www-authenticate与BASE-64认证技术

    www-authenticate是一种简单的用户身份认证技术.很多验证都采用这种验证方式,尤其在嵌入式领域中.优点:方便缺点:这种认证方式在传输过程中采用的用户名密码加密方式为BASE-64,其解码过 ...

  6. Eclipse插件 - FindBugs 检查代码隐藏的 Bug

    简介         FindBugs 是一个在 Java 程序中查找 bug 的程序,它可以查找可能出错的代码,注意 FindBugs 是检查 Java 字节码,也就是*.class文件.其实准确的 ...

  7. Linux多线程实践(1) --线程理论

    线程概念 在一个程序里的一个执行路线就叫做线程(thread).更准确的定义是:线程是"一个进程内部的控制序列/指令序列"; 一切进程至少有一个执行线程; 进程  VS. 线程  ...

  8. Java最最常用的100个类排序(非官方)

    下面这句话是引用"大部分的 Java 软件开发都会使用到各种不同的库.近日我们从一万个开源的 Java 项目中进行分析,从中提取出最常用的 Java 类,这些类有来自于 Java 的标准库, ...

  9. Optimizing Item Import Performance in Oracle Product Hub/Inventory

    APPLIES TO: Oracle Product Hub - Version 12.1.1 to 12.1.1 [Release 12.1] Oracle Inventory Management ...

  10. ISLR系列:(3)重采样方法 Cross-Validation & Bootstrap

    Resampling Methods 此博文是 An Introduction to Statistical Learning with Applications in R 的系列读书笔记,作为本人的 ...