Java使用SQLServerBulKCopy实现批量插入SQLSqerver数据库
这是CodingSir的帖子说的(由于不够详细,我现在提供给详细的,上手即用):
Microsoft SQL Server 的bcp命令可以快速将大型文件复制插入到数据库中,C#提供了SqlBulkCopy方法实现该功能,而在java中可以通过SQLServerBulkCopy类实现类似的功能,且相对于insert、update等命令来说,这个类的效率要高的多。(对比常用的JDBC的Batch方法也高的多)。
SQLServerBulkCopy类只能用于对SQL Sever数据库的插入,但是数据来源可以不是SQL Sever数据库。
旧版的Microsoft SQL Server JDBC 驱动并没有提供这个类,需要下载Microsoft SQL Server JDBC 驱动程序 6.0版本:https://www.microsoft.com/zh-cn/download/confirmation.aspx?id=11774
MS官方的说明文档和下载架包在这个地址:https://docs.microsoft.com/en-us/sql/connect/jdbc/using-bulk-copy-with-the-jdbc-driver
SQLServerBulKCopy类向数据库插入数据支持三种类型封装的数据:Java本身提供的ResultSet、RowSet和JDBC提供的ISQLServerBulkRecord接口实现类。下面提供一种实现:
BaseDao代码:
public class BaseDao {
//驱动
private static String driver = "com.microsoft.sqlserver.jdbc.SQLServerDriver"; //数据库地址
private static String url = "jdbc:sqlserver://127.0.0.1:1433;SelectMethod=cursor;DatabaseName=数据库名字;"; //数据库用户名
private static String name = "sa"; //数据库密码
private static String password = "123456"; //数据库连接,定义为全局变量,方便调用
private Connection con; //导入驱动,静态代码块的作用为只运行一次,异常无法向上抛出,只能及时处理
static{
try{
Class.forName(driver);
}catch (ClassNotFoundException e) {
//打印异常相关信息
e.printStackTrace();
}
} //无参构造方法,连接数据库
public BaseDao () {
try {
con=DriverManager.getConnection(url,name,password);
} catch (SQLException throwables) {
throwables.printStackTrace();
}
} //数据查找,返回查找的内容,向上抛异常
public ResultSet executeSQL (String sql,Object...object) throws SQLException{
PreparedStatement ps=con.prepareStatement(sql); for(int i=0;i<object.length;i++){
//ps传入参数的下标是从1开始
ps.setObject(i+1,object[i]);
} //返回结果集
return ps.executeQuery();
} //数据的增删改,返回数据执行行数
public int executeUpdate(String sql,Object...object) throws SQLException {
PreparedStatement ps=con.prepareStatement(sql);
for(int i=0;i<object.length;i++){
ps.setObject(i+1,object[i]);
}
//返回int类型执行行数
return ps.executeUpdate();
} //关闭数据库连接
public void close() throws SQLException{
con.close();
}
}
下面的代码,大家可以也封装成工具类:
public static void main(String[] args) {
String url = "jdbc:sqlserver://127.0.0.1:1433;SelectMethod=cursor;DatabaseName=ry"
+ ";user=sa;password=123456";
//查询出空值用于构建CachedRowSetImpl对象以省去列映射的步骤
BaseDao baseDao=new BaseDao();
ResultSet rs = baseDao.executeSQL("select * from curr where 1=0");
CachedRowSetImpl crs = new CachedRowSetImpl();
crs.populate(rs);
//既然是批量插入肯定是需要循环
for(int i=0;i<执行的次数;i++){
//移动指针到“插入行”,插入行是一个虚拟行
crs.moveToInsertRow();
//更新虚拟行的数据(实体类要新增的字段,大家根据自己的实体类的字段来修改)
//数据库字段 ,填写的值
crs.updateString("monetary_code", "014");//string类型的值
crs.updateString("curr_code", "CNY");
crs.updateString("name", "人民币");
//别的类型的值,自己看api,基本上都是crs.update***这样的
//crs.updateInt("curr_code", 2);//int类型的值
//插入虚拟行
crs.insertRow();
//移动指针到当前行
crs.moveToCurrentRow();
}
//进行批量插入
SQLServerBulkCopyOptions copyOptions = new SQLServerBulkCopyOptions();
copyOptions.setKeepIdentity(true);
copyOptions.setBatchSize(8000);
copyOptions.setUseInternalTransaction(true);
SQLServerBulkCopy bulkCopy = new SQLServerBulkCopy(url);
bulkCopy.setBulkCopyOptions(copyOptions);
bulkCopy.setDestinationTableName("curr");
bulkCopy.writeToServer(crs);
crs.close();
bulkCopy.close();
}
感想:由于大牛对小白关照细节不到位,所以决定写篇详细的给你们,节省大家的时间。
Java使用SQLServerBulKCopy实现批量插入SQLSqerver数据库的更多相关文章
- C# 数据批量插入到数据库SqlBulkCopy(源数据类型:List<T> Or DataTable)
/*_____________________ List<T>类型数据 To Sql_______________________________*/ /// <summary& ...
- [Java]如何把当前时间插入到数据库
[Java]如何把当前时间插入到数据库 1.在orderDao.java中 /** 设置订单*/ public void setOrder(Order order){ Date time = new ...
- java中解析excel 批量插入数据库
Facade 层 实现类 (@Service("samePeriodModelImportFacade")) 1. 获取cells 的方法 public Cells getCel ...
- Mybatis与JDBC批量插入MySQL数据库性能测试及解决方案
转自http://www.cnblogs.com/fnz0/p/5713102.html 不知道自己什么时候才有这种钻研精神- -. 1 背景 系统中需要批量生成单据数据到数据库表,所以采用 ...
- python批量插入mysql数据库(性能相关)以及反引号的使用
参考link: https://blog.csdn.net/qq_35958094/article/details/78462800(插入相关) https://www.cnblogs.com/hya ...
- C# OracleBulkCopy 批量插入oracle数据库的方法
只有安装了oracle 11G客户端的机器上才可以用,要用到ODP.NET组件中的oracleDataAccess.DLL,命名空间引用为Oracle.DataAccess.Client; 引用:Or ...
- C#动态创建Gridview及批量插入到数据库
这里介绍两种动态创建Gridview的方法: (一).有时需要应付上头领导的检查,所以就弄一些静态的Gridview来显示数据,这种方法的优点就是不用连接数据库,比较方便,但是代码灵活性不高,所有数据 ...
- C#批量插入Sybase数据库,Anywhere 8
数据库版本是Adaptive Server Anywhere 8 1.添加引用,程序集 iAnywhere.Data.AsaClient.这个和SQLServer的System.Data.SqlCli ...
- Django—ajax、前端后端编码格式,bulk_create批量插入语数据库、自定义分页
一.ajax简介: XML也是一门标记语言该语法应用场景 1.写配置文件 2.可以写前端页面(odoo框架中 erp) 每家公司都会有属于这家公司独有的内部管理软件:专门用来开发企业内部管理软件 框架 ...
随机推荐
- vue滑动位移动画
需要用到css3,vue过度 在网上找了很久很少的资料,自己摸索了一会看了官方文档,毕竟环境不同,需要的效果不同,耽误了很久 鼠标放上某一个就会从下方弹出层
- Cypress系列(1)- Window下安装 Cypress 并打开
如果想从头学起Cypress,可以看下面的系列文章哦 https://www.cnblogs.com/poloyy/category/1768839.html 系统要求 Cypress 是一个被安装在 ...
- Java中的集合(十四) Map的实现类LinkedHashMap
Java中的集合(十四) Map的实现类LinkedHashMap 一.LinkedHashMap的简介 LinkedHashMap是Map接口的实现类,继承了HashMap,它通过重写父类相关的方法 ...
- FHQ-Treap学习笔记
平衡树与FHQ-Treap 平衡树(即平衡二叉搜索树),是通过一系列玄学操作让二叉搜索树(BST)处于较平衡的状态,防止在某些数据下退化(BST在插入值单调时,树形不平衡,单次会退化成 \(\math ...
- 多用户vps管理面板怎么安装,有没有好用的vps管理工具
一.VPS安装VPSMate控制面板步骤 1.使用SSH连接到VPS.使用命令获取VPSMate安装包: wget http://www.vpsmate.org/tools/install.py ...
- 如何管理win系列服务器,win10 pro如何 使用远程桌面
远程桌面,大家都理解,专业的运维人员都是连接上百台服务器进行操作管理工作. 先介绍一款专业的远程桌面管理工具:iis7远程桌面批量管理 win10 pro如何 使用远程桌面? 一. 首先在win10 ...
- 啪啪,打脸了!领导说:try-catch必须放在循环体外!
哈喽,亲爱的小伙伴们,技术学磊哥,进步没得说!欢迎来到新一期的性能解读系列,我是磊哥. 今天给大家带来的是关于 try-catch 应该放在循环体外,还是放在循环体内的文章,我们将从性能和业务场景分析 ...
- Rocket - decode - Term
https://mp.weixin.qq.com/s/CbBWdTlc_DESlUzd8KFcSg 介绍Term类各方法的实现. 1. prime 表示一个项是否是质项,即这 ...
- Docker 容器优雅终止方案
原文链接:Docker 容器优雅终止方案 作为一名系统重启工程师(SRE),你可能经常需要重启容器,毕竟 Kubernetes 的优势就是快速弹性伸缩和故障恢复,遇到问题先重启容器再说,几秒钟即可恢复 ...
- Java实现 LeetCode 785 判断二分图(分析题)
785. 判断二分图 给定一个无向图graph,当这个图为二分图时返回true. 如果我们能将一个图的节点集合分割成两个独立的子集A和B,并使图中的每一条边的两个节点一个来自A集合,一个来自B集合,我 ...