public void addBatchScyh(List<User> userList) throws Exception {
final List<User> yhList = userList;
final Long drsj = CalendarUtil.getLongDateTime();
if(yhList != null && yhList.size() > 0){
this.getJdbcTemplate().batchUpdate("insert into user (id,yhbh,yhxm,lxfs,bbtnz,xtxjd,drsj,drpc,yhbz) VALUES (SEQ_USER_ID.nextval,?, ?, ?, ?, ? ,? ,? ,?)", new BatchPreparedStatementSetter() {
@Override
public void setValues(PreparedStatement ps, int i) throws SQLException {
User user = yhList.get(i);
ps.setBigDecimal(1, BigDecimal.valueOf(Long.decode(user.getYhbh())));
ps.setString(2, user.getYhxm());
ps.setLong(3, Long.decode(user.getLxfs()));
ps.setString(4, user.getBbtnz());
ps.setString(5, user.getXtxjd());
ps.setLong(6, drsj);
ps.setBigDecimal(7, BigDecimal.valueOf(Long.decode(user.getDrpc())));
ps.setString(8, "1");
//每2000条进行事物提交
if (i%2000 == 0) {
ps.executeBatch(); //执行prepareStatement对象中所有的sql语句
getSession().flush();//数据库与缓存同步
getSession().clear();//清空缓存
}
}
@Override
public int getBatchSize() {
return yhList.size();
}
});
}
}
工作的过程中遇到了一个要海量插入数据的问题,在网上查了很多资料,归纳起来,最快,效率最高的方法当然是采用,JDBC了,但是系统采用的是SSH的架构,退而求其次选择Spring中的JDBCTemplate批量插入操作,其中,每2000条数据提交一次并使session与缓存同步,这样的操作,我也是“小马过河”试一试,但实际的运行结果,表明,确实提高了效率,5万条数据的导入时间大概为40s左右,还行吧,反正是满足领导的要求了,嘿嘿~~
分享到:
相关推荐
spring-jdbcTemplate实例工程
使用Spring的JdbcTemplate调用Oracle的存储过程
使用Spring的JdbcTemplate实现分页功能
spring 中对大数据的处理,包括clob,blob的数据。比之jdbc下简便很多。
strut2+spring+springjdbctemplate做的简易登录系统
Spring-JdbcTemplate
spring是一站式框架,当然也对数据持久层做了一部分的处理。spring通过JdbcTemplate对数据操作。本案例详细介绍了spring的jdbcTemplate和c3p0的整合。
Spring:JdbcTemplate使用指南 Spring:JdbcTemplate使用指南
自己做的一个小案例,spring 的ioc小案例,你也可以去以下链接看文章讲解https://blog.csdn.net/zyqblog/article/details/82590003
配制Spring事务和JdbcTemplate使用 配制Spring事务和JdbcTemplate使用
Spring的JdbcTemplate插入操作返回主键ID的方法 - - ITeye技术网站
spring jdbctemplate组件的简单实例。可以直接运行该实例来学习spring的jdbctemplate。处于初学者,或开发互联网性能要求较高的比较有料。
包括MyBatis-Plus提供的批量更新,JdbcTemplate提供的批量更新,在xml中循环拼接sql批量更新、case when语句批量更新、replace into方式批量更新、ON DUPLICATE KEY UPDATE批量更新。 适用于对Spring Boot和数据库...
使用Spring的JdbcTemplate和BeanPropertyRowMapper完成的JDBC我的实例 博文链接:https://zmx.iteye.com/blog/373454
一个简单的spring的jdbcTemplate扩展
最近项目中的工作流需要查询多个数据源的数据,数据源可能是不同种类的:如sql server,oracl等等,一开始是用的配置实现,后来发现在项目运行中,可能需要动态的添加更多不同类型的数据源,所以最终的逻辑是将数据源...
struts+spring +jdbctemplate demo http://knight-black-bob.iteye.com/blog/2262258
jdbc批量方法。多个sql语句可以一起执行
Spring_JdbcTemplate的用法实例
一个非常简单基于注解的Spring JdbcTemplate,供初学者参考用。