MyBatis的前身就是著名的Ibatis,不知何故脱离了Apache改名为MyBatis。
MyBatis所说是轻量级的ORM框架,在网上看过一个测试报告,感觉相比于Hibernate来说,优势并不明显。
下面说一下比较有趣的现象,根据MyBatis的官方文档,在获得sqlSession时,它有为批量更新而专门准备的:
- session = sessionFactory.openSession();//用于普通update
- session = sessionFactory.openSession(ExecutorType.BATCH, true);//用于批量update
- <insert id="insert" parameterType="sdc.mybatis.test.Student">
- <!-- WARNING - @mbggenerated This element is automatically generated by
- MyBatis Generator, do not modify. This element was generated on Mon May 09
- 11:09:37 CST 2011. -->
- insert into student (id, name, sex,
- address, telephone, t_id
- )
- values (#{id,jdbcType=INTEGER}, #{name,jdbcType=VARCHAR},
- #{sex,jdbcType=VARCHAR},
- #{address,jdbcType=VARCHAR}, #{telephone,jdbcType=VARCHAR}, #{tId,jdbcType=INTEGER}
- )
- </insert>
1、 我不清楚原因在哪里, 就配置了MyBatis的log4j,想查看下日志。下载了log4j.jar和commons-logging.jar并配置到项目的类路径,然后在代码路径下新建文件log4j.properties,内容如下:
- log4j.rootLogger=DEBUG, stdout
- # SqlMap logging configuration...
- log4j.logger.com.ibatis=DEBUG
- log4j.logger.com.ibatis.common.jdbc.SimpleDataSource=DEBUG
- log4j.logger.com.ibatis.sqlmap.engine.cache.CacheModel=DEBUG
- log4j.logger.com.ibatis.sqlmap.engine.impl.SqlMapClientImpl=DEBUG
- log4j.logger.com.ibatis.sqlmap.engine.builder.xml.SqlMapParser=DEBUG
- log4j.logger.com.ibatis.common.util.StopWatch=DEBUG
- log4j.logger.java.sql.Connection=DEBUG
- log4j.logger.java.sql.Statement=DEBUG
- log4j.logger.java.sql.PreparedStatement=DEBUG
- log4j.logger.java.sql.ResultSet=DEBUG
- # Console output...
- log4j.appender.stdout=org.apache.log4j.ConsoleAppender
- log4j.appender.stdout.layout=org.apache.log4j.PatternLayout
- log4j.appender.stdout.layout.ConversionPattern=%5p [%t] - %m%n
2、然后再次测试普通的sqlSession,发现日志内容中虽然插入了1000条数据,但只新建了一次连接,最后又关闭了该连接(日志如下)。也就是说MyBatis中的普通sqlSession好像已经对批量插入默认是一次连接中完成,那么还提供ExecutorType.BATCH方式干什么,况且该方式好像效率也不行,或者是我使用ExecutorType.BATCH方式不对??3、最后一点是关于数据库批量插入时sql语句级的优化,我特意测试了两种方式,在StudentMapper中配置了两种insert模式。第一种对应insert value1,insert value2,,,,;第二种对应insert values (value1, value2,....)。发现后者果然比前者快很多啊。下面是两种insert模式,及测试结果对应图:
- DEBUG [main] - Created connection 3502256.
- DEBUG [main] - ooo Connection Opened
- DEBUG [main] - ==> Executing: insert into student ( name, sex, address, telephone, t_id ) values ( ?, ?, ?, ?, ? )
- DEBUG [main] - ==> Parameters: 新人0(String), male(String), addr0(String), dd(String), 3(Integer)
- DEBUG [main] - ==> Executing: insert into student ( name, sex, address, telephone, t_id ) values ( ?, ?, ?, ?, ? )
- DEBUG [main] - ==> Parameters: 新人1(String), male(String),
- ...............
- ...............
- DEBUG [main] - xxx Connection Closed
- DEBUG [main] - Returned connection 3502256 to pool.
3、最后一点是关于数据库批量插入时sql语句级的优化,我特意测试了两种方式,在StudentMapper中配置了两种insert模式。第一种对应insert value1,insert value2,,,,;第二种对应insert values (value1, value2,....)。发现后者果然比前者快很多啊。下面是两种insert模式,及测试结果对应图:
- <!-- 在外部for循环调用一千次 -->
- <insert id="insert" parameterType="sdc.mybatis.test.Student">
- insert into student (id, name, sex,
- address, telephone, t_id
- )
- values (#{id,jdbcType=INTEGER}, #{name,jdbcType=VARCHAR},
- #{sex,jdbcType=VARCHAR},
- #{address,jdbcType=VARCHAR}, #{telephone,jdbcType=VARCHAR}, #{tId,jdbcType=INTEGER}
- )
- </insert>
- <!-- 批量 ,传入一个长度为1000的list -->
- <insert id="insertBatch" >
- insert into student ( <include refid="Base_Column_List" /> )
- values
- <foreach collection="list" item="item" index="index" separator=",">
- (null,#{item.name},#{item.sex},#{item.address},#{item.telephone},#{item.tId})
- </foreach>
- </insert>
附录:
- MyBatis配置文件的DTD文件(与Ibatis3不同):http://mybatis.org/dtd/
- MyBatis的中文手册:http://mybatis.googlecode.com/files/MyBatis%203%20User%20Guide%20Simplified%20Chinese.pdf
评论
- // 关闭自动执行
- con.setAutoCommit(false);
- PreparedStatement stmt = con.prepareStatement("INSERT INTO employees VALUES (?, ?)");
- for ( int i = 0; i < 10000; i++) {
- stmt.setInt(1, i+1);
- stmt.setString(2, "NAME "+(i+1));
- stmt.addBatch();
- }
- // 提交要执行的批处理
- int[] updateCounts = stmt.executeBatch();
2、iBatis框架对batch处理的支持:
- client.startBatch();
- for(int i = 0; i < 10000; i++) {
- client.delete("delete from order where id=?",i);
- }
- client.executeBatch();
3、Mybatis框架对batch处理的支持:
- SqlSession session = sqlSessionFactory().openSession(ExecutorType.BATCH, false);
- for(int i = 0; i < 10000; i++) {
- session.delete("delete from order where id=?",i);
- }
- session.commit();
- session.close();
4、多行插入是数据库级别的,需要数据库的支持,跟框架,JDBC无关。
INSERT INTO <TABLE> subquery.
INSERT INTO <TABLE> VALUES (......),(......),(......)
****多行插入肯定是性能是最好的,他完全交给了DBMS来处理,但是类似于回滚,提交等业务处理你就没法控制了。
****由于框架的重写,Mybatis的性能比iBatis或者JDBC差很多
****任何ORM框架都要经由JDBC,所以从性能上来说: 纯SQL > JDBC > ORM框架
这里有MyBatis的发展经历http://www.mybatis.org/about.html,可以看出应该是作者和Apache基金会有分歧(Apache基金会对于代码,文档都要求很严),2004到2010的6年间,数据库有了很大的变化,但是iBatis版本一致没有大的改动。
不错
大概是这么个样子,未测试。
batch insert 比这个慢是再正常不过了。
你可以随便 dump 一个 database 出来,看看database生成的sql是怎么写的。
我想瞬间,你就了解了。
如何 dump 一个 database 出来 ?
数据太多也会报错。
这个很正常。
大概是mysql 会根据他自己的cache size 来进行切分。
但是如果 values 后面值太多,他的cache 放不下,自然要报错的。
即便是mysql 自己的dump,如果你的数据量够大,你会发现,一张表他是会dump成若干条
insert into ... values() **
既然mysql 自己的dump工具都会做这件事,那肯定说明数据太多是要出错的。关键是这个阈值是多少,估计这个和每台server的设置有关。
所以肯定不能数据太多。
batch insert 比这个慢是再正常不过了。
你可以随便 dump 一个 database 出来,看看database生成的sql是怎么写的。
我想瞬间,你就了解了。
如何 dump 一个 database 出来 ?
应该在数据库服务器上打开statement的日志,你就明白了
我也想知道
batch insert 比这个慢是再正常不过了。
你可以随便 dump 一个 database 出来,看看database生成的sql是怎么写的。
我想瞬间,你就了解了。
如何 dump 一个 database 出来 ?
应该在数据库服务器上打开statement的日志,你就明白了
谢谢
hehe ,莫激动
- // 关闭自动执行
- con.setAutoCommit(false);
- PreparedStatement stmt = con.prepareStatement("INSERT INTO employees VALUES (?, ?)");
- for ( int i = 0; i < 10000; i++) {
- stmt.setInt(1, i+1);
- stmt.setString(2, "NAME "+(i+1));
- stmt.addBatch();
- }
- // 提交要执行的批处理
- int[] updateCounts = stmt.executeBatch();
2、iBatis框架对batch处理的支持:
- client.startBatch();
- for(int i = 0; i < 10000; i++) {
- client.delete("delete from order where id=?",i);
- }
- client.executeBatch();
3、Mybatis框架对batch处理的支持:
- SqlSession session = sqlSessionFactory().openSession(ExecutorType.BATCH, false);
- for(int i = 0; i < 10000; i++) {
- session.delete("delete from order where id=?",i);
- }
- session.commit();
- session.close();
4、多行插入是数据库级别的,需要数据库的支持,跟框架,JDBC无关。
INSERT INTO <TABLE> subquery.
INSERT INTO <TABLE> VALUES (......),(......),(......)
****多行插入肯定是性能是最好的,他完全交给了DBMS来处理,但是类似于回滚,提交等业务处理你就没法控制了。
****由于框架的重写,Mybatis的性能比iBatis或者JDBC差很多
****任何ORM框架都要经由JDBC,所以从性能上来说: 纯SQL > JDBC > ORM框架
这里有MyBatis的发展经历http://www.mybatis.org/about.html,可以看出应该是作者和Apache基金会有分歧(Apache基金会对于代码,文档都要求很严),2004到2010的6年间,数据库有了很大的变化,但是iBatis版本一致没有大的改动。
+
这玩意还是不错的
- // 关闭自动执行
- con.setAutoCommit(false);
- PreparedStatement stmt = con.prepareStatement("INSERT INTO employees VALUES (?, ?)");
- for ( int i = 0; i < 10000; i++) {
- stmt.setInt(1, i+1);
- stmt.setString(2, "NAME "+(i+1));
- stmt.addBatch();
- }
- // 提交要执行的批处理
- int[] updateCounts = stmt.executeBatch();
2、iBatis框架对batch处理的支持:
- client.startBatch();
- for(int i = 0; i < 10000; i++) {
- client.delete("delete from order where id=?",i);
- }
- client.executeBatch();
3、Mybatis框架对batch处理的支持:
- SqlSession session = sqlSessionFactory().openSession(ExecutorType.BATCH, false);
- for(int i = 0; i < 10000; i++) {
- session.delete("delete from order where id=?",i);
- }
- session.commit();
- session.close();
4、多行插入是数据库级别的,需要数据库的支持,跟框架,JDBC无关。
INSERT INTO <TABLE> subquery.
INSERT INTO <TABLE> VALUES (......),(......),(......)
****多行插入肯定是性能是最好的,他完全交给了DBMS来处理,但是类似于回滚,提交等业务处理你就没法控制了。
****由于框架的重写,Mybatis的性能比iBatis或者JDBC差很多
****任何ORM框架都要经由JDBC,所以从性能上来说: 纯SQL > JDBC > ORM框架
这里有MyBatis的发展经历http://www.mybatis.org/about.html,可以看出应该是作者和Apache基金会有分歧(Apache基金会对于代码,文档都要求很严),2004到2010的6年间,数据库有了很大的变化,但是iBatis版本一致没有大的改动。
batch insert 比这个慢是再正常不过了。
你可以随便 dump 一个 database 出来,看看database生成的sql是怎么写的。
我想瞬间,你就了解了。
如何 dump 一个 database 出来 ?
batch insert 比这个慢是再正常不过了。
你可以随便 dump 一个 database 出来,看看database生成的sql是怎么写的。
我想瞬间,你就了解了。
相关推荐
Mybatis批量foreach merge into的用法,这是介绍Mybatis批量foreach merge into的用法的文档
mybatis批量添加的时候报错总结报错 parameter'_frch_item_0 not found
只提供代码,自己去下载相关jar包谢谢只提供代码,自己去下载相关jar包谢谢只提供代码,自己去下载相关jar包谢谢只提供代码,自己去下载相关jar包谢谢只提供代码,自己去下载相关jar包谢谢
mybatis 框架批量增删改代码 示例 含java与xml
测试在单元测试中
MyBatis动态SQL,MyBatis批量插入(Oracle数据库)[收集].pdf
Mybatis与JDBC批量插入MySQL数据库性能测试,资源包含文档、代码和数据库。
Java实现Mybatis将数据批量插入到Oracle中
mybatis 批量插入 嵌套select
mybatis配置及测试项目:主要包含mybatis环境包,mysql驱动包,日志文件配置及环境测试案例
MyBatis批量插入,效率经测试,1000条数据,批量插入和单条插入,执行效率至少快一倍,送上源码,供参考学习
mybatis批量添加数据的方法1
springMVC+mybatis整合及测试(亲测可运行),亲测百分之百可以运行。
本文给大家分享MyBatis批量插入(insert)数据操作知识,非常不错,具有参考借鉴价值,感兴趣的朋友一起学习吧
一、引言Mybatis可以直接传入一个集合,通过标签将集合中的数据遍历出来实现批量新增不同的数据库批量新增有区别,如下实现两种方式的批量新增二、实现2.1映射文
Java实现使用Mybatis将数据批量插入到Oracle数据库,并且可以使用Oracle序列来生成主键
NULL 博文链接:https://hzs0502030128.iteye.com/blog/2254585
本文给大家分享mybatis批量添加,修改,删除的实例代码,本文代码简单易懂,对mybatis 批量添加、修改及删除相关知识感兴趣的朋友一起学习吧
压缩包有eclipse包文件和操作步骤word文档 mybatis数据操作(增删改查+批量操作)
主要介绍了Mybatis批量插入数据返回主键的实现,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面随着小编来一起学习学习吧