demo 地址:learn-mybatis · Sean/spring-cloud-alibaba - 碼雲(gitee.com)
注意要點:
@GetMapping("/mybatis-batch-insert")
public String mybatisBatchInsert(){
// 開始時間
long stime = System.currentTimeMillis();
// 批次插入
orderService.mySaveBatch(list);
// 結束時間
long etime = System.currentTimeMillis();
return "mybatis 批次插入 1w 條資料的時間: " + (etime - stime) / 1000.0 + "秒";
}
Mybatis 的批次插入是呼叫 mapper 的批次插入介面,使用 @GetMapping("/mybatis-batch-insert")
public String mybatisBatchInsert(){
// 開始時間
long stime = System.currentTimeMillis();
// 批次插入
orderService.mySaveBatch(list);
// 結束時間
long etime = System.currentTimeMillis();
return "mybatis 批次插入 1w 條資料的時間: " + (etime - stime) / 1000.0 + "秒";
}
MyBatis-Plus 的批次插入是呼叫 mybatis-plus 的 IService 介面的 saveBatch 進行批次插入MyBatis 批次更新介面
@GetMapping("/mybatis-batch-update")
public String mybatisBatchUpdate(){
long stime = System.currentTimeMillis();
orderService.myUpdateBatchById(updateList);
long etime = System.currentTimeMillis();
return "mybatis 批次更新 1w 條資料的時間: " + (etime - stime) / 1000.0 + "秒";
}
MyBatis 的批次插入是呼叫 mapper 的批次更新介面,使用
MyBatis-Plus 批次更新介面
@GetMapping("/mybatis-plus-batch-update")
public String mybatisPlusBatchUpdate(){
long stime = System.currentTimeMillis();
orderService.updateBatchById(updateList);
long etime = System.currentTimeMillis();
return "mybatis plus 批次更新 1w 條資料的時間: " + (etime - stime) / 1000.0 + "秒";
}
MyBatis -Plus 的批次更新是呼叫 mybatis-plus 的 IService 介面的 updateBatchById 進行批次更新
經過預熱,儘量避免了快取的影響。
資料量:1w 條資料,每條資料 4 個欄位
測試結果:
資料量:1w 條資料,每條資料更新 4 個欄位
測試結果:
MyBatis 的批次插入 xml
<insert id="mySaveBatch">
insert into order_table(id, product_id, total_amount, status) values
<foreach collection="list" separator="," item="item">
(#{item.id}, #{item.productId}, #{item.totalAmount}, #{item.status})
</foreach>
</insert>
通過
insert into order_table(id, product_id, total_amount, status) values(1, 2. 2.0, 1),(2, 2, 2.0, 1);
MyBatis-Plus 的批次插入本質採用 for 遍歷每條資料依次插入,但使用了批次處理優化,預設是每 1000 條資料,重新整理一次 statement 提交到資料庫,執行插入操作。
注意:批次處理需要在資料庫連線中新增 rewriteBatchedStatements=true 否則 jdbc 驅動在預設情況下會無視executeBatch() 語句
原始碼如下:
@Transactional(rollbackFor = Exception.class) // 開啟事務
@Override
public boolean saveBatch(Collection<T> entityList, int batchSize) {
String sqlStatement = getSqlStatement(SqlMethod.INSERT_ONE); // 獲得插入 statement
// 執行批次處理操作
// 引數是:待插入集合,批次大小(預設1000),函數式介面 accept
return executeBatch(entityList, batchSize, (sqlSession, entity) -> sqlSession.insert(sqlStatement, entity));
}
public static <E> boolean executeBatch(Class<?> entityClass, Log log, Collection<E> list, int batchSize, BiConsumer<SqlSession, E> consumer) {
Assert.isFalse(batchSize < 1, "batchSize must not be less than one");
return !CollectionUtils.isEmpty(list) && executeBatch(entityClass, log, sqlSession -> {
int size = list.size();
int idxLimit = Math.min(batchSize, size);
int i = 1;
// 遍歷插入
for (E element : list) {
// 呼叫 sqlSession.insert(sqlStatement, entity));
// 對元素執行插入操作,但此時資料庫還沒真正執行插入語句
consumer.accept(sqlSession, element);
// 計數達到 1000 或者 集合結束
if (i == idxLimit) {
// 重新整理 statement 提交批次處理語句,資料庫真正執行 SQL
sqlSession.flushStatements();
idxLimit = Math.min(idxLimit + batchSize, size);
}
i++;
}
});
}
MyBatis 的批次更新 xml
<update id="myUpdateBatchById">
<foreach collection="list" item="item" index="index" open="" close="" separator=";">
update order_table
<set>
product_id = #{item.productId},
total_amount = #{item.totalAmount},
status = #{item.status}
</set>
where id = #{item.id}
</foreach>
</update>
通過
update order_table set product_id = 1, total_amount = 2, status = 1 where id = 1;
update order_table set product_id = 1, total_amount = 2, status = 1 where id = 2;
MyBatis-Plus 批次更新的原理基本和其批次插入的原理一致,都是呼叫 executeBatch 執行批次處理操作。
對於批次插入,MyBatis 拼接 SQL 的寫法比 MyBatis-Plus 的批次插入方法有明顯更高的效能。
但在開啟批次處理優化之後,MyBatis-Plus 的方法效能更高了。
MyBatis:
MyBatisPlus:
總結:
對於批次更新,MyBatis 拼接 SQL 的寫法與 MyBatis-Plus 的批次更新方法無明顯的效能差別.
大於巨量資料量,拼接寫法甚至容易出現記憶體耗盡等問題,相比之下 MyBatis-Plus 的方法更優。
總結:建議使用 MyBatis-Plus