5.7 mybatis之ResultHandler流式处理数据

原创 已于 2024-04-11 16:43:47 修改 · 1.2k 阅读 · 8 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#mybatis #ResultHandler #流式处理

于 2024-04-10 00:18:53 首次发布

文章目录


当一次性从数据库中查询大量数据时，由于结果集非常大，容易导致内存OOM，此时可以采用 分页查询或者可以利用 Mybatis 中的 ResultHandler 来实现流式输出，分页查询前面章节已经介绍过了，下面看下mybatis如何利用流式输出的，流式输出就像游标一样，一条条的处理目标结果集。

Mybatis 中的 ResultHandler 相当于数据结果集的处理器，它是一个回调函数（Callback），用来处理每一行数据的结果，这个回调函数可以在查询结果处理到一定量时触发，对结果集数据进行定制化处理。

ResultHandler 的使用可以大幅提升数据处理的效率，当我们需要处理大量的数据时，一般会使用 ResultHandler 来进行结果的处理，避免一次查询就全部返回结果，浪费内存资源或造成 OOM。

下面我们看下如何利用ResultHandler一条一条的数据处理

还是以下面的PERSON表为例
在这里插入图片描述
我们要查询persion_id大于多少的数据，对应的mapper文件如下所示

<resultMap id="resultMap1" type="com.lzj.bean.Person">
    <result column="PERSON_ID" property="id"></result>
    <result column="PERSON_NAME" property="name"></result>
    <result column="PERSON_AGE" property="age"></result>
最低0.47元/天 解锁文章

200万优质内容无限畅学
【Mybatis】Mybatis三大组件之ResultSetHandler
qq_34501351的博客
02-19 1260
ResultSetHandler用于处理sql的查询结果与对象的封装。 public <E> List<E> query(Statement statement, ResultHandler resultHandler) throws SQLException { PreparedStatement ps = (PreparedStatement) statement; ps.execute(); // 使用结果处理器处理ps中的查询结果 retu
Mybatis流式读取Mysql数据
Wellven_chen的博客
05-21 1139
常见Mybatis流式读取Mysql数据有以下2种形式： 一种是通过ResultHandler<T>接口，另一个是通过Cursor<T>接口。 具体这两种方式有什么区别，
1. 使用MyBatis的ResultHandler实现流式查询，避免大数据量一次加载
大头鱼
03-11 4550
使用MyBatis的ResultHandler实现流式查询，避免大数据量一次加载
MyBatis-Plus流式查询深度解析：高效处理百万级数据的实战指南
最新发布
xiaoyu❅的博客
06-25 1140
流式查询（Streaming Query）是一种逐条获取查询结果的数据库访问模式。与传统查询方式相比，它不会一次性将所有结果加载到内存中，而是通过游标（Cursor）逐条处理。核心价值🚀 突破内存限制处理海量数据⚙️ 与MyBatis-Plus无缝集成🔧 通过fetchSize精细控制性能最佳实践始终在事务中使用使用try-with-resources确保关闭根据网络环境调整fetchSize避免在流式查询中执行复杂操作。
Mybatis的流式查询
weixin_42081106的博客
07-02 2872
Mybatis 中的 ResultHandler 相当于数据结果集的处理器，它是一个回调函数（Callback），用来处理每一行数据的结果，这个回调函数可以在查询结果处理到一定量时触发，对结果集数据进行定制化处理。ResultHandler 的使用可以大幅提升数据处理的效率，当我们需要处理大量的数据时，一般会使用 ResultHandler 来进行结果的处理，避免一次查询就全部返回结果，浪费内存资源或造成 OOM。
Mybatis 中 ResultHandler 的用法（获取大结果集，实现结果流式输出）
长安明月的博客
09-20 7319
Mybatis 中的 ResultHandler 相当于数据结果集的处理器，它是一个回调函数（Callback），用来处理每一行数据的结果，这个回调函数可以在查询结果处理到一定量时触发，对结果集数据进行定制化处理。ResultHandler 的使用可以大幅提升数据处理的效率，当我们需要处理大量的数据时，一般会使用 ResultHandler 来进行结果的处理，避免一次查询就全部返回结果，浪费内存资源或造成 OOM。import org// SQL 返回值为 void，所以我们并没有接收这个返回值。
读mybatis源码之十二：结果集处理器
我爱逛菜园
06-21 2985
主要是处理结果集，在声明处理器基类中：
使用MyBatis的ResultHandler实现流式查询，避免查询大量数据长耗时或GC（常用在表格导出）
Java小白的博客
10-18 429
在Dao层加注解@Options和@ResultType；ResultSetType.TYPE_FORWORD_ONLY 设置结果集的游标只能向下滚动,fetchSize需要设置为Integer.MIN_VALUE游标才能生效。在service层查询接口中传入参数ResultHandler<Object> handler，查询结果会自动映射；使用流式查询必须在事务中才能生效。数据库查询数据量较大时，一次性加载所有数据可能会导致内存溢出或性能下降，使用流式查询可以有效的提高效率。数据和表格表头对应关系。
MyBatis如何实现流式查询的示例代码
08-19
MyBatis流式查询示例代码 MyBatis是一个流行的持久层框架，它提供了多种方式来实现数据库的交互操作，其中流式查询是一种非常重要的机制，它能够降低内存使用，提高查询效率。在本文中，我们将详细介绍MyBatis如何...
tidb(mysql5.7) springboot mybatis-plus
09-07
java Springboot开发必备环境 ： ...统一参数校验，自定义异常提醒，统一日志，统一响应返回，统一异常处理 。 推荐2: mybatis-plus 采用最新的生成代码工具 推荐3： 将多个基础功能整理后，并用单元测试验证。
MyBatisPlus
weixin_51933701的博客
08-21 1461
在 MyBatis 中（MyBatis-Plus 继承自 MyBatis），你可以通过自定义。
mybatis-ResultHandler解析
热门推荐
qq_28695733的博客
07-08 1万+
概述 结果值的处理相当于参数的处理会复杂一些，负责结果值转换的类是 ResultSetHandler public interface ResultSetHandler { /** * 处理数据集并返回 * @param stmt * @param <E> * @return * @throws SQLException */ <E> List<E> handleResultSets(Statement stmt) throw
Mybatis 自定义ResultHandler（结果处理器）正确使用姿势
CNAHYZ的博客
02-02 3761
节省开发时间，提升工作效率----使用结果处理器对Mybatis查询的结果集进行统一批量处理，如进行类型转换、数据变更等等。
Mybatis之批处理流式查询
上善若泪
06-07 3303
流式查询指的是查询成功后不是返回一个集合而是返回一个迭代器，应用每次从迭代器取一条查询结果。流式查询的好处是能够降低内存使用。如果没有流式查询，我们想要从数据库取1000 万条记录而又没有足够的内存时，就不得不分页查询，而分页查询效率取决于表设计，如果设计的不好，就无法执行高效的分页查询。因此流式查询是一个数据库访问框架必须具备的功能。MyBatis中使用流式查询避免数据量过大导致OOM执行一个流式查询后，数据库访问框架就不负责关闭数据库连接了，需要应用在取完数据后自己关闭。
MyBatis 源码解析：ResultHandler 设计与应用
qq_40254606的博客
09-15 1834
MyBatis 中的 `ResultHandler` 接口允许开发者在 SQL 查询过程中自定义结果集的处理方式，避免将所有结果加载到内存中。它在处理大量数据或特定业务逻辑时非常实用。本文将深入解析 MyBatis 中 `ResultHandler` 的工作原理，并通过自定义实现 `ResultHandler` 类，演示如何灵活处理查询结果。
Mybatis流式查询之ResultHanlde
relife
07-22 7498
0.前言 如果目标数据量过大，又需要全量查询，不能分页的情况，例如导出excel，就需要流式查询 1. 实例 1.1.Mybaits的jar包引入 注：idea必须配置build，否则扫描不到src下的xml文件 <?xml version="1.0" encoding="UTF-8"?> <project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/XMLSche
springBoot集成mybatis使用ResultHandler返回map数据类型
privateobject的博客
10-17 3894
> 在 springBoot 的 web 项目中，平时查询数据返回都是：集合 list 、实体类 bean 、数量 int / long 。如果返回 map ，也是`Map`或`Map`，直接返回`Map`或`Map`会报错，通过查询得知，可以使用 ResultHandler 实现。 > ResultHandler，对返回的结果进行处理，最终得到自己想要的数据格式
mybatis的流式查询，或者一次查询处理千万级数据
qq_19891197的博客
11-29 4836
mybatis的流式查询，或者一次查询处理千万级数据
mybatis - ResultSetHandler
面朝大海，春暖花开
10-08 390
mybatis - ResultSetHandler ResultSetWrapper private final ResultSet resultSet; private final TypeHandlerRegistry typeHandlerRegistry; private final List<String> columnNames = new ArrayList<>(); private final List<String> classNames = new
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值