首页 文章 精选 留言 我的

精选列表

搜索[orm],共2653篇文章
优秀的个人博客,低调大师

别再 mybatis 了,融合 JPA 和超强查询的 sqltoy-orm 5.6.13 发版,强化租户隔离场景

开源地址: github:https://github.com/sagframe/sagacity-sqltoy gitee:https://gitee.com/sagacity/sagacity-sqltoy idea 插件 (可直接在 idea 中检索安装):https://github.com/imyuyu/sqltoy-idea-plugin sqltoy 脚手架项目:https://gitee.com/momoljw/sss-rbac-admin sqltoy lambda 项目:https://gitee.com/gzghde/sqltoy-plus 更新内容 1、优化多租户隔离在saveOrUpdate场景下,sql语句是merge into on () update set ,当在on里面增加了租户条件,update中就不能对该字段进行修改 JPA 部分 类似 JPA 的对象化 CRUD、对象级联加载和新增、更新 支持通过 POJO 生成 DDL 以及直接向数据库创建表 强化 update 操作,提供弹性字段修改能力,不同于 hibernate 先 load 后修改,而是一次数据库交互完成修改,确保了高并发场景下数据的准确性 改进了级联修改,提供了先删除或者先置无效,再覆盖的操作选项 增加了 updateFetch、updateSaveFetch 功能,强化针对强事务高并发场景的处理,类似库存台账、资金台账,实现一次数据库交互,完成锁查询、不存在则插入、存在则修改,并返回修改后的结果 增加了树结构封装,便于统一不同数据库树型结构数据的递归查询 支持分库分表、支持多种主键策略 (额外支持基于 redis 的产生特定规则的业务主键)、加密存储、数据版本校验 提供了公共属性赋值 (创建人、修改人、创建时间、修改时间、租户)、扩展类型处理等 提供了多租户统一过滤和赋值、提供了数据权限参数带入和越权校验 查询部分 极为直观的 sql 编写方式,便于从客户端 <--> 代码 双向快速迁移,便于后期变更维护 支持缓存翻译、反向缓存匹配 key 代替 like 模糊查询 提供了跨数据库支持能力:不同数据库的函数自动转换适配,多方言 sql 根据实际环境自动匹配、多数据库同步测试,大幅提升了产品化能力 提供了取 top 记录、随机记录等特殊场景的查询功能 提供了最强大的分页查询机制:1) 自动优化 count 语句;2) 提供基于缓存的分页优化,避免每次都执行 count 查询;3) 提供了独具特色的快速分页;4) 提供了并行分页 提供了分库分表能力 提供了在管理类项目中极为价值的:分组汇总计算、行列转换 (行转列、列转行)、同比环比、树形排序、树形汇总 相关算法自然集成 提供了基于查询的层次化数据结构封装 提供了大量辅助功能:数据脱敏、格式化、条件参数预处理等 支持多种数据库 常规的 mysql、oracle、db2、postgresql、 sqlserver、dm、kingbase、sqlite、h2、 oceanBase、polardb、guassdb、tidb 支持分布式 olap 数据库: clickhouse、StarRocks、greenplum、impala (kudu) 支持 elasticsearch、mongodb 所有基于 sql 和 jdbc 各类数据库查询 sqltoy 特点介绍: sqltoy 的核心构建思想 sqltoy 的对比 mybatis (plus) 的核心点:查询语句编写、可阅读性、可维护性 对象化 crud 是基础,但 sqltoy 有针对性的改进:update、updateSaveFetch、updateFetch 等 sqltoy 的缓存翻译,大幅减少表关联简化 sql,让你的查询性能成几何级提升 极致的分页,同样帮助你实现查询的性能大幅提升 快速分页:@fast () 实现先取单页数据然后再关联查询,极大提升速度 分页优化器:page-optimize 让分页查询由两次变成 1.3~1.5 次 (用缓存实现相同查询条件的总记录数量在一定周期内无需重复查询 sqltoy 的分页取总记录的过程不是简单的 select count (1) from (原始 sql);而是智能判断是否变成:select count (1) from 'from 后语句 ', 并自动剔除最外层的 order by sqltoy 支持并行查询:parallel="true",同时查询总记录数和单页数据,大幅提升性能 便利的跨数据库统计计算:数据旋转 便利的跨数据库统计计算:无限极分组统计 (含汇总求平均) 便利的跨数据库统计计算:同比环比 5、树形表排序汇总 6、扩展集成

优秀的个人博客,低调大师

MyBatis 的替代者,融合 JPA 和极致 SQL 编写模式的 sqltoy-orm 5.2.58 发版

开源地址: github:https://github.com/sagframe/sagacity-sqltoy gitee:https://gitee.com/sagacity/sagacity-sqltoy idea 插件 (可直接在 idea 中检索安装):https://github.com/threefish/sqltoy-idea-plugins sqltoy脚手架项目:https://gitee.com/momoljw/sss-rbac-admin sqltoy lambda项目:https://gitee.com/gzghde/sqltoy-plus 更新内容 1、存更新检测增加空缓存校验,避免内部异常(不影响实际功能)2、增加部分异常堆栈输出,便于一些异常原因分析 sqltoy 的关键优势: //------------------了解 sqltoy的关键优势: -------------------------------------------------------------------------------------------*/ //1、最简最直观的sql编写方式(不仅仅是查询语句),采用条件参数前置处理规整法,让sql语句部分跟客户端保持高度一致 //2、sql中支持注释(规避了对hint特性的影响,知道hint吗?搜oracle hint),和动态更新加载,便于开发和后期维护整个过程的管理 //3、支持缓存翻译和反向缓存条件检索(通过缓存将名称匹配成精确的key),实现sql简化和性能大幅提升 //4、支持快速分页和分页优化功能,实现分页最高级别的优化,同时还考虑到了cte多个with as情况下的优化支持 //5、支持并行查询 //6、根本杜绝sql注入问题 //7、支持行列转换、分组汇总求平均、同比环比计算,在于用算法解决复杂sql,同时也解决了sql跨数据库问题 //8、支持保留字自动适配 //9、支持跨数据库函数自适配,从而非常有利于一套代码适应多种数据库便于产品化,比如oracle的nvl,当sql在mysql环境执行时自动替换为ifnull //10、支持分库分表 //11、提供了取top、取random记录、树形表结构构造和递归查询支持、updateFetch单次交互完成修改和查询等实用的功能 //12、sqltoy的update、save、saveAll、load 等crud操作规避了jpa的缺陷,参见update(entity,String...forceUpdateProps)和updateFetch //13、提供了极为人性化的条件处理:排它性条件、日期条件加减和提取月末月初处理等 //14、提供了查询结果日期、数字格式化、安全脱敏处理,让复杂的事情变得简单,大幅简化sql或结果的二次处理工作 //-----------------------------------------------------------------------------------*/ sqltoy 特点介绍: sqltoy 的核心构建思想 sqltoy 的对比 mybatis (plus) 的核心点:查询语句编写、可阅读性、可维护性 对象化 crud 是基础,但 sqltoy 有针对性的改进:update、updateSaveFetch、updateFetch 等 sqltoy 的缓存翻译,大幅减少表关联简化 sql,让你的查询性能成几何级提升 极致的分页,同样帮助你实现查询的性能大幅提升 快速分页:@fast () 实现先取单页数据然后再关联查询,极大提升速度 分页优化器:page-optimize 让分页查询由两次变成 1.3~1.5 次 (用缓存实现相同查询条件的总记录数量在一定周期内无需重复查询 sqltoy 的分页取总记录的过程不是简单的 select count (1) from (原始 sql);而是智能判断是否变成:select count (1) from 'from 后语句 ', 并自动剔除最外层的 order by sqltoy 支持并行查询:parallel="true",同时查询总记录数和单页数据,大幅提升性能 便利的跨数据库统计计算:数据旋转 便利的跨数据库统计计算:无限极分组统计 (含汇总求平均) 便利的跨数据库统计计算:同比环比 5、树形表排序汇总 6、扩展集成

优秀的个人博客,低调大师

GO从入门到进阶教程系列 - 研发高性能ORM框架mysql管理多数据源篇

↵ 上一篇教程我们了解到了基础的GO语法,今天我们来学习如何使用GO开发一个通用的mysql管理器,下面就直接进入步骤环节,代码需要承接上一篇教程的,如有疑问请查看上一篇教程 技术版权归属 广州市金狮网络科技有限公司 (https://kingc.cn/) ,如需商用请联系公司 1. 编写一个多数据源实例的管理器对象,以及改造下之前的DBConfig对象 // 连接管理器 type RDBManager struct { OpenTx bool // 是否开启事务 DsName string // 数据源名称 Db *sql.DB // 非事务实例 Tx *sql.Tx // 事务实例 Errors []error // 操作过程中记录的错误 } // 数据库配置 type DBConfig struct { DsName string // 数据源名称 Host string // 地址IP Port int // 数据库端口 Database string // 数据库名称 Username string // 账号 Password string // 密码 } 2. 编写初始化多个数据源配置的方法,并改造下我们之前的NewMysql方法 // 初始化数据库实例 func NewMysql(conf DBConfig) (*sql.DB, error) { // 定义占位符字符串,使用配置值替换%s和%d link := fmt.Sprintf("%s:%s@tcp(%s:%d)/%s?charset=utf8", conf.Username, conf.Password, conf.Host, conf.Port, conf.Database) // 打开mysql获得实例对象 db, err := sql.Open("mysql", link) // 打开mysql失败,返回nil对象,以及返回err对象 if err != nil { return nil, errors.New("mysql初始化失败: " + err.Error()) } // 打开mysql成功返回db对象,err=nil return db, nil } var ( MASTER = "MASTER" // 默认主数据源 RDBs = map[string]*RDBManager{} // 初始化时加载数据源到集合 ) // 初始化多个数据库配置文件 func BuildByConfig(input ...DBConfig) { if len(input) == 0 { panic("数据源配置不能为空") } for _, v := range input { db, err := NewMysql(v) panic(err) if len(v.DsName) == 0 { v.DsName = MASTER } rdb := &RDBManager{ Db: db, DsName: v.DsName, } RDBs[v.DsName] = rdb } } 3. 编写获取数据源的方法,包含是否开启事务,数据源名称参数 // 获取数据源,并控制是否开启事务 func GetDB(openTx bool, ds ...string) (*RDBManager, error) { dsName := MASTER if len(ds) > 0 && len(ds[0]) > 0 { dsName = ds[0] } rt := RDBs[dsName] rdb := &RDBManager{ OpenTx: openTx, Db: rt.Db, DsName: rt.DsName, Errors: []error{}, } // 如设置事务,则初始化事务实例 if rdb.OpenTx { tx, err := rdb.Db.Begin() if err != nil { return nil, errors.New("开启事务失败:" + err.Error()) } rdb.Tx = tx } return rdb, nil } 4. 编写释放数据库资源,并提交事务的方法 // 释放资源并提交事务 func (self *RDBManager) Close() { if self.OpenTx { // 开启事务操作逻辑 if len(self.Errors) > 0 { // 如产生异常则回滚事务 self.Tx.Rollback() } else { self.Tx.Commit() // 如无异常则提交事务 } } } 5. 使用获取的数据源进行保存数据操作,我们改造下之前的CRUD方法 // 通过管理器开启事务保存数据 func (self *RDBManager) CRUD1() error { // 编写需要执行的sql createSql := "insert test_user(username, password, age, sex) values(?,?,?,?)" // 预编译sql,事务模式 stmt, err := self.Tx.Prepare(createSql) if err != nil { return errors.New("预编译失败: " + err.Error()) } // 提交编译sql对应参数 ret, err := stmt.Exec("zhangsan", "123456", 18, 1) if err != nil { return errors.New("提交数据失败: " + err.Error()) } // 保存成功后获取自增ID fmt.Println(ret.LastInsertId()) return nil } 6. 编写单元测试用例 // 单元测试 func TestCRUD1(t *testing.T) { // 数据源配置 conf := DBConfig{ DsName: "test", Host: "127.0.0.1", Port: 3306, Database: "test", Username: "root", Password: "123456", } // 初始化数据源 BuildByConfig(conf) // 获取test数据源 rdb, err := GetDB(true, "test") if err != nil { panic(err) } // 释放资源 defer rdb.Close() // 执行保存数据方法 if err := rdb.CRUD1(); err != nil { panic(err) } } 上面我们已经明白了自定义数据源管理器如何实现,通过示例演示操作,下一篇文章我会讲解如何封装对象转sql入库,敬请期待!

优秀的个人博客,低调大师

SqlToy6.0.9:Lambda补齐最后一块拼图,一套 ORM 完整覆盖“对象操作+SQL优先"

喜欢 MyBatis-Plus 的顺滑链式,又舍不得 sqltoy 的动态 SQL、缓存翻译和四层分页优化?现在不用二选一了。 SqlToy 是"JPA 式对象操作"与"SQL 优先查询"的融合体:简单的单表 CRUD 走对象,复杂的查询直接写 SQL(#[...] 动态段比 MyBatis 的 <if>/<foreach> 直观一个量级),再加缓存翻译、行转列、跨 25 种数据库方言这些硬能力。过去它相对生态的唯一"短板",是没有一套类型安全的 Lambda 条件 API——单表条件要么手写 where 字符串,要么引入第三方增强包 sqltoy-plus。 6.0.8 把 sqltoy-plus 的能力并入核心并深度重构,6.0.9 完成跨库实证修补与体验细化。 两个版本落地后,从单表 CRUD、多表 join、分组聚合,到 CTE、UNION、@fast 快速分页,lambda 层对 sqltoy 的功能面实现了完整覆盖,同时在线文档全面焕新(128 页、中英双语)。 <dependency> <groupId>com.sagframe</groupId> <artifactId>sagacity-sqltoy-spring-starter</artifactId> <version>6.0.9</version> </dependency> 一、Lambda 条件体系:三个入口,一套构建器 入口只有三个,分别对应查、改、删: lightDao.lambdaQuery(StaffInfo.class) // 查询(单表或 join) lightDao.lambdaUpdate(StaffInfo.class) // 更新(单表或 join) lightDao.lambdaDelete(StaffInfo.class) // 删除(单表或 join) 设计上最值得称道的一点:单表只是 join 的退化形态。不调用 join 步骤就是单表(条件内部转 EntityQuery/EntityUpdate,复用 sqltoy 实体链路的全部内核能力);调用 leftJoin(...).on(...) 即切换 join 通道拼装完整 SQL。不需要预先选择构建器类型,一套 API 通吃。 典型例子 1:单表动态查询——IfPresent 语法糖让"参数有没有就拼不拼"退化成一行一个条件,再也不用手写 if 判空: List<StaffInfo> list = lightDao.lambdaQuery(StaffInfo.class) .eqIfPresent(StaffInfo::getStatus, status) // null 自动跳过 .likeIfPresent(StaffInfo::getStaffName, name) // 空白串自动跳过 .inIfPresent(StaffInfo::getOrganId, organIds) // 空集合自动跳过 .betweenIfPresent(StaffInfo::getEntryTime, start, end) // 半开区间自动退化为 >= / <= .orderByDesc(StaffInfo::getEntryTime) .find(); 典型例子 2:多表 join 查 VO——字段按实体自动限定别名,AS 别名直接映射 VO 属性: List<StaffInfoVO> rows = lightDao.lambdaQuery(StaffInfoVO.class) .selectAll() .from(StaffInfo.class) .leftJoin(OrganInfo.class).on(StaffInfo::getOrganId, OrganInfo::getOrganId) .select(JoinCol.of(OrganInfo::getOrganName).as("organName")) .eqIfPresent(StaffInfo::getStatus, status) .find(); 典型例子 3:条件更新与表达式自增: lightDao.lambdaUpdate(StaffInfo.class) .set(StaffInfo::getStatus, 2) .setExpr(StaffInfo::getLoginCount, "loginCount + 1") // 基于当前值计算 .eq(StaffInfo::getStaffId, staffId) .update(); 典型例子 4:分组聚合——JoinCol.sum/avg/count/min/max 配合 groupBy/having,单表聚合无需 join: List<OrganSalaryStatVO> stats = lightDao.lambdaQuery(OrganSalaryStatVO.class) .select(JoinCol.of(StaffInfo::getOrganId).as("organId"), JoinCol.sum(StaffInfo::getSalary).as("totalSalary"), JoinCol.count(StaffInfo::getStaffId).as("staffCount")) .from(StaffInfo.class) .groupBy(StaffInfo::getOrganId) .having("sum(SALARY) > :min", MapKit.map("min", 10000)) .find(); 二、关键点清单:不只是"能写",更是"写得安全、写得跨库" 类型安全:以 User::getStatus 方法引用组织条件,字段改名、拼写错误编译期即暴露; 终端全家桶:find / getOne / findPage / findTop / findRandom / count / exists,join 通道同样可用; 严格 getOne:匹配多条直接抛异常(含匹配条数),不静默取第一条掩盖条件缺陷; 全表更新守卫:无 where 条件的 update/delete 默认抛异常,显式 .matchAll() 才放行——从 API 层杜绝"忘写 where 的全表 UPDATE"事故; 关联子查询:exists/notExists 用 OuterRef.of(外层字段) 类型安全地表达外层列引用,支持多层嵌套; join 更新/删除:采用可移植的 EXISTS-over-derived 改写,不依赖 MySQL 专有语法,已在 mysql/postgresql/sqlserver/oracle/db2 五类真库验证; 组合查询:CTE(含 WITH RECURSIVE 递归、PostgreSQL MATERIALIZED 物化 hint 自动按库保留/剔除)、@fast 分页下推派生表、UNION / UNION ALL,多个 lambdaQuery 组装成一条大 SQL,参数全局唯一不撞号; 多数据源与分页优化:.dataSource(ds) 指定本次操作的数据源;findPage 支持 .pageOptimize(...) 复用 sqltoy 四层分页优化(并行 count + count 结果缓存); 单表通道白嫖企业级能力:分库分表、缓存翻译、加解密脱敏、租户过滤在单表 lambda 查询上自动生效——这是"并入核心"相对外挂增强包的本质优势; 6.0.9 细化:新增 likeExact 族(用户输入含 % 时按普通字符匹配,不被当通配符放大命中范围)、空 groupBy/having 跳过组装、setExpr 危险形态快速失败。 三、6.0.9:跨库不是"理论上支持",是真库跑出来的 6.0.9 的主题是"跨库实证修补"——每一个修正背后都是真库实测反证: WITH xx AS MATERIALIZED 仅 PostgreSQL 系原生支持,其余库(mysql/sqlserver/oracle/db2 等)解析期自动剔除 hint,同一份 SQL 无需再按方言各写一个 sqlId(PG18/openGauss/金仓/瀚高/Vastbase 保留执行,mysql 9.3/tidb 8.5/mssql 2025 实测反证,8 库真库零跳过); to_char/to_date 的裸 HH token 全库统一为 24 小时制(DB2/H2 真库实测原先按 12 小时输出,属静默错值);to_date 目标为 PG 系时自动改写 to_timestamp,规避时间部分被静默截断; trim(from x) 省略剔除字符形态在 mysql 报 1064、oracle 报 ORA-30000,自动改写为等价 trim/ltrim/rtrim; 分页 count 缓存键由 sqlId 升级为 sqlId@dialect,多数据源跨方言执行时 count 结果不再互相串用。 同版本的 GraalVM native 支持也值得一提:6.0.8 重写了 AOT 体系(修复 5.6 以来实体反射 hints 恒为空的缺陷,按配置动态注册资源与扩展类),showcase 项目 native 镜像实测启动 0.05 秒,CRUD、缓存翻译、lambda 全链路可用——云原生与信创场景的部署形态补齐了。 四、在线文档全面焕新:128 页、中英双语 文档站点(https://sagframe.github.io/sqltoy-docs/ )完成重整,从环境准备、快速上手到企业级特性共 128 页,中英双语全覆盖: 新增 《Lambda 条件查询与更新》 专章:条件方法速查表、动态化惯用法、join/聚合/CTE/UNION 全示例,以及"安全边界与错误语义速查表"——每一处"会抛异常的场景"都写在明面上; 新增 GraalVM Native Image 指引、6.0 升级指南(含 sqltoy-plus 逐项迁移对照表)与 版本更新日志索引; 快速上手推荐 sqltoy-quickstart:clone 后 mvn test 即可运行,内置 H2 内存库,9 节课程从 CRUD 覆盖到真库跨库验证。 五、"完整覆盖"不是口号,是测试矩阵跑出来的 lambda 体系在核心仓库内配有 13 个专项测试类:从 lambda 元信息提取、SQL 组装文本锁定、H2 端到端执行、join 通道、组合查询(CTE/@fast/UNION)到多数据源与回归缺陷测试,其中 LambdaFullCoverageH2Test 以独立数据集对全部条件族、逻辑组合、动态化语法糖、查询终端、更新/删除安全边界做全功能覆盖验证;join 更新/删除与函数适配属发版多库门禁范围,经 mysql/postgresql/sqlserver/oracle/db2 等真实数据库回归。 至此,sqltoy 的能力面形成完整闭环:JPA 式对象操作(CRUD/级联/updateFetch 高并发台账)+ Lambda 条件体系(单表/join/聚合/CTE)+ SQL 模式(#[...] 动态段 + 缓存翻译 + 四层分页优化 + 行列转换/同比环比)+ 企业级特性(分库分表/多租户/脱敏加解密/数据权限)+ 25 种数据库方言 + NoSQL(ES/MongoDB)+ GraalVM native。简单业务一套链式写到底,复杂查询随时切 SQL 模式,两种风格共用同一个 LightDao。 六、升级成本:几乎为零 普通用户:只改版本号为 6.0.9; 原 sqltoy-plus 用户:移除增强包依赖,import 从 com.sagframe.sagacity.sqltoy.plus.* 换成 org.sagacity.sqltoy.lambda.*,对照文档迁移表逐项替换即可,无需任何 @Enable 配置; JDK 8 存量项目:留在 5.6.96.jre8(jre8 最终版,持续可用)。 资源直达 资源 地址 在线文档 https://sagframe.github.io/sqltoy-docs/ Lambda 专章 https://sagframe.github.io/sqltoy-docs/#/query/lambda_query GitHub https://github.com/sagframe/sagacity-sqltoy Gitee https://gitee.com/sagacity/sagacity-sqltoy 入门演示 quickstart https://github.com/sagframe/sqltoy-quickstart 全功能演示 showcase https://github.com/sagframe/sqltoy-showcase 一套 SQL 跑遍 25 种数据库,一个 LightDao 用遍对象操作与 Lambda 条件。SqlToy 6.0.9,值得你花十分钟试试。

资源下载

更多资源
优质分享App

优质分享App

近一个月的开发和优化,本站点的第一个app全新上线。该app采用极致压缩,本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

Mario

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长,特征是大鼻子、头戴帽子、身穿背带裤,还留着胡子。与他的双胞胎兄弟路易基一起,长年担任任天堂的招牌角色。

Rocky Linux

Rocky Linux

Rocky Linux(中文名:洛基)是由Gregory Kurtzer于2020年12月发起的企业级Linux发行版,作为CentOS稳定版停止维护后与RHEL(Red Hat Enterprise Linux)完全兼容的开源替代方案,由社区拥有并管理,支持x86_64、aarch64等架构。其通过重新编译RHEL源代码提供长期稳定性,采用模块化包装和SELinux安全架构,默认包含GNOME桌面环境及XFS文件系统,支持十年生命周期更新。

Sublime Text

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能,例如代码缩略图,Python的插件,代码段等。还可自定义键绑定,菜单和工具栏。Sublime Text 的主要功能包括:拼写检查,书签,完整的 Python API , Goto 功能,即时项目切换,多选择,多窗口等等。Sublime Text 是一个跨平台的编辑器,同时支持Windows、Linux、Mac OS X等操作系统。

用户登录
用户注册