Sqlsyncify 开源，一款高效同步 MySQL 数据至 ElasticSearch 的工具-低调大师

Sqlsyncify 开源，一款高效同步 MySQL 数据至 ElasticSearch 的工具

2025-11-04 86

Sqlsyncify 是一个高效的 MySQL 到 ElasticSearch 数据同步工具。

主要特点

低成本运行：无需依赖昂贵的大数据处理框架
分批处理：多段 SQL 分批导出 MySQL 数据
本地数据组装：使用 SQLite 在本地组装自定义大文档
高性能推送：多协程并发推送数据到 ElasticSearch
灵活配置：支持自定义数据源和映射规则
版本兼容：支持 ElasticSearch 5.6 和 8.x 版本

适用场景

全量数据同步：定期运行，补全可能缺失的数据
混合同步模式：可与实时同步系统配合使用
大文档数据同步：适合需要多表关联的复杂数据结构

微信关注我们

原文链接：https://www.oschina.net/news/381482

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

OpenResty Edge 25.9.17 发布

OpenResty Edge 25.9.17 版本现已发布，具体更新内容包括：特性支持异步镜像请求功能。特性支持缓存预热功能，可提前缓存热点内容。特性 Log Server API 支持通过 API Token 进行安全访问认证。特性添加"启用 S3 认证"页面规则动作，支持对 S3 存储服务的请求进行身份验证。特性添加 Edgelang API set-openidc-config，用于动态配置 OpenID Connect 身份认证参数。特性支持 DNS over TCP 协议，提供更可靠的 DNS 查询传输方式。特性添加 Edgelang API enable-custom-captcha，支持启用和配置自定义验证码功能。特性添加 Edgelang API len() 函数，用于获取数组或字符串的长度信息。特性添加 Edgelang API s3-authenticate。特性 Prometheus 监控指标新增网关集群名称展示。特性 Prometheus 上游健康检查状态指标中新增上游名称展示。特性 Edge Admin 配置文件支持 p...

2025-11-04

93

dbVisitor v6.1.0 已经发布，全功能数据库访问工具此版本更新内容包括：影响范围无更新内容 [新增] 新增 dbvisitor-driver 子项目，它提供了一个灵活的 JDBC 驱动适配器实现。旨在抽象 JDBC 驱动的实现细节，使非关系型数据库能够通过请求/响应模型快速集成到基于 JDBC 的应用程序中。 [新增] 新增 jdbc-redis 驱动适配器，它允许开发者使用标准的 JDBC 接口和命令的方式来操作 Redis 数据。 jdbc-redis 特性：支持 140+ 常用命令，涵盖 DB、Server、Keys、List、Set、StoreSet、String、Hash 命令集。支持 JDBC 标准接口，包括 Connection、Statement、PreparedStatement、ResultSet 等。支持命令参数占位符 “?”，并使用 PreparedStatement 设置参数。支持多命令执行并通过 JDBC 标准方法获取多命令执行结果。支持 Statement 的 maxRows、fetchSize、timeoutSec 属性...

2025-11-04

68

资源下载

更多资源

优质分享App

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题，腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构，目前腾讯云软件源站支持公网访问和内网访问。

Nacos

Nacos /nɑ:kəʊs/ 是 Dynamic Naming and Configuration Service 的首字母简称，一个易于构建 AI Agent 应用的动态服务发现、配置管理和AI智能体管理平台。Nacos 致力于帮助您发现、配置和管理微服务及AI智能体应用。Nacos 提供了一组简单易用的特性集，帮助您快速实现动态服务发现、服务配置、服务元数据、流量管理。Nacos 帮助您更敏捷和容易地构建、交付和管理微服务平台。

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。