每日一博 | Elasticsearch/DB 到 SFTP/FTP 的数据同步
Elasticsearch/DB到SFTP/FTP数据同步 通过bboss数据同步工具,可以非常高效快速方便地将Elasticsearch和Database中的数据实时导出(增量/全量)到文件并上传到SFTP/FTP服务器,本文通过案例来详细介绍。 1.案例源码工程 https://gitee.com/bboss/elasticsearch-file2ftp https://github.com/bbossgroups/elasticsearch-file2ftp 2.案例功能说明 串行将数据导出到文件并上传ftp和sftp 串行批量将数据导出到文件并上传ftp和sftp 并行将数据批量导出到文件并上传ftp和sftp 通过设置disableftp为true,控制只生成数据文件,禁用文件上传sftp/ftp功能(生成的文件保留在fileDir对应的目录下) 特别关注点 除了bboss同步工具通用特性(增量/全量同步、异步/同步、增删改查同步),需额外说明一下本案例中特定的特色: 支持上传失败文件重传功能 支持上传成功文件备份功能,并可指定备份多长时间 支持备份文件自动清理功能 支持按记...




