bboss hadoop hdfs大数据抽取工具
bboss大数据抽取工具功能特点如下： 实现db到hadoop hdfs数据导入功能，提供高效的分布式并行处理能力，可以采用数据库分区、按字段分区、分页方式并行批处理抽取db数据到hdfs文件系统中；能有效解决按字段分区抽取数据时，各分区数据不均匀导致作业任务处理节点负载不均衡的问题。 灵活的作业任务处理模式：可以增量方式执行作业任务，作业可以停止后重新执行，重新执行时只需执行未完成的作业任务，也可以全部重新执行所有作业任务；当停止作业后，可以在原有作业切分的基础进一步切分出子任务，然后再重新执行作业，提升系统处理数据效率。 数据处理服务器为每个作业分配独立的作业任务处理工作线程和任务执行队列，作业之间互不干扰 采用异步事件驱动模式来管理和分发作业指令、采集作业状态数据。 通过管理监控端，可以实时监控作业在各个数据处理节点作业任务的实时运行状态，查看作业的历史执行状态，方便地实现提交新的作业、重新执行作业、停止正在执行的作业、清除作业执行监控数据、同步作业任务执行状态等操作 工具架构拓扑图： 所采用的技术体系： Bboss ioc：轻量级ioc容器，ioc扩展属性配置语法 Bboss持...
