Piflow —— 基于分布式框架的大数据流水线系统-低调大师

Piflow —— 基于分布式框架的大数据流水线系统

2021-02-14 644 89

PiFlow 是一个基于分布式计算框架Spark开发的大数据流水线系统。该系统将数据的采集、清洗、计算、存储等各个环节封装成组件，以所见即所得方式进行流水线配置。简单易用，功能强大。它具有如下特性：

简单易用：可视化配置流水线，实时监控流水线运行状态，查看日志
功能强大：提供100+的数据处理组件，包括Hadoop 、Spark、MLlib、Hive、Solr、Redis、MemCache、ElasticSearch、JDBC、MongoDB、HTTP、FTP、XML、CSV、JSON等，同时集成了微生物领域的相关算法。
扩展性强：支持自定义开发数据处理组件
性能优越：基于分布式计算引擎Spark开发

微信关注我们

原文链接：https://www.oschina.net/p/piflow

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

2021-02-14 08:01:00

每日一博 | Nacos 快速上手

Nacos 快速上手简介准备工作部署 Spring Boot 集成配置说明 Spring Cloud + Nacos Dubbo + Nacos 问题及解决方式微服务现在越来火，有基于 Spring Cloud Netflix 体系的，也有基于 Spring Cloud Alibaba 为体系的。从以前的 Eureka 注册中心、Spring Cloud Config 配置中心、Spring Cloud Bus消息总线到完全可以替代他们的 Nacos 出现，微服务技术体系的未来发展方向愈加清晰。所以，学会并了解如何使用 Nacos 是十分重要的。Nacos 不仅仅可以作为配置中心使用，还可以作为注册中心使用，其有很多十分优秀的特性，部署起来也十分方便。主要目的：熟练使用 Nacos；基于 Spring Cloud Alibaba 体系进行项目基础 Demo 搭建，便于后续源码分析；整合 Dubbo，便于后续源码分析；手机用户请横屏获取最佳阅读体验，REFERENCES中是本文参考的链接，如需要链接和更多资源，可以加入『知识星球』获取长期知识分享服务。简介动态配...

557

2021-02-14 08:15:00

Thunderbird 78 将被移植到 Ubuntu 20.04 LTS

Ubuntu 开发人员已决定将最新版本的 Thunderbird 移植到 Ubuntu LTS 版本。 Ubuntu 20.04.2 LTS 已经发布一段时间了，而 Ubuntu 的开发人员则发现他们在处理广受欢迎的开源电子邮件客户端上处于棘手的位置：将安全修复程序反向移植到 Thunderbird 68。移植最新版本。 Ubuntu 最被用户看重的一个方面就是稳定性，尤其是 LTS 版本。也正因如此，Ubuntu LTS 通常不附带最新版本的软件。最初，Ubuntu 20.04 随 Thunderbird 68 一起提供。但是，由于 Mozilla 早前已不再支持该版本，因此 Thunderbird 68 将不再能够接收到任何安全更新。而这就成了问题的根源。因此，Ubuntu 的开发人员必须在上述两个选项之间进行抉择。最终，他们选择了将最新版本的 Thunderbird 移植至 Ubuntu 上。这将会为用户带来更多功能、更好的安全性以及更好的稳定性。但与此同时这也会对某些用户造成困扰，因为并非所有 Thunderbird 扩展都可以在最新版本中使用。例如，新版 Thund...

565

资源下载

更多资源

优质分享Android(本站安卓app)

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

Mario，低调大师唯一一个Java游戏作品

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长，特征是大鼻子、头戴帽子、身穿背带裤，还留着胡子。与他的双胞胎兄弟路易基一起，长年担任任天堂的招牌角色。

Oracle Database，又名Oracle RDBMS

Oracle Database，又名Oracle RDBMS，或简称Oracle。是甲骨文公司的一款关系数据库管理系统。它是在数据库领域一直处于领先地位的产品。可以说Oracle数据库系统是目前世界上流行的关系数据库管理系统，系统可移植性好、使用方便、功能强，适用于各类大、中、小、微机环境。它是一种高效率、可靠性好的、适应高吞吐量的数据库方案。

Java Development Kit(Java开发工具)

JDK是 Java 语言的软件开发工具包，主要用于移动设备、嵌入式设备上的java应用程序。JDK是整个java开发的核心，它包含了JAVA的运行环境（JVM+Java系统类库）和JAVA工具。