Karafka v2.3.3 发布，基于 Apache Kafka 的应用程序开发框架-低调大师

Karafka v2.3.3 发布，基于 Apache Kafka 的应用程序开发框架

2024-02-27 266

Karafka v2.3.3 现已发布。Krafka 是一个用于简化基于 Apache Kafka 的 Ruby 应用开发的框架，它允许开发者在使用异步 Kafka 消息时使用类似于标准 HTTP 约定（params 和 params_batch）的方法。Karafka 不仅可以处理传入的消息，而且还提供了用于构建接收和发送消息的复杂数据流应用程序的工具。

此版本更新内容如下：

[增强] 基于路由的 Swarm 主题分配 (Pro)
[增强] 发布 swarm 中无响应节点的-1关闭原因状态。
[增强] 允许在 DataDog 监听器直方图报告中使用distribution模式 (Aerdayne)。
[更改]internal.swarm.node_report_timeout从 30 秒更改为 60 秒以补偿长轮询。
[修复] 静态成员路由评估在 swarm 中发生得太早。
[修复] 在 forking 和 warmup 之前关闭 supervisor prior 中的 producer，以防止无效的内存状态。

更新说明：https://github.com/karafka/karafka/releases/tag/v2.3.3

微信关注我们

原文链接：https://www.oschina.net/news/280483/karafka-2-3-3-released

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

Kube Queue：Kubernetes 任务排队的利器

批处理作业（Batch Job）常应用于数据处理、仿真计算、科学计算和人工智能等领域，主要用于执行一次数据处理或模型训练任务。由于这类任务往往需要消耗大量计算资源，因此必须根据任务的优先级和提交者的可用资源情况进行合理排队，才能最大化集群资源的利用效率。 Scheduler 在任务调度领域水土不服当前 Kubernetes 的调度器提供了完善的 Pod 通用调度功能，但是在面对大量任务排队时，依然暴露出了局限性：缺少自动化的排队机制默认情况下，批处理任务会直接创建作业 Pod，当集群可用资源不足时，大量 Pending Pod 会严重拖慢 Kubernetes 调度器的处理速度，影响在线业务扩容和调度。因此，迫切需要能够自动根据集群资源控制作业启停的自动化排队机制。缺少多样化的排队策略为提升任务排队效率，需要根据集群资源和任务规模，采取阻塞队列、优先级队列、回填调度等不同的排队策略。然而，Kubernetes 调度器的默认调度策略主要根据优先级和 Pod 创建顺序进行排队，难以应对多样化的任务排队需求。缺少多队列能力为隔离不同用户或租户的任务，避免资源被单一用户的大量任务...

2024-02-27

343

开放，是 DeepFlow 产品的灵魂。基于 DeepFlow 零侵扰、全栈的数据能力，我们在企业客户处已经落地了一系列安全分析、网络分析、业务分析的解决方案。本文主要介绍基于 DeepFlow 企业版构建的数据库审计云原生解决方案，以及在 6.4 版本中的 3X 性能提升。 01 云原生的数据库审计解决方案 DeepFlow 支持利用自身的云网流量分发、SQL 调用日志能力，让专业数据库审计产品以及企业自建的数据库审计工具无缝接入到云原生环境中。云网流量分发是 DeepFlow 企业版 2016 年发布时的第一个特性。利用云网流量分发，传统的数据库审计工具可以在不做任何修改的前提下，零侵扰的接入到云原生环境中。这一方面让企业客户在云原生环境下依然可以继续使用已有的安全产品，另一方面也避免了在云主机上安装来自不同厂商、数量繁多的采集 Agent。DeepFlow 已经成为了云网流量分发的事实标准，我们在 6.4 中也对这个能力进行了增强，将数据库审计解决方案的 CPU 和带宽资源开销降低了 70%~80%。除了云网流量分发以外，DeepFlow 可通过 eBPF/cBPF 直接采集...

2024-02-27

360

资源下载

更多资源

优质分享App

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

Apache Tomcat

Tomcat是Apache 软件基金会（Apache Software Foundation）的Jakarta 项目中的一个核心项目，由Apache、Sun 和其他一些公司及个人共同开发而成。因为Tomcat 技术先进、性能稳定，而且免费，因而深受Java 爱好者的喜爱并得到了部分软件开发商的认可，成为目前比较流行的Web 应用服务器。

Eclipse

Eclipse 是一个开放源代码的、基于Java的可扩展开发平台。就其本身而言，它只是一个框架和一组服务，用于通过插件组件构建开发环境。幸运的是，Eclipse 附带了一个标准的插件集，包括Java开发工具（Java Development Kit，JDK）。

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。