Karafka v2.3.3 发布，基于 Apache Kafka 的应用程序开发框架-低调大师

Karafka v2.3.3 发布，基于 Apache Kafka 的应用程序开发框架

2024-02-27 293

Karafka v2.3.3 现已发布。Krafka 是一个用于简化基于 Apache Kafka 的 Ruby 应用开发的框架，它允许开发者在使用异步 Kafka 消息时使用类似于标准 HTTP 约定（params 和 params_batch）的方法。Karafka 不仅可以处理传入的消息，而且还提供了用于构建接收和发送消息的复杂数据流应用程序的工具。

此版本更新内容如下：

[增强] 基于路由的 Swarm 主题分配 (Pro)
[增强] 发布 swarm 中无响应节点的-1关闭原因状态。
[增强] 允许在 DataDog 监听器直方图报告中使用distribution模式 (Aerdayne)。
[更改]internal.swarm.node_report_timeout从 30 秒更改为 60 秒以补偿长轮询。
[修复] 静态成员路由评估在 swarm 中发生得太早。
[修复] 在 forking 和 warmup 之前关闭 supervisor prior 中的 producer，以防止无效的内存状态。

更新说明：https://github.com/karafka/karafka/releases/tag/v2.3.3

微信关注我们

原文链接：https://www.oschina.net/news/280483/karafka-2-3-3-released

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

Kube Queue：Kubernetes 任务排队的利器

批处理作业（Batch Job）常应用于数据处理、仿真计算、科学计算和人工智能等领域，主要用于执行一次数据处理或模型训练任务。由于这类任务往往需要消耗大量计算资源，因此必须根据任务的优先级和提交者的可用资源情况进行合理排队，才能最大化集群资源的利用效率。 Scheduler 在任务调度领域水土不服当前 Kubernetes 的调度器提供了完善的 Pod 通用调度功能，但是在面对大量任务排队时，依然暴露出了局限性：缺少自动化的排队机制默认情况下，批处理任务会直接创建作业 Pod，当集群可用资源不足时，大量 Pending Pod 会严重拖慢 Kubernetes 调度器的处理速度，影响在线业务扩容和调度。因此，迫切需要能够自动根据集群资源控制作业启停的自动化排队机制。缺少多样化的排队策略为提升任务排队效率，需要根据集群资源和任务规模，采取阻塞队列、优先级队列、回填调度等不同的排队策略。然而，Kubernetes 调度器的默认调度策略主要根据优先级和 Pod 创建顺序进行排队，难以应对多样化的任务排队需求。缺少多队列能力为隔离不同用户或租户的任务，避免资源被单一用户的大量任务...

2024-02-27

371

开放，是 DeepFlow 产品的灵魂。基于 DeepFlow 零侵扰、全栈的数据能力，我们在企业客户处已经落地了一系列安全分析、网络分析、业务分析的解决方案。本文主要介绍基于 DeepFlow 企业版构建的数据库审计云原生解决方案，以及在 6.4 版本中的 3X 性能提升。 01 云原生的数据库审计解决方案 DeepFlow 支持利用自身的云网流量分发、SQL 调用日志能力，让专业数据库审计产品以及企业自建的数据库审计工具无缝接入到云原生环境中。云网流量分发是 DeepFlow 企业版 2016 年发布时的第一个特性。利用云网流量分发，传统的数据库审计工具可以在不做任何修改的前提下，零侵扰的接入到云原生环境中。这一方面让企业客户在云原生环境下依然可以继续使用已有的安全产品，另一方面也避免了在云主机上安装来自不同厂商、数量繁多的采集 Agent。DeepFlow 已经成为了云网流量分发的事实标准，我们在 6.4 中也对这个能力进行了增强，将数据库审计解决方案的 CPU 和带宽资源开销降低了 70%~80%。除了云网流量分发以外，DeepFlow 可通过 eBPF/cBPF 直接采集...

2024-02-27

391

资源下载

更多资源

优质分享App

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长，特征是大鼻子、头戴帽子、身穿背带裤，还留着胡子。与他的双胞胎兄弟路易基一起，长年担任任天堂的招牌角色。

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题，腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构，目前腾讯云软件源站支持公网访问和内网访问。

Nacos

Nacos /nɑ:kəʊs/ 是 Dynamic Naming and Configuration Service 的首字母简称，一个易于构建 AI Agent 应用的动态服务发现、配置管理和AI智能体管理平台。Nacos 致力于帮助您发现、配置和管理微服务及AI智能体应用。Nacos 提供了一组简单易用的特性集，帮助您快速实现动态服务发现、服务配置、服务元数据、流量管理。Nacos 帮助您更敏捷和容易地构建、交付和管理微服务平台。