搜索[分布式调度]结果-低调大师优秀个人博客

精选列表

搜索[分布式调度]，共10000篇文章

CentOS7搭建开源分布式搜索平台ELK实现日志实时搜索并展示图表

一、简介 Elasticsearch是个基于Lucene实现的开源、分布式、restful的全文本搜索引擎，此外他还是一个分布式实时文档存储，其中每个文档的每个filed均是可被索引的数据，且可被搜索，

2017-11-21

Spark入门实战系列--10.分布式内存文件系统Tachyon介绍及安装部署

目前已经使用基于内存计算的分布式计算框架有：Spark、Impala及SAP的HANA等。

2017-11-15

分布式计算框架Mesos最新版本六大新特性揭秘

1、容器的网络隔离 Mesos 0.23 提供支持在容器部署前定义网络的监控和隔离规则。网络隔离避免了单个容器占用太多的端口、太多的带宽，以及造成其他用户数据包明显的延迟。每个运行的容器的网络统计数据可以在 slave 上从 /monitor/statistics.json 文件中读取。网络隔离对运行在 slave 上的多数 tasks 都是透明的(那些绑定到 port 0 和让内核分配给它们对应的端口)。这个特性仅仅是在 Linux 上实现并且需要设置 configure-time flag(配置时间标志位)。请参阅：http://mesos.apache.org/documentation/latest/network-monitoring/ 2、SSL 对通过 libevent 的任何 libprocess 通信提供 SSL 加密支持(目前还是实验性)。对 Mesos master 和它对应的 slaves 及 Frameworks 之间的流量进行加密，防止被窃听和伪造，对于提高信息安全至关重要。这个特性需要 configure-time flag 并且有一些性能的影响。请参阅：http://mesos.apache.org/documentation/latest/mesos-ssl 3、超售尝试在可撤销的资源上启动 tasks/executors，而 Mesos 可以随时撤销任务。重要的任务可以利用这些临时资源来提升性能。为了应对峰值负载以及一些无法预料的负载暴增，高优先级的 2C 服务会置备在大型集群上。因此，大多数时间，资源没有得到充分的利用。超售特性可以利用暂时没有使用的资源来执行一些后台运行的任务，比如后台分析、视频 /图像处理、芯片仿真，以及其他低优先级的工作，当资源被征用，这些任务可以被随时撤销。超售特性增加了两个新的 slave 的模块：资源估算和服务质量(QoS)控制，同时对现有的资源进行分配、资源监视器和 mesos slave 进行了扩展。请参阅：http://mesos.apache.org/documentation/latest/oversubscription/ 4、持久化卷尝试支持 Frameworks 提供创建磁盘持久化卷服务，这使得有状态服务例如 HDFS 以及 Cassandra 可以通过 Mesos 存储相关数据，而不是像之前必须将数据存储在网络挂载的 EBS 卷或者将数据放置在其他位置使得磁盘资源不受管理。详情请参阅：http://mesos.apache.org/documentation/latest/persistent-volume/ 5、动态保留 Framework 可以对特定的 salve 上的动态资源进行预留(实验性支持)。不需要操作者在 slave 启动的时候指定一个固定的、预先计算好的“静态”资源，现在 Framework 可以预留 slave 提供的资源而无需重启 salve。现有的动态预留机制重大改变，这意味着现有的静态预留机制继续全力支持。请参阅：http://mesos.apache.org/documentation/latest/reservation/ 6、缓存抓取 Executor/task 的二进制文件读取器(fetcher)现在支持缓存机制(实验性)。现在可以指示读取器将通过 URI 下载的二进制文件缓存到一个专用的目录，这样后续的下载可以重用。如果对于URI的 “cache” 标志位是 true，缓存读取机制将会生效。如果 URI 是第一次被下载(对于特定用户)，则首先下载到高速缓存中，然后从那里复制到 sandbox 目录。如果相同的 URI 再次被遇到(对于同一个用户!)，而且相应的缓存文件还在缓存中，则不会进行重复下载，此时读取器会直接从高速缓存进行拷贝。请参阅：http://mesos.apache.org/documentation/latest/fetcher/ 本文作者：佚名来源：51CTO

2017-08-01

8月2日云栖精选夜读：微服务架构的分布式事务解决方案

分布式事务是一个绕不过去的挑战！微服务架构本质上就是分布式服务化架构，微服务架构的流行，让分布式事务问题日益突出！

2017-08-01

英特尔开源分布式深度学习库BigDL：支持高性能大数据分析

近日，英特尔开源了一个运行在 Apache Spark 上的分布式深度学习库 BigDL，其可以利用已有的 Spark 集群来运行深度学习计算，并且还能简化从 Hadoop 的大数据集的数据加载。

2017-07-31

晶科能源钱晶：分布式光伏是新工业革命必然选择

钱晶说，只有光伏才是唯一能做分布式的，其他的发电形式无论是传统火电，还是风电，核电，水电都只能是集中式。

2017-07-02

分布式资本沈波：未来区块链杀手级应用将出现在“+区块链”

会上，分布式资本创始管理人沈波作了《区块链的投资现状与发展趋势》演讲。沈波表示，由于区块链的共识机制和无法篡改两大特点，它在各行各业皆有应用潜力。行业目前处在区块链的启蒙恢复期，正是投资的好时机。

2017-07-02

《Spark大数据分析：核心概念、技术及实践》一1.6 分布式SQL查询引擎

1.6 分布式SQL查询引擎如前所述，SQL是最常用来查询和分析数据的语言之一。它易学且有群众基础（了解SQL的人远比了解编程语言如Java的人多）。基本上，Hive就是因此而诞生。

2017-05-01

《Hadoop实战手册》一第1章 Hadoop分布式文件系统——导入和导出数据

第1章 Hadoop分布式文件系统——导入和导出数据 Hadoop实战手册本章我们将介绍：使用Hadoop shell命令导入和导出数据到HDFS 使用distcp实现集群间数据复制使用Sqoop从

2017-05-01

SAP，Stratasys开始3D打印联合创新实验室的分布式制造计划

SAP，Stratasys开始3D打印联合创新实验室的分布式制造计划 http://mp.weixin.qq.com/s?

2016-12-05

基于hadoop集群的Hive1.2.1、Hbase1.2.2、Zookeeper3.4.8完全分布式安装

写在前边的话： hadoop2.7完全分布式安装请参考：点击阅读，继任该篇博客之后，诞生了下面的这一篇博客基本环境： Hadoop 2.7 Java 1.7.0

2016-07-26

ionet 25.3 发布，纳秒级延迟的分布式 java netty 轻量级网络通信框架

如果是的话，这里向你推荐一个由 java 语言编写的分布式网络编程框架 ionet。 ionet 是一个开源的轻量级基于 Aeron 的分布式网络编程框架，框架能够做到纳秒级别的端到端延迟。

2026-01-29

【万字拆解】开源隐私计算SecretFlow技术底座: 基于Ray的分布式联邦执行引擎

resource鉴权 Ray的按资源调度策略，会将需要该资源的任务调度到拥有该资源的机器上执行；同时，各个节点上报自己拥有的资源给全局调度器。

2025-09-17

分布式管理核心功能解析：网络服务和数据传输的实现

二、网络服务管理：掌控多网络连接的智慧中枢（一）多网络连接管理的卓越能力在分布式的复杂环境中，设备往往置身于多种网络连接的交织之中，HarmonyOS NEXT的网络服务管理功能就像一位睿智的领航员

2025-09-12

NebulaFlow 重构边缘计算：分布式 AI 推理框架正式开源，低延迟赋能工业物联网

在工业物联网(IIoT)与边缘计算深度融合的今天，NebulaFlow开源框架的发布标志着分布式AI推理技术迈入新阶段。

2025-06-04

🍋 分布式运维监控平台 WGCLOUD v3.5.5 全新发布，支持 GPU 等监控

WGCLOUD是一款集成度较高的分布式运维监控平台，具有集群监控，易部署、易上手使用、轻量、高效、自动化等特点，server 端基于springboot 开发，agent 端使用 go 编写。

2024-10-12

XSKY 对象存储深度结合 Alluxio 分布式缓存系统，GPU 利用率提高至 90% 以上

近日，Alluxio分布式缓存系统完成了与XSKY星辰天合的 XEOS V6.4 对象存储的兼容性测试，旨在解决数据管理和加速方面的挑战。

2024-06-05

最新报告：腾讯云位居中国分布式关系型数据库“领导者”类别

刚刚获悉，全球领先的IT研究和咨询公司IDC发布的《IDC MarketScape：中国分布式关系型数据库 2023年厂商评估》报告（以下称“报告”）显示，腾讯云位居中国分布式关系型数据库“领导者”类别

2023-12-06

Simple Admin Go 语言分布式后台管理系统 v1.2.3 更新, 大幅优化生成工具

Simple Admin Go 语言分布式后台管理系统 v1.2.3 更新项目介绍 Simple Admin 是一个开箱即用的分布式微服务后端管理系统，基于go-zero开发，为开发中大型后台提供了丰富的功能

2023-11-22

开源即时通讯应用 Tailchat v1.9.2 已发布，插件化分布式 noIM 应用

介绍 Tailchat是一款插件化易拓展的开源 IM 应用。可拓展架构赋予Tailchat无限可能性。前端微内核架构 + 后端微服务架构使得Tailchat能够驾驭任何定制化 / 私有化的场景面向企业与私域用户打造，高度自由的群组管理与定制化的面板展示可以让私域主能够更好的展示自己的作品，管理用户，打造自己的品牌与圈子。官方网站:https://tailchat.msgbyte.com/ v1.9.2 更新内容特性更新增加桌面版分享屏幕的支持现在，可以在electron上点开屏幕分享并选中想要分享的窗口了增加桌面版增加原生浏览器渲染支持打开因受到网页版限制而无法打开的网页例如，如下是一个因为网站策略无法被嵌套显示的网页，受限于网页安全限制不会被嵌入但是你可以打开网页原生渲染，使用内置的原生浏览器渲染替代嵌入网页这样你就能突破对方网站的安全限制，自由嵌入任何页面，就像是在使用浏览器一样如果切换后没有立即生效，可以按下快捷键cmd + r重新加载tailchat 其他更新增加文件访问次数记录增加消息搜索接口 admin: 支持删除私人消息修复浅色模式下AI助手在popover中透明的问题修复了在未加载富文本插件的情况下键入时出现 # 的错误修复了文件上传同一文件时会导致数据库会重复记录文件的bug

2023-10-17

资源下载

更多资源

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长，特征是大鼻子、头戴帽子、身穿背带裤，还留着胡子。与他的双胞胎兄弟路易基一起，长年担任任天堂的招牌角色。

Nacos

Nacos /nɑ:kəʊs/ 是 Dynamic Naming and Configuration Service 的首字母简称，一个易于构建 AI Agent 应用的动态服务发现、配置管理和AI智能体管理平台。Nacos 致力于帮助您发现、配置和管理微服务及AI智能体应用。Nacos 提供了一组简单易用的特性集，帮助您快速实现动态服务发现、服务配置、服务元数据、流量管理。Nacos 帮助您更敏捷和容易地构建、交付和管理微服务平台。

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。

WebStorm

WebStorm 是jetbrains公司旗下一款JavaScript 开发工具。目前已经被广大中国JS开发者誉为“Web前端开发神器”、“最强大的HTML5编辑器”、“最智能的JavaScript IDE”等。与IntelliJ IDEA同源，继承了IntelliJ IDEA强大的JS部分的功能。