首页 文章 精选 留言 我的

文章列表

共 185510 篇
字节跳动如何对大规模 Spark 作业进行资源提效|VLDB 2024论文解读

字节跳动如何对大规模 Spark 作业进行资源提效|VLDB 2024论文解读

引言 论文链接:https://www.vldb.org/pvldb/vol17/p3759-shi.pdf 近年来 Spark 已经成为离线大数据处理引擎的事实标准,广泛用于数据仓库、数据湖、机器学习等领域。在字节跳动内部每天运行百万级别的 Spark 离线作业,Shuffle 量高达 500PB,CPU 资源需求达到千万级别。随着业务的快速发展,用户对计...

【IOS自动化】IOS18如何使用Airtest进行自动化测试及go-ios的基本使用

【IOS自动化】IOS18如何使用Airtest进行自动化测试及go-ios的基本使用

目录: 一、go-ios安装部署启动 1、Windows系统驱动下载 2、Windows系统驱动部署 3、配置环境变量 二、构建wda.ipa 方案一:通过xcode构建 方案二:通过命令构建wda.ipa 可能遇到的问题及解决方案 三、IOS18启动自动化测试 四、连接到AirtestIDE 五、封装IOS17+的启动方法总结 go-ios的基本使用 之前...

Databend 为什么能帮用户降低 90% 成本?

Databend 为什么能帮用户降低 90% 成本?

导语 近年来,随着大数据的快速发展,企业对数据存储和计算的需求日益增长。然而,随着数据量的爆炸式增长,传统数据仓库架构面临着高昂的运维和扩展成本。许多公司发现,当数据规模达到一定程度时,存储、计算和网络开销会显著增加,从而导致运营成本成倍上升。 在这个背景下,Databend 的出现提供了一种全新的解决方案。许多用户在了解了 Databend 的技术案例后,...

一觉醒来,发现宇智波佐助在跳芭蕾

一觉醒来,发现宇智波佐助在跳芭蕾

阿里通义实验室发布了一个用于可控角色视频合成的通用模型 MIMO,能够模仿任何人在复杂动作和物体交互的场景中的表现。简单讲,用户只要给定一个图像和视频或者动作序列,它就能把给定图像的人物直接替换成视频里面的人物,并且可以控制这个角色的动作和场景进行互动。 具体视频效果见:https://menyifang.github.io/projects/MIMO/in...

西安源创会精彩回顾

西安源创会精彩回顾

9 月 21 日,第 106 期OSC源创会✖️科大讯飞开发者TALK在西安成功举办。本次大会聚焦 “ 大模型 技术与产业应用”,邀请来自华为昇思 MindSpore、华为昇腾、科大讯飞、 西安电子科技大学的业内大咖发表主题演讲。一起来看看本次活动的精彩瞬间吧! 多位专家精彩的内容分享! 人气满满的大会现场! 丰富有趣的互动环节! 感谢本期活动合作伙伴的大力...

火山引擎总裁谭待:豆包大模型“地板价”,仍有盈利空间

火山引擎总裁谭待:豆包大模型“地板价”,仍有盈利空间

“5 月,1200 亿。 “7 月,5000 亿。 “9 月,13000 亿。” 短短四个月,豆包大模型日均tokens使用量就从千亿级跨越到了万亿级,呈现爆发式增长。 9 月 24 日,在深圳举行的2024 火山引擎 AI 创新巡展上,火山引擎总裁谭待公布,豆包大模型日均 tokens 使用量超过 1.3 万亿,日均生成图片 5000 万张,日均处理语音 ...

🐒分布式 IM - WuKongIM 2.0.4.beta 发布

🐒分布式 IM - WuKongIM 2.0.4.beta 发布

9 年积累,沉淀出来的高性能通用通讯服务,支持即时通讯,站内 / 系统消息,消息中台,物联网通讯,音视频信令,直播弹幕,客服系统,AI 通讯,即时社区等场景。 🎦独特性 群成员无上限,轻松支持 10 万人群聊,消息可永久存储。 📚资源消耗低 自研二进制协议,心跳包只有 1 字节,省流量,省电量,传输更迅速。 🔐安全性 消息通道和消息内容全程加密,防中间...

Fair Source:介于“开源”和“闭源”之间的新许可模式

Fair Source:介于“开源”和“闭源”之间的新许可模式

随着私有软件和开源软件 (OSS) 之间的持续紧张关系在短期内不太可能结束,一家估值 30 亿美元的初创公司——Sentry 推出了名为「Fair Source」的新许可模式——希望在开源和私有软件之间架起桥梁。 「Fair Source」定义如下: 代码公开可阅读 在限制极少的前提下,允许第三方使用、修改和再分发,同时保护软件生产者的商业模式 采用延迟开源...

查询 ps.data_locks 导致 MySQL hang 住

查询 ps.data_locks 导致 MySQL hang 住

官方在 8.0.37 中修复了这个 bug,可升级到 8.0.37 解决。 作者:胡呈清,爱可生 DBA 团队成员,擅长故障分析、性能优化,个人博客:[简书 | 轻松的鱼],欢迎讨论。 爱可生开源社区出品,原创内容未经授权不得随意使用,转载请联系小编并注明来源。 本文约 1500 字,预计阅读需要 8 分钟。 问题描述 MySQL 版本:8.0.26 跑批执...

Volcano新版本发布:10大功能提升统一调度和细粒度资源管理能力

Volcano新版本发布:10大功能提升统一调度和细粒度资源管理能力

摘要:Volcano是业界首个云原生批量计算社区,也是 CNCF 首个及唯一孵化级批量计算项目。Volcano主要用于 AI、大数据、基因、渲染等诸多高性能计算场景,对主流通用计算框架均有很好的支持。 本文分享自华为云社区《Volcano v1.10.0 版本正式发布!10大功能全面提升统一调度和细粒度资源管理能力》,作者:云容器大未来 近日,Volcano...

Eclipse 基金会成立新工作组,助力开源社区遵守全球法规

Eclipse 基金会成立新工作组,助力开源社区遵守全球法规

Eclipse 基金会宣布成立开放监管合规工作组 (Open Regulatory Compliance Working Group,ORC WG),旨在帮助开源社区应对不断发展的监管框架。 公告称,该工作组将与政府和监管机构密切合作,以增进他们对独特开源开发模式的了解。这项合作致力于在日益受到监管的软件供应链中推进开源模式。目前,该工作组已得到了众多开源组...

华为鸿蒙 HarmonyOS NEXT 将在国庆后公测

华为鸿蒙 HarmonyOS NEXT 将在国庆后公测

9 月 24 日,华为秋季全场景新品发布会正式举办,本次发布会除了一系列全场景新品的发布,还有一个备受关注的看点,余承东宣布 HarmonyOS NEXT 将于 10 月 8 日正式开启公测,并宣布了本次公测所支持的各类机型。 首批支持 3 款设备:华为 Mate 60 系列手机、Mate X5 系列手机、MatePad 13.2 英寸系列平板,更多机型也即...

eBPF 零侵扰分布式追踪 3 分钟锁定 Java 程序 I/O 线程阻塞

eBPF 零侵扰分布式追踪 3 分钟锁定 Java 程序 I/O 线程阻塞

摘要: I/O 线程阻塞是Java 程序经常出现的问题之一,此类故障发生时 Java 程序的请求、响应在 I/O 线程向操作系统 Socket Buffer 读/写过程中发生阻塞,由于在业务代码插桩无法观测到 I/O 线程的工作情况和性能表现,因而导致故障非常隐蔽和难以诊断定位。通过本篇案例您将了解到,某银行的开发工程师如何使用 eBPF 技术带来的零侵扰追...

蚂蚁Raft一致性算法库SOFAJRaft深入分析

蚂蚁Raft一致性算法库SOFAJRaft深入分析

大家好,我是 V 哥,SOFAJRaft 是蚂蚁金服开源的一个基于 Raft 共识算法的 Java 实现,它特别适合高负载、低延迟的分布式系统场景。SOFAJRaft 支持 Multi-Raft-Group,能够同时处理多个 Raft 集群,具有扩展性和强一致性保障。这个项目是从百度的 braft 移植而来的,并且在性能和功能上做了多项优化。今天的文章,V ...

资源下载

更多资源
优质分享App

优质分享App

近一个月的开发和优化,本站点的第一个app全新上线。该app采用极致压缩,本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

Mario

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长,特征是大鼻子、头戴帽子、身穿背带裤,还留着胡子。与他的双胞胎兄弟路易基一起,长年担任任天堂的招牌角色。

腾讯云软件源

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题,腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构,目前腾讯云软件源站支持公网访问和内网访问。

Sublime Text

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能,例如代码缩略图,Python的插件,代码段等。还可自定义键绑定,菜单和工具栏。Sublime Text 的主要功能包括:拼写检查,书签,完整的 Python API , Goto 功能,即时项目切换,多选择,多窗口等等。Sublime Text 是一个跨平台的编辑器,同时支持Windows、Linux、Mac OS X等操作系统。

用户登录
用户注册