苹果发布 300 亿参数多模态大模型 MM1.5-低调大师

苹果发布 300 亿参数多模态大模型 MM1.5

2024-10-14 332

苹果近日发布多模态大模型 MM1.5，旨在增强对文本丰富的图像的理解、视觉指代和接地，以及多图像推理的能力。

据悉， MM1.5在在 MM1 架构的基础上训练而成，MM1.5 采用了以数据为中心的模型训练方法，在整个模型训练生命周期中系统地探索各种数据混合物的影响。其中包括用于持续预训练的高质量 OCR 数据和合成字幕，以及用于监督微调的优化视觉指令调整数据混合物。

MM1.5 的模型参数范围从 1B 到 30B，包括密集型和专家混合型（MoE）变体，并证明了精心的数据整理和训练策略即使在小范围内也能产生强大的性能（1B 和 3B）。

值得关注的是，苹果公司本次还推出了专门用于视频理解的 MM1.5-Video 模型和专门处理移动设备用户界面（UI）理解的 MM1.5-UI 模型，其中 MM1.5-UI 模型未来有望作为 iOS 幕后的“苹果牌”AI，其能够处理各种视觉引用与定位任务、总结屏幕上的功能，或者通过与用户的对话进行交互。

尽管 MM1.5 模型在多项基准测试中取得了优秀表现，苹果团队仍计划通过进一步融合文本、图像和用户交互数据，设计更复杂的架构，来提升模型对移动设备 UI 的理解能力，加强“苹果牌”AI 的实力。

论文地址：https://arxiv.org/abs/2409.20566
Hugging Face：https://huggingface.co/papers/2409.20566

微信关注我们

原文链接：https://www.oschina.net/news/316100/apple-mm-1-5

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

WordPress 从 WP Engine 手中夺取 ACF 插件控制权

Automattic 首席执行官兼 WordPress 联合创始人 Matt Mullenweg 与托管服务供应商 WP Engine 之间的纷争仍在继续。Mullenweg 发文称，代表 WordPress 安全团队宣布分叉 WP Engine 开发的一款插件。 “我们将援引插件目录指南的第 18 点，将 Advanced Custom Fields (ACF) 分叉为一个新插件 —— Secure Custom Fields。SCF 已更新，删除了商业倒卖并修复了一个安全问题。” 具体来说，ACF 已从 WP Engine 手中移除，并更新为一个名为 Secure Custom Fields 的新插件。对此，ACF 指责称这种情况是一个正在积极开发中的插件在未经同意的情况下就被单方面强行从其创建者手中夺走，这种情况在 WordPress 21 年的历史上从未发生过。 “这一基本的社区承诺遭到了践踏，我们要求每个人都考虑一下这种行为的道德问题，以及已经开创的新先例。” Mullenweg 和 WordPress 方面则回应称，类似情况以前也发生过，只是规模没有这么大，且此举符合相关准...

2024-10-14

327

魏元友华为终端设计专家从事消费者相关行业用户体验设计15+年，曾获2022年中国服务设计业十大杰出青年，新中国成立70周年用户体验设计70人提名奖。2020-2023获多项红点奖、IF大奖。致力于以人为本的设计理念，提倡用户体验驱动产品设计，以人、设备、环境为基础引导产品体验。曾主导参与智能手机、智能电视、物联网、移动互联网应用相关的用户体验设计。主导计算设计理论输入与架构设计、工具推广，以艺术赋能科技，促进商业转化。现主要负责服务设计相关的用户体验架构设计，构建产品完整的用户体验设计与评估体系。

2024-10-14

269

资源下载

更多资源

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题，腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构，目前腾讯云软件源站支持公网访问和内网访问。

Rocky Linux

Rocky Linux（中文名：洛基）是由Gregory Kurtzer于2020年12月发起的企业级Linux发行版，作为CentOS稳定版停止维护后与RHEL（Red Hat Enterprise Linux）完全兼容的开源替代方案，由社区拥有并管理，支持x86_64、aarch64等架构。其通过重新编译RHEL源代码提供长期稳定性，采用模块化包装和SELinux安全架构，默认包含GNOME桌面环境及XFS文件系统，支持十年生命周期更新。

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。

WebStorm

WebStorm 是jetbrains公司旗下一款JavaScript 开发工具。目前已经被广大中国JS开发者誉为“Web前端开发神器”、“最强大的HTML5编辑器”、“最智能的JavaScript IDE”等。与IntelliJ IDEA同源，继承了IntelliJ IDEA强大的JS部分的功能。