苹果发布 300 亿参数多模态大模型 MM1.5-低调大师

苹果发布 300 亿参数多模态大模型 MM1.5

2024-10-14 242

苹果近日发布多模态大模型 MM1.5，旨在增强对文本丰富的图像的理解、视觉指代和接地，以及多图像推理的能力。

据悉， MM1.5在在 MM1 架构的基础上训练而成，MM1.5 采用了以数据为中心的模型训练方法，在整个模型训练生命周期中系统地探索各种数据混合物的影响。其中包括用于持续预训练的高质量 OCR 数据和合成字幕，以及用于监督微调的优化视觉指令调整数据混合物。

MM1.5 的模型参数范围从 1B 到 30B，包括密集型和专家混合型（MoE）变体，并证明了精心的数据整理和训练策略即使在小范围内也能产生强大的性能（1B 和 3B）。

值得关注的是，苹果公司本次还推出了专门用于视频理解的 MM1.5-Video 模型和专门处理移动设备用户界面（UI）理解的 MM1.5-UI 模型，其中 MM1.5-UI 模型未来有望作为 iOS 幕后的“苹果牌”AI，其能够处理各种视觉引用与定位任务、总结屏幕上的功能，或者通过与用户的对话进行交互。

尽管 MM1.5 模型在多项基准测试中取得了优秀表现，苹果团队仍计划通过进一步融合文本、图像和用户交互数据，设计更复杂的架构，来提升模型对移动设备 UI 的理解能力，加强“苹果牌”AI 的实力。

论文地址：https://arxiv.org/abs/2409.20566
Hugging Face：https://huggingface.co/papers/2409.20566

微信关注我们

原文链接：https://www.oschina.net/news/316100/apple-mm-1-5

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

WordPress 从 WP Engine 手中夺取 ACF 插件控制权

Automattic 首席执行官兼 WordPress 联合创始人 Matt Mullenweg 与托管服务供应商 WP Engine 之间的纷争仍在继续。Mullenweg 发文称，代表 WordPress 安全团队宣布分叉 WP Engine 开发的一款插件。 “我们将援引插件目录指南的第 18 点，将 Advanced Custom Fields (ACF) 分叉为一个新插件 —— Secure Custom Fields。SCF 已更新，删除了商业倒卖并修复了一个安全问题。” 具体来说，ACF 已从 WP Engine 手中移除，并更新为一个名为 Secure Custom Fields 的新插件。对此，ACF 指责称这种情况是一个正在积极开发中的插件在未经同意的情况下就被单方面强行从其创建者手中夺走，这种情况在 WordPress 21 年的历史上从未发生过。 “这一基本的社区承诺遭到了践踏，我们要求每个人都考虑一下这种行为的道德问题，以及已经开创的新先例。” Mullenweg 和 WordPress 方面则回应称，类似情况以前也发生过，只是规模没有这么大，且此举符合相关准...

2024-10-14

235

魏元友华为终端设计专家从事消费者相关行业用户体验设计15+年，曾获2022年中国服务设计业十大杰出青年，新中国成立70周年用户体验设计70人提名奖。2020-2023获多项红点奖、IF大奖。致力于以人为本的设计理念，提倡用户体验驱动产品设计，以人、设备、环境为基础引导产品体验。曾主导参与智能手机、智能电视、物联网、移动互联网应用相关的用户体验设计。主导计算设计理论输入与架构设计、工具推广，以艺术赋能科技，促进商业转化。现主要负责服务设计相关的用户体验架构设计，构建产品完整的用户体验设计与评估体系。

2024-10-14

194

资源下载

更多资源

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长，特征是大鼻子、头戴帽子、身穿背带裤，还留着胡子。与他的双胞胎兄弟路易基一起，长年担任任天堂的招牌角色。

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题，腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构，目前腾讯云软件源站支持公网访问和内网访问。

Nacos

Nacos /nɑ:kəʊs/ 是 Dynamic Naming and Configuration Service 的首字母简称，一个易于构建 AI Agent 应用的动态服务发现、配置管理和AI智能体管理平台。Nacos 致力于帮助您发现、配置和管理微服务及AI智能体应用。Nacos 提供了一组简单易用的特性集，帮助您快速实现动态服务发现、服务配置、服务元数据、流量管理。Nacos 帮助您更敏捷和容易地构建、交付和管理微服务平台。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。