周鸿祎:大模型可能成为新的攻击载体和攻击入口
在ISC.AI 2025上海大模型安全论坛上,360集团创始人周鸿祎在致辞中指出,AI发展面临着恶意利用、内容安全、“幻觉”问题、提示词攻击等风险,大模型既是生产力工具,也可能成为新的攻击载体和攻击入口,政府和企业的数据资产、商业机密面临着前所未有的暴露风险,保障AI安全是一项长期而艰巨的任务,需要各方协同努力。
会上,360还发布了国内首个多智能体协同的大模型安全卫士。具体来看,其内容安全智能体通过垂直领域专业模型训练,提供智能判定、风险内容检测及安全回复代答等关键能力。通过建立五道“内容防线”,提供超过100个风险类目识别能力,确保输入输出双向安全。同时以测促防,持续对模型回复内容进行评测,识别潜在攻击风险。
AI Agent安全智能体通过原生安全机制,全面保障AI Agent在执行任务过程中的数据安全与权限控制,有效防范自动规划与执行中可能出现的行为失控问题,把大模型能力“关在笼子里”。
幻觉抑制智能体通过搜索增强、知识增强与对齐增强技术,提升大模型推理过程的准确性,有效抑制因内容时效性缺失、数据过时等因素引发的大模型“幻觉”问题,确保生成内容真实可信。
软件安全智能体能够高效识别开源软件,精准定位AI软件的安全漏洞。覆盖从模型训练到推理的全链路安全检测,支持识别模型服务相关组件、生态链漏洞扫描与多语言代码审计,保障AI软件供应链生命周期的安全性。
此外,360将大模型安全卫士融入安全运营体系,通过整合安全大模型、安全大脑平台、大模型安全卫士及终端探针工具的核心能力,构建“网数模一体化”安全运营平台,实现安全运营系统性重塑与升级。
360数字安全集团副总裁余凯表示,AI安全是一个高门槛的技术领域,需要同时具备AI技术积淀、安全实战经验、真实场景验证和海量语料积累。360通过自身大规模AI业务场景验证产品能力,同时沉淀了海量安全语料,构建起核心竞争力。目前,360大模型安全卫士已在公司内外多项业务中实现深度应用。

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。
持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。
转载内容版权归作者及来源网站所有,本站原创内容转载请注明来源。
-
上一篇
社区造数服务接入 MCP
一、背景 今年 MCP 的概念非常火,市面上也涌现出了一大批 MCP 相关工具。作为技术一线者,都会按捺不住地去实操一下,很早的时候就有个设想,如果把我们的测试工具都改造为符合 MCP 服务协议标准,然后全部接入 AI Agent,打造一个集万千工具于一体的智能管家来帮助我们提效,是不是一个很完美的设想。很多宏伟或者天马行空的想法想要真正的落地,必然需要不断向下,拆解成可落地的任务模块,这里我们先从造数开始。 二、AI 造数设想 在实际业务需求测试中,我们依赖的测试数据需要很多前置的数据要求,这时候会涉及到分步使用不同的造数脚本。比如团长拉新做任务,需要一个 30 天内没发过动态的账号,加入团队,发一篇动态,动态过一审,过二审,阅读数满足 300 个。 为了完成这个场景的造数,我们需要去造数工厂、接口自动化、脚本代码等平台找对应的造数工具,分别去执行才能完成这一系列的操作。可以从下图中看到,总计需要 6 个步骤才能完成。如果不是熟悉所有的业务,哪怕有现成的造数脚本,组合起来使用还是有一定的门槛。 那么在 AI 风行的年代,我们想要实现的是:按照用户输入的测试数据要求,能够按照已有造数能...
-
下一篇
极光 GPTBots 重磅升级 AI 工作空间,以应用市场开”AI 全员化”新篇章
极光GPTBots重磅升级AI工作空间,以应用市场 (Marketplace) 开启“AI全员化”新篇章 企业级AI智能体构建平台GPTBots近日宣布,其AI工作空间(Workspace)完成重磅升级,并同步推出全新的应用市场(Marketplace)。此次升级标志着GPTBots从一个专业的AI开发工具,战略性地演变为一个“人人可用”的企业级AI生产力平台,旨在将强大的AI能力安全、便捷地融入日常工作的每一个环节。 一、 核心升级:更强大的AI工作空间,赋能每一位员工 升级后的AI工作空间 (Workspace)旨在将强大的AI能力转化为企业全员触手可及的生产力工具。其能力通过两大维度得到革命性增强:强大的内置基础应用和开放的应用市场生态。 1. 内置能力全面增强,覆盖高频核心场景Workspace内置的核心功能板块得到全面升级,为员工日常工作提供了强大的基础能力: 企业级AI Search:作为一个强大的企业智能搜索入口,员工可上传图片、音频、文档进行多模态检索,并可自定义模型与提示词,快速、精准地从企业海量数据中获取洞察。 零代码自动化Workflow:作为一个强大的业务流程自...
相关文章
文章评论
共有0条评论来说两句吧...
文章二维码
点击排行
推荐阅读
最新文章
- SpringBoot2整合MyBatis,连接MySql数据库做增删改查操作
- SpringBoot2编写第一个Controller,响应你的http请求并返回结果
- Jdk安装(Linux,MacOS,Windows),包含三大操作系统的最全安装
- SpringBoot2整合Redis,开启缓存,提高访问速度
- CentOS7编译安装Gcc9.2.0,解决mysql等软件编译问题
- Docker快速安装Oracle11G,搭建oracle11g学习环境
- MySQL数据库在高并发下的优化方案
- MySQL8.0.19开启GTID主从同步CentOS8
- SpringBoot2全家桶,快速入门学习开发网站教程
- SpringBoot2整合Thymeleaf,官方推荐html解决方案