昆仑万维开源「天工」Skywork-13B 系列大模型,0 门槛商用
昆仑万维宣布开源百亿级大语言模型「天工」Skywork-13B系列,并配套开源了600GB、150B Tokens的超大高质量开源中文数据集。昆仑万维「天工」Skywork-13B系列目前包括130亿参数的两大模型:Skywork-13B-Base模型、Skywork-13B-Math模型。
除模型开源外,Skywork-13B系列大模型还将开源600GB、150B Tokens的高质量中文语料数据集Skypile/Chinese-Web-Text-150B。公告称,这是目前最大的开源中文数据集之一。同时,昆仑万维「天工」Skywork-13B系列大模型即将全面开放商用;开发者无需申请,即可商用。
“此次Skywork-13B系列大模型将全面开放商用许可,用户在下载模型并同意并遵守《Skywork模型社区许可协议》后,无需再次申请授权即可将大模型进行商业用途。希望用户能够更便捷地探索Skywork-13B系列大模型技术能力,探索在不同场景下的商业化应用。”
Skywork-13B-Base模型
Skywork-13B-Base模型是Skywork-13B的基础模型,其经由3.2万亿个多语言高质量数据训练,在CEVAL、CMMLU、MMLUGSM8K等评测与基准测试上都展现了同等规模模型的最佳效果。
Skywork-13B-Math模型
Skywork-13B-Math模型经过专门的数学能力强化训练,在GSM8K等数据集上取得了同等规模模型的最佳效果。
Skypile/Chinese-Web-Text-150B数据集
该数据集是根据昆仑天工团队方面经过精心过滤的数据处理流程从中文网页中筛选出的高质量数据。本次开源的数据集大小约为600GB,总token数量约为150B,目前开源最大的中文数据集之一。
一些评测结果如下所示:
更多详情可查看官方公告。

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。
持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。
转载内容版权归作者及来源网站所有,本站原创内容转载请注明来源。
- 上一篇
谷歌承诺 20 亿美元投资 OpenAI 对手 Anthropic
谷歌发言人日前表示,该公司已同意向 OpenAI 的强力竞争对手 Anthropic 投资最多 20 亿美元。目前已预先投资了 5 亿美元,随着时间的推移将再追加 15 亿美元。 Anthropic 成立于 2021 年,是一家由前 OpenAI 团队成员创立的人工智能初创公司。其在 ChatGPT 发布两个月后,就推出了 GPT-4 的重要竞品 Claude,并在 7 月初推出了升级版的 Claude 2。在今年上半年,Anthropic 的估值已达到了约 41 亿美元。 Anthropic 的一份内部文件透露,该公司计划筹集 50 亿美元或更多以直接与 OpenAI 较量。并预计花费 10 亿美元,在 2024 年底推出自己的新一代大语言模型“Claude-Next”。 Anthropic 首席执行官兼联合创始人 Dario Amodei 曾在上个月的一次谈话中称,“我们只成立了两年半多一点……在这段时间里,我们已经筹集了 15 亿美元,这是一个很大的数字。我们的团队规模相较来说要小得多,但我们已经成功地保持了自己的地位。我们真正做到了少花钱多办事,我认为很快我们就能用更多的资源做...
- 下一篇
国家广电总局公示《云游戏总体技术要求》等行业标准
国家广播电视总局科技司发布公告称,按照广播电视和网络视听行业标准制定程序要求和计划安排,国家广播电视总局组织相关单位编制《沉浸式终端通用技术要求》《云游戏总体技术要求》《自由视角视频系统技术要求》行业标准,现对已通过全国广播电影电视标准化技术委员会审查的报批稿予以公示。 根据《云游戏总体技术要求》行业标准的报批稿,该文件规定了云游戏的总体技术架构,以及云游戏平台、网络、云游戏终端和云游戏安全的技术要求,并针对未成年人用户对云游戏平台和云游戏终端提出了要求。 该标准的起草单位包括: 国家广播电视总局广播电视科学研究院、腾讯科技(上海)有限公司、中国广播电视网络集团有限公司、咪咕互动娱乐有限公司、元境生生(北京)科技有限公司、浙江华数广电网络股份有限公司、江苏省广电有线信息网络股份有限公司、中国广电湖南网络股份有限公司、国广东方网络(北京)有限公司、青岛西发广电传媒科技有限公司、互影科技(北京)有限公司、北京决策数科技有限公司、北京和创摩尔科技有限公司。 云游戏总体技术架构包括云游戏平台、网络、云游戏终端和云游戏安全四个部分: 云游戏平台接收用户操作指令,完成游戏画面的渲染、音视频编解码和...
相关文章
文章评论
共有0条评论来说两句吧...
文章二维码
点击排行
推荐阅读
最新文章
- CentOS7,8上快速安装Gitea,搭建Git服务器
- SpringBoot2整合Thymeleaf,官方推荐html解决方案
- SpringBoot2整合MyBatis,连接MySql数据库做增删改查操作
- CentOS6,7,8上安装Nginx,支持https2.0的开启
- CentOS6,CentOS7官方镜像安装Oracle11G
- CentOS关闭SELinux安全模块
- CentOS7安装Docker,走上虚拟化容器引擎之路
- SpringBoot2整合Redis,开启缓存,提高访问速度
- SpringBoot2全家桶,快速入门学习开发网站教程
- SpringBoot2更换Tomcat为Jetty,小型站点的福音