天猫精灵业务如何使用机器学习PAI进行模型推理优化
作者:如切,悟双,楚哲,晓祥,旭林
引言
天猫精灵(TmallGenie)是阿里巴巴人工智能实验室(Alibaba A.I.Labs)于2017年7月5日发布的AI智能语音终端设备。天猫精灵目前是全球销量第三、中国销量第一的智能音箱品牌。
在天猫精灵业务系统中,大量使用了算法模型。如领域分类模型,意图分类模型,槽填充模型,多轮对话模型等。当前天猫精灵后台有上百个正在使用的算法模型。
在模型服务方面,有两个问题非常重要:
- 首先,为了保证服务能够得到快速响应,模型的 RT 必须尽可能的短。
- 其次,我们希望在硬件资源一定的情况下能够支持更多的 qps 访问,从而降低整体成本。
机器学习PAI是阿里巴巴AI开发平台,为AI开发者提供软硬一体的编程环境和高性能训练与推理引擎框架。
天猫精灵业务 PAI 模型的优化主要通过 AutoAI 接入 PAI Bla
低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。
持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。
转载内容版权归作者及来源网站所有,本站原创内容转载请注明来源。
- 上一篇
1万亿次、10亿人、10亿张,科技给生活带来多少改变?
云栖大会精彩进行中,今天,是 Day-2。一早,阿里技术明星团闪亮登场!贾扬清:阿里巴巴副总裁、阿里云智能计算平台事业部总经理、高级研究员李飞飞:阿里巴巴副总裁、阿里云智能数据库产品事业部总经理、高级研究员蒋江伟(小邪):阿里巴巴合伙人、阿里云智能基础产品事业部总经理、研究员…… 有了重磅嘉宾,自然会有重磅消息。接下来就听阿里妹为你一一道来: 01 AI每天调用超1万亿次 阿里成中国最大的人工智能公司 上午,阿里首次公布人工智能调用规模:每天调用超1万亿次,服务全球10亿人,日处理图像10亿张、视频120万小时、语音55万小时及自然语言5千亿句,已经成为中国最大的人工智能公司。 同时,首次披露人工智能的完整布局,在AI芯片、AI云服务、AI算法、AI平台、产业AI实现全线领先。 在AI芯片层,平头哥发布全球最强AI芯片含光800,打破业界纪
- 下一篇
KGB知识图谱,利用科技解决传统知识图谱问题
随着互联网巨头对知识图谱领域的重视度提高,知识图谱的发展也在增快。现在的知识图谱应用还处在初期的阶段,还未实现大规模应用,但是知识图谱的运用已经在一些领域实现了高价值运用,解决了大数据处理中的诸多难题。我们可以预想到,知识图谱在之后的前沿研究中也将不断实现新的应用,其重要性的问题也将得到学术界和产业界的协力解决。在知识图谱的构建方面,传统知识图谱存在局限性。传统知识图谱不具有深度知识结构,无法解决专业的业务问题。将专业领域知识赋予机器,让机器代替业务人员从事简单知识工作,实现重复性、基础性劳动的智能化过程。同时,传统领域知识图谱主要采用专家人工构建费时费力的方式,投入极大且效率不高,急需自动化、智能化构建行业知识图谱的工具。KGB(Knowledge Graph Builder)知识图谱引擎是自主研发的知识图谱构建与推理引擎,基于汉语词法分析的基础上,采用KGB语法实现了实时高效的知识生成,可以从非结构化文本中抽取各类知识,并实现了从表格中抽取指定的内容等。KGB同时可以定义不同的动作,如抽取动作,并能自定义各类后处理程序。利用KGB知识图谱引擎可以抽取到产品的详细报价信息,方便进行下...
相关文章
文章评论
共有0条评论来说两句吧...
文章二维码
点击排行
推荐阅读
最新文章
- SpringBoot2整合Thymeleaf,官方推荐html解决方案
- CentOS7编译安装Cmake3.16.3,解决mysql等软件编译问题
- SpringBoot2配置默认Tomcat设置,开启更多高级功能
- SpringBoot2全家桶,快速入门学习开发网站教程
- Docker快速安装Oracle11G,搭建oracle11g学习环境
- CentOS7,CentOS8安装Elasticsearch6.8.6
- CentOS8,CentOS7,CentOS6编译安装Redis5.0.7
- CentOS7编译安装Gcc9.2.0,解决mysql等软件编译问题
- MySQL8.0.19开启GTID主从同步CentOS8
- Jdk安装(Linux,MacOS,Windows),包含三大操作系统的最全安装