NLP度量指标BELU真的完美么？-低调大师

NLP度量指标BELU真的完美么？

2019-01-19 852

刚接触自然语言处理的朋友通常会问我：当系统的输出是文本，而非对输入文本进行某种分类，如何对该系统进行评估。当模型的输入是文本信息，输出也是文本信息时，我们称之为序列到序列问题，也可称为字符串转换问题。

序列到序列建模是解决NLP中较难任务的核心，它包括：
1、自动文摘（Text Summarization）；
2、文本简化（Text simplification）；
3、问答（Question answering）；
4、聊天机器人（Chatbots）；
5、机器翻译（Machine translation）；

理解序列到序列建模问题相对容易，如何对其进行评价才是难点。

对于刚入门NLP的人来说，选取衡量标准较为困难。目前最流行的评价指标之一BLEU虽然常用，但也存在较大的缺陷。

本文将介绍BELU的工作原理

微信关注我们

原文链接：https://yq.aliyun.com/articles/688207

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

1月18日云栖精选夜读 | Euler 今日问世！国内首个工业级的图深度学习开源框架，阿里妈妈造

阿里妹导读：千呼万唤始出来！阿里妈妈正式公布重磅开源项目——图深度学习框架Euler。这是国内首个在核心业务大规模应用后开源的图深度学习框架。此次开源，Euler内置了大量的算法供用户直接使用，相关代码已经可在GitHub上进行下载。热点热议 Euler 今日问世！国内首个工业级的图深度学习开源框架，阿里妈妈造作者：技术小能手发表在：阿里技术天啦噜！在家和爱豆玩"剪刀石头布"，阿里工程师如何办到？作者：技术小能手发表在：阿里技术云栖专辑 | 阿里开发者们的20个感悟，一通百通作者：云篆知识整理 SAP创建物料MM01的三个画面（初始、主画面、附加画面）作者：pandamonica Redis 缓存雪崩穿透作者：心意乱自然语言处理hanlp的入门基础作者：大数据资讯开发函数计算的正确姿势 —— 安装第三方依赖作者：倚贤 ES6规范import和export用法总结作者：刘琨1227 美文回顾 Linux基础命令---usermod 作者：一生有你llx 网站有漏洞被攻击篡改了数据该怎么修复解决作者：网站安全如何在基于Bytom开发过程中集成IPFS 作...

2019-01-18

729

概述在服务构建中，我们经常需要对用户的图片做进一步分析。本文利用智能媒体管理（IMM）提供的图片索引功能，快速搭建一个人脸搜索的功能，示例使用 Python 2.7 实现。我们以学生点名场景为例。首先构造学生照片集合，再对现场拍摄的照片进行检测。操作流程如下：将所有学生图片传入 OSS 存储中。创建一个媒体集 Set，用于存储这些图片的元数据，本文将利用其中的人脸特征数据。将所有学生图片预置至 Set 内。传入一张待测图片，查找和该照片匹配的人物。如下图：下面我们分步操作一下。创建 IMM 项目开通 IMM 服务后，访问控制台，在左侧点击加号创建一个新项目。左上方地域我们选择华东1（杭州），右侧的项目名称命名为 RollCallDemo ，所属地域选择华东1（杭州），类型选择图片标准型，QPS 填入 1 ，点击下一步。截止本文发表时，图片标准型的 1 QPS 是免费的，可以放心测试。参考计费说明准备测试图片我们准备了3张学生图片，用于构建学生集： oss://imm-user-wmt-cn-hangzhou/roll-call-de...

2019-01-22

599

资源下载

更多资源

优质分享App

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长，特征是大鼻子、头戴帽子、身穿背带裤，还留着胡子。与他的双胞胎兄弟路易基一起，长年担任任天堂的招牌角色。

Nacos

Nacos /nɑ:kəʊs/ 是 Dynamic Naming and Configuration Service 的首字母简称，一个易于构建 AI Agent 应用的动态服务发现、配置管理和AI智能体管理平台。Nacos 致力于帮助您发现、配置和管理微服务及AI智能体应用。Nacos 提供了一组简单易用的特性集，帮助您快速实现动态服务发现、服务配置、服务元数据、流量管理。Nacos 帮助您更敏捷和容易地构建、交付和管理微服务平台。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。