解决MaxCompute SQL count distinct多个字段的方法-低调大师

解决MaxCompute SQL count distinct多个字段的方法

2019-02-20 741

按照惯性思维，统计一个字段去重后的条数我们的sql写起来如下：

Distinct的作用是用于从指定集合中消除重复的元组，经常和count搭档工作，语法如下

COUNT( { [ DISTINCT ] expression ] | * } )

这时，可能会碰到如下情况，你想统计同时有多列字段重复的数目，你可能会立马想到如下方法：

select count( distinct col1 , col2 , col3 , .......) from table

但是，这样是有问题的，如果值包含空，那么我们的结果是什么呢？如果你实验过，正如你实验的一样，结果会比实际少。

a	b
1	null
2	x
1	null

count 结果为1；

因为MaxCompute count多列的时候，里面只要有一列为null，就忽略，不参加计算。

这个问题怎么解

微信关注我们

原文链接：https://yq.aliyun.com/articles/690976

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

Apache Spark + Intel Analytics Zoo 进行深度学习

Analytics Zoo 是由 Intel 开源,基于 Apache Spark 和 Inte BigDL 的大数据分析和 AI 平台，方便用户开发基于大数据、端到端的深度学习应用。本文简单介绍了如何在阿里云 E-MapReduce 使用 Analytics Zoo 来进行深度学习。简介 Analytics Zoo是由 Intel 开源，基于Apache Spark 和 Inte BigDL 的大数据分析和AI平台，方便用户开发基于大数据、端到端的深度学习应用。系统要求 JDK 8 Spark 集群(推荐使用EMR支持的 Spark 2.x) python-2.7(python 3.5，3.6 也支持)，pip 安装Analytics Zoo Analytics Zoo 最新的 release 版本是 0.2.0 安装Scala 下载 pre-

2019-02-20

677

1、普通操作进入shell [qiqi@c1 ~]$ hbase shell 查看当前用户 hbase(main):001:0> whoami （如果有 kerberos 认证，需要事先使用相应的 keytab 进行一下认证（使用 kinit 命令），认证成功之后再使用 hbase shell 进入可以使用 whoami 命令可查看当前用户）删除错误ctrl+backspace（退格键） 2、表的管理查看表结构 hbase(main):017:0> describe 'user' 查看有哪些表 hbase(main):002:0> list 创建表 hbase(main):014:0> creat 'user','info'（表名为user，簇名为info）create 'qiqi',{NAME=>'keke',VERSIONS=>8},{NAME=>'xiaoxiao',VERSIONS=>8}（表名为qiqi，簇名keke、xiaoxiao，）删除表，分两步：首先 disable，然后 drop hbase(main):00...

2019-02-21

598

资源下载

更多资源

优质分享App

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长，特征是大鼻子、头戴帽子、身穿背带裤，还留着胡子。与他的双胞胎兄弟路易基一起，长年担任任天堂的招牌角色。

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题，腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构，目前腾讯云软件源站支持公网访问和内网访问。

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。