解决MaxCompute SQL count distinct多个字段的方法-低调大师

解决MaxCompute SQL count distinct多个字段的方法

2019-02-20 809

按照惯性思维，统计一个字段去重后的条数我们的sql写起来如下：

Distinct的作用是用于从指定集合中消除重复的元组，经常和count搭档工作，语法如下

COUNT( { [ DISTINCT ] expression ] | * } )

这时，可能会碰到如下情况，你想统计同时有多列字段重复的数目，你可能会立马想到如下方法：

select count( distinct col1 , col2 , col3 , .......) from table

但是，这样是有问题的，如果值包含空，那么我们的结果是什么呢？如果你实验过，正如你实验的一样，结果会比实际少。

a	b
1	null
2	x
1	null

count 结果为1；

因为MaxCompute count多列的时候，里面只要有一列为null，就忽略，不参加计算。

这个问题怎么解

微信关注我们

原文链接：https://yq.aliyun.com/articles/690976

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

Apache Spark + Intel Analytics Zoo 进行深度学习

Analytics Zoo 是由 Intel 开源,基于 Apache Spark 和 Inte BigDL 的大数据分析和 AI 平台，方便用户开发基于大数据、端到端的深度学习应用。本文简单介绍了如何在阿里云 E-MapReduce 使用 Analytics Zoo 来进行深度学习。简介 Analytics Zoo是由 Intel 开源，基于Apache Spark 和 Inte BigDL 的大数据分析和AI平台，方便用户开发基于大数据、端到端的深度学习应用。系统要求 JDK 8 Spark 集群(推荐使用EMR支持的 Spark 2.x) python-2.7(python 3.5，3.6 也支持)，pip 安装Analytics Zoo Analytics Zoo 最新的 release 版本是 0.2.0 安装Scala 下载 pre-

2019-02-19

757

1、普通操作进入shell [qiqi@c1 ~]$ hbase shell 查看当前用户 hbase(main):001:0> whoami （如果有 kerberos 认证，需要事先使用相应的 keytab 进行一下认证（使用 kinit 命令），认证成功之后再使用 hbase shell 进入可以使用 whoami 命令可查看当前用户）删除错误ctrl+backspace（退格键） 2、表的管理查看表结构 hbase(main):017:0> describe 'user' 查看有哪些表 hbase(main):002:0> list 创建表 hbase(main):014:0> creat 'user','info'（表名为user，簇名为info）create 'qiqi',{NAME=>'keke',VERSIONS=>8},{NAME=>'xiaoxiao',VERSIONS=>8}（表名为qiqi，簇名keke、xiaoxiao，）删除表，分两步：首先 disable，然后 drop hbase(main):00...

2019-02-20

651

资源下载

更多资源

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题，腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构，目前腾讯云软件源站支持公网访问和内网访问。

Nacos

Nacos /nɑ:kəʊs/ 是 Dynamic Naming and Configuration Service 的首字母简称，一个易于构建 AI Agent 应用的动态服务发现、配置管理和AI智能体管理平台。Nacos 致力于帮助您发现、配置和管理微服务及AI智能体应用。Nacos 提供了一组简单易用的特性集，帮助您快速实现动态服务发现、服务配置、服务元数据、流量管理。Nacos 帮助您更敏捷和容易地构建、交付和管理微服务平台。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。

Rocky Linux

Rocky Linux（中文名：洛基）是由Gregory Kurtzer于2020年12月发起的企业级Linux发行版，作为CentOS稳定版停止维护后与RHEL（Red Hat Enterprise Linux）完全兼容的开源替代方案，由社区拥有并管理，支持x86_64、aarch64等架构。其通过重新编译RHEL源代码提供长期稳定性，采用模块化包装和SELinux安全架构，默认包含GNOME桌面环境及XFS文件系统，支持十年生命周期更新。