基于Quick BI的用户分布分析-低调大师

基于Quick BI的用户分布分析

2016-12-22 710

Quick BI的气泡地图功能能非常直观得体现全国各区域的数据情况。这里从网上搜了一份某社交网站的用户数据，数据量就五六万条，而且只包含这些用户的公开信息（省的自己还要去爬）。

数据预处理

数据包含的字段为uid、location、gender、followersnum、friendsnum，分别是用户id、所在区域、性别、关注人数、好友人数。里面的location这个字段是中文的，看到为“浙江”这样的就写了省的，也有是“浙江杭州”这样到省、市的，而且中间用空格分割。另外还有一些写的是“海外”或“其他”。

先用个SQL对数据进行处理，整理出一个所在省的字段

create table wbuser2 AS
select b.*
  from(
select a.uid, a.`location`, a.`gender`, a.`follo

微信关注我们

原文链接：https://yq.aliyun.com/articles/67082

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

书评：《大数据处理之道》大数据热门技术遍历

大数据无疑是当今时代最前沿最炙手可的概念，所以对于这种新技术，只有不断掌握最新的思想，时刻学习新的技术。作为大数据研发人员，时刻保持学习新技术，方能立于技术。这本书，系统的讲解了当前流行的大数据软件Hadoop, Spark, Storm, Dremel/Drill，MapReduce, HDFS, Hive, Hbase, Pig, ZooKeeper等等，深入浅出的讲解，每个软件的优缺，这种横向比较如何把“死”的数据，变成真正有效的“资源”，最后再变成活生生的“金子”，可是说是大数据工具软件的集大成作品。对于这么一个讲软件讲概念的书籍，更为难得的是幽默大话的表述风格，读起来畅快容易理解，可以轻松掌握。重点从各个技术的起源、设计思想、构架方面阐述，帮助读者能从根源上悟出大数据处理的核心道理，可以说每个人都会在读完有感触颇深的感觉。本书最难能可贵之处在于全面，从广度上，涵盖了目前几乎所有的大数据处理热门技术，实为大数据行业的入门人员和从业人员的一顿饕餮盛宴。书中全面介绍了目前大数据处理领域的热门技术的精髓和适应的场景，实用性很强，特别是通过目录发现了后面章节有专门设计日志分析这一...

2016-12-22

611

前言 MaxCompue(原名ODPS)是阿里巴巴自主研发的一种快速、完全托管的TB/PB级数据仓库解决方案，获得了很多用户的喜爱。这篇帖子希望能给这些用户关于如何学习使用一些帮助。帖子本身很少直接介绍MaxCompute的知识，但是会给出如果想学好需要做到什么，像是一张Checklist。当随着时间的积累，你在上面打满了勾的时候，相信你已经能熟练使用MaxCompute进行开发了。在写本学习计划时，因为Datahub和流计算正在重构，暂时不包含在内。如果在学习过程中遇到任何解决不了的问题，可以在文后和我们留言互动。因为问题或许有共性，或许也能帮到其他人。但是涉及到诸如账号密码，Access Id/Key一类的敏感信息，请务必不要写在留言里，有需要可以提交工单咨询。大纲本学习计划主要包含: Mysql SQL MaxCompute S

2016-12-23

676

资源下载

更多资源

优质分享App

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

Mario

马里奥是站在游戏界顶峰的超人气多面角色。马里奥靠吃蘑菇成长，特征是大鼻子、头戴帽子、身穿背带裤，还留着胡子。与他的双胞胎兄弟路易基一起，长年担任任天堂的招牌角色。

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题，腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构，目前腾讯云软件源站支持公网访问和内网访问。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。