开源大数据周刊-第66期-低调大师

开源大数据周刊-第66期

2017-08-31 570

资讯：

近期，数据挖掘资讯网站KDnuggets开展了一项调查，问题是“2016年和2017年，在数据分析、数据科学和机器学习工作中，你使用R、Python、两者都用，还是其他工具?”。2017年Python生态系统已经超越了R，成为数据分析、数据科学和机器学习领域领先的平台，同时也在迅速吸引其他平台的用户。

解读大数据产业：区域集聚发展格局逐步形成

8月24日,中国电子信息产业发展研究院在工业和信息化部信软司指导下发布了《中国大数据产业发展水平评估报告(2017年)》。作为《大数据产业发展规划(2016—2020年)》颁布后的第一个年度大数据产业评估报告,为我国大数据产业健康发展和相关产业管理工作提供了有力支撑。

报告 | 中国大数据应用发展报告精读
```
近日，中国管理科学学会大数据管
```

微信关注我们

原文链接：https://yq.aliyun.com/articles/186852

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

阿里云E-MapReduce Spark SQL 作业配置

.注意：Spark SQL 提交作业的模式默认是 yarn-client` 模式。 2.进入阿里云E-MapReduce控制台作业列表。 3.单击该页右上角的创建作业，进入创建作业页面。 4.填写作业名称。 5.选择 Spark SQL 作业类型，表示创建的作业是一个 Spark SQL 作业。Spark SQL 作业在 E-MapReduce 后台使用以下的方式提交： spark-sql [options] [cli option]6.在“应用参数”选项框中填入 Spark SQL 命令后续的参数。 -e 选项 -e 选项可以直接写运行的 SQL，在作业应用参数框中直接输入，如下所示： -e "show databases;"-f 选项 -f 选项可以指定 Spark SQL 的脚本文件。通过将编写好的 Spark SQL 脚本文件放在 OSS 上，可以更灵活，建议您使用这种运行方式。如下所示： -f ossref://your-bucket/your-spark-sql-script.sql7.选择执行失败后策略。 8.单击确定，Spark SQL 作业即定义完成。

2017-09-01

584

文章讲的是对话知乎王雨舟：大数据时代，人都在“裸奔”吗，从大数据时代开启的第一天起，我们的生活注定被数据灌满了。这是一个人人都需要隐私但又不懂得在乎和保护隐私的时代，几乎所有人都在发布数据，把它们挂在网上或传播到公共平台。人们既向外发散，又向内吸收，自觉或不自觉地收集各种各样的数据信息。——《大数据在中国》人们不禁发问：大数据时代，人都是在“裸奔”吗? 知乎，作为一个知识社交平台，目前拥有8400万注册用户，每天产生的数据量多得惊人。这些传来传去的信息中又有谁清楚到底隐藏了多大价值呢?知乎无疑是上述问题的最佳答主之一，这也被笔者列在了本次采访问题之中，而这位答题者正是知乎大数据平台架构师王雨舟! ▲王雨舟王雨舟，在大数据平台以及实时计算上有丰富经验，现任知乎大数据平台负责人，带领团队驱动知乎业务发展。知乎增长团队早期负责人，对增长方法论以及黑科技有深入理解与实战经验。曾任豌豆荚高级研发工程师，主要负责大数据分析平台研发，知识图谱，实时计算平台等，对技术热爱并乐于交流和分享，擅长的技术包括：Hadoop，Spark，Druid，Akka等。大数据时代，人都是在“裸奔”吗? 大数...

2017-09-01

690

资源下载

更多资源

优质分享App

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

Nacos

Nacos /nɑ:kəʊs/ 是 Dynamic Naming and Configuration Service 的首字母简称，一个易于构建 AI Agent 应用的动态服务发现、配置管理和AI智能体管理平台。Nacos 致力于帮助您发现、配置和管理微服务及AI智能体应用。Nacos 提供了一组简单易用的特性集，帮助您快速实现动态服务发现、服务配置、服务元数据、流量管理。Nacos 帮助您更敏捷和容易地构建、交付和管理微服务平台。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。

Rocky Linux

Rocky Linux（中文名：洛基）是由Gregory Kurtzer于2020年12月发起的企业级Linux发行版，作为CentOS稳定版停止维护后与RHEL（Red Hat Enterprise Linux）完全兼容的开源替代方案，由社区拥有并管理，支持x86_64、aarch64等架构。其通过重新编译RHEL源代码提供长期稳定性，采用模块化包装和SELinux安全架构，默认包含GNOME桌面环境及XFS文件系统，支持十年生命周期更新。