使用阿里云InfluxDB®和Structured Streaming实时处理时序数据-低调大师

使用阿里云InfluxDB®和Structured Streaming实时处理时序数据

2019-11-26 730

本文重点介绍怎样利用阿里云InfluxDB®和spark structured streaming来实时计算、存储和可视化数据。下面将介绍如何购买和初始化阿里云InfluxDB®，扩展spark foreach writer，以及设计阿里云InfluxDB®数据库时需要注意的事项。

在大数据处理中，一个主要的趋势是人们希望看到metric是如何随着时间变化发展。这使得管理和处理时序数据（数值随时间变化的数据）成为数据科学家非常重要的研究方向。目前，已经有非常多的时序处理数据库产品，如OpenTSDB，TimeScaleDB，InfluxDB以及Druid等。InfluxDB因为完整的生态、类SQL的查询语言以及简单快捷的布署而非常受用户喜爱，居于DBEngine时序数据排列首位。阿里云已经将其进行开源托管，并且完善了TIG(Tele

微信关注我们

原文链接：https://yq.aliyun.com/articles/728291

转载内容版权归作者及来源网站所有！

低调大师中文资讯倾力打造互联网数据资讯、行业资源、电子商务、移动互联网、网络营销平台。持续更新报道IT业界、互联网、市场资讯、驱动更新,是最及时权威的产业资讯及硬件资讯报道平台。

云存储网关——文件网关

背景阿里云对象存储OSS能提供海量、安全、低成本、高可靠的云存储服务。使用RESTful API 可以在互联网任何位置存储和访问，容量和处理能力弹性扩展，多种存储类型供选择全面优化存储成本。由于阿里云OSS具备以上所说的优势，所有一直是有大容量存储需求的首要选择，但是最近再做一个项目的时候，遇到了一个问题：geoserver 无法使用oss以url的形式支持读取影像数据，只能用路径地址来调用。摸索了很久，然后发现阿里云有一款产品叫：云存储网关——云存储网关以阿里云OSS为后端存储，为企业应用提供行业标准的文件存储和块存储服务。然后我通过OSS+云存储网关的组合方式，解决了geoserver 无法使用oss以url的形式读取数据的问题。以下是我整理出来的操作流程，其中会用到的产品有：ECS：https://www.aliyun.com/product/ecsOSS：https://www.aliyun.com/product/oss云存储网关：https://www.aliyun.com/product/hcs 准备工作 1、首先在oss创建一个Bucket：yiangg-hn，再创...

2019-11-27

891

随着人工智能 (AI) 的出现，银行业被公认为是正在经历重大变革的主要行业之一。凭借雄厚的财力，该行业有资源将大笔资金投入到机器学习的各个领域，从股票交易到客户服务，再到移动银行。消除恐惧但在向消费者传达信息方面确实存在一个问题。据英国的一项调查，当人工智能涉及到钱时，多达 80% 的人表示不信任。考虑到有关自主计算机的危言耸听，这或许是可以理解的，更不用提关于AI的基本功能有很多神秘之处。然而，正如该领域的专家经常强调的那样，危险被大大夸大了。实现飞跃：人工智能在银行业人工智能在银行业的潜力是巨大的。根据 Business Insider 的一份报告，到 2020 年，它可能帮助节省多达 4430 亿美元的成本。反欺诈的应用程序这份报告还估计，通过 “人工智能了解你的客户” (AI Know Your Customer) 程序，

2019-11-27

709

资源下载

更多资源

优质分享App

近一个月的开发和优化，本站点的第一个app全新上线。该app采用极致压缩，本体才4.36MB。系统里面做了大量数据访问、缓存优化。方便用户在手机上查看文章。后续会推出HarmonyOS的适配版本。

Nacos

Nacos /nɑ:kəʊs/ 是 Dynamic Naming and Configuration Service 的首字母简称，一个易于构建 AI Agent 应用的动态服务发现、配置管理和AI智能体管理平台。Nacos 致力于帮助您发现、配置和管理微服务及AI智能体应用。Nacos 提供了一组简单易用的特性集，帮助您快速实现动态服务发现、服务配置、服务元数据、流量管理。Nacos 帮助您更敏捷和容易地构建、交付和管理微服务平台。

Spring

Spring框架（Spring Framework）是由Rod Johnson于2002年提出的开源Java企业级应用框架，旨在通过使用JavaBean替代传统EJB实现方式降低企业级编程开发的复杂性。该框架基于简单性、可测试性和松耦合性设计理念，提供核心容器、应用上下文、数据访问集成等模块，支持整合Hibernate、Struts等第三方框架，其适用范围不仅限于服务器端开发，绝大多数Java应用均可从中受益。

Rocky Linux

Rocky Linux（中文名：洛基）是由Gregory Kurtzer于2020年12月发起的企业级Linux发行版，作为CentOS稳定版停止维护后与RHEL（Red Hat Enterprise Linux）完全兼容的开源替代方案，由社区拥有并管理，支持x86_64、aarch64等架构。其通过重新编译RHEL源代码提供长期稳定性，采用模块化包装和SELinux安全架构，默认包含GNOME桌面环境及XFS文件系统，支持十年生命周期更新。