-
使用 E-MapReduce 构建云上数据胡
原视频链接:https://www.slidestalk.com/AliSpark/EMapReduce191196?video 编辑:杨仲鲍,北京海致星图科技有限公司服务端开发工程师 ,大数据爱好者,Spark 中文社区志愿者 首先介绍一下阿里云飞天大数据平台(简称飞天平台),飞天平台由AI-PAI(机器学习和深度学习的平台)和大数据平台组成。 除 EMR...
时间:2020-08-20点击:618收藏
-
Flink SQL FileSystem Connector 分区提交与自定义小文件合并策略
作者:LittleMagic 之前笔者在介绍 Flink 1.11 Hive Streaming 新特性时提到过,Flink SQL 的 FileSystem Connector 为了与 Flink-Hive 集成的大环境适配,做了很多改进,而其中最为明显的就是分区提交(partition commit)机制。 本文先通过源码简单过一下分区提交机制的两个要素...
时间:2020-08-20点击:590收藏
-
BIGO 实时计算平台建设实践
BIGO 全球音视频业务对数据的实时能力要求越来越高,数据分析师希望多维度实时看到新增用户、活跃用户等业务数据以便尽快掌握市场动向,机器学习工程师希望实时拿到用户的浏览、点击等数据然后通过在线学习将用户偏好快速加入到模型中,以便给用户推送当前最感兴趣的内容,APP 开发工程师希望能够实时监控 APP 打开的成功率、崩溃率。 这些实时数据的能力都要依靠实时计算...
时间:2020-08-20点击:466收藏
-
CDN百科11 | 担心纸质病例被洪水淹没?ECS+CDN+OSS如何助力医疗上云
近日,一则洪水中医护紧急转移病例的新闻在网络上引起热议。由于病区被洪水淹没,医护与后勤、安保一起站在齐大腿深的洪水中,转移患者病例。网友纷纷表示:向所有医护人员致敬,你们辛苦了! (图片摘自网络) 看了这则新闻,相信你一定十分敬佩医护人员的善良和担当,同时也为他们泡在洪水中的双腿而感到心疼。剖析事件的背后,纸质病例确实存在储存难、转移难的痛点,如何解决这一问...
时间:2020-08-20点击:596收藏
-
2.3.3 CGLIB动态代理 -《SSM深入解析与项目实战》
2.3.3 CGLIB动态代理 前面介绍了JDK的动态代理,从一些实例也可以看到,JDK动态代理是依赖于实现的接口的。而CGLIB弥补了这个缺点,让我们在不需要实现接口的情况下,也可以实现动态代理。JDK动态代理和CGLIB动态代理在Spring实现AOP中都是使用到的技术,Spring AOP默认是使用JDK动态代理来代理接口的,但是可以进行强制使用CGL...
时间:2020-08-19点击:532收藏
-
一文读懂jar包的小秘密
简介 java程序员每天不是在创建jar包就是在创建jar包的路上,并且各种依赖引用都是以jar包的形式展示的。但是随着现代IDE的出现,我想很多程序员已经基本上很少直接和jar包打交道了。 换句话说,他们已经不认识jar包了。 那么jar包到底是什么呢?它有哪些小秘密呢?一起来看一下吧。 jar包到底是什么 jar包其实是一种zip格式的文件,所以说你实际...
时间:2020-08-19点击:455收藏
-
文末有福利!Spark 实战训练营新增1000名额,8月24日正式开课
大数据圈近日的网红非图上10位海岛风情少年莫属了。阿里云首次尝试的9营齐开项目,汇聚多个技术/产品一线专家传授独门秘籍,联合两大主流开源社区为大数据圈的后浪们铺路搭桥。上线两天,首批名额抢光,作为旨在为 Spark 国内开发者服务的我们,紧急申请新增1000名额,距离开课还剩4天,之前没有抢到的朋友们可以再冲一波。 报名链接: https://develop...
时间:2020-08-19点击:676收藏
-
阿里云云原生数据湖分析DLA重磅发布-数据湖管理,助力企业一站式管理OSS数据湖存储数据
一、什么是数据湖方案 数据湖当前在国内外是比较热的方案,MarketsandMarkets市场调研显示预计数据湖市场规模在2024年会从2019年的79亿美金增长到201亿美金。一些企业已经构建了自己的云原生数据湖方案,有效解决了业务痛点;还有很多企业在构建或者计划构建自己的数据湖,Gartner 2020年发布的报告显示目前已经有39%的用户在使用数据湖,...
时间:2020-08-19点击:689收藏
-
Elastic Stack 实现地理空间数据采集与可视化分析
随着人类在不断地探索空间,地理空间数据越来越多。 收集信息的速度以及提供位置信息的来源正在迅速增长。政府和商业卫星继续扩张。与GPS一起,它们提供了一系列不同的空间丰富的数据源,包括天气和温度模式,土地使用,土壤化学,减灾和响应,电信等。 移动设备和底层网络将人员,汽车,卡车和大量踏板车变成了位置信息的来源。计算机网络将位置信息嵌入IP地址元数据中,这可以帮...
时间:2020-08-19点击:581收藏
-
详细讲解!Canal+Kafka实现MySQL与Redis数据同步!
思维导图 本文章已收录到个人博客网站(我爱B站):me.lovebilibili.com 前言 在很多业务情况下,我们都会在系统中加入redis缓存做查询优化。 如果数据库数据发生更新,这时候就需要在业务代码中写一段同步更新redis的代码。 这种数据同步的代码跟业务代码糅合在一起会不太优雅,能不能把这些数据同步的代码抽出来形成一个独立的模块呢,答案是可以的...
时间:2020-08-18点击:740收藏
-
一篇文章带你用jquery mobile设计颜色拾取器
【一、项目背景】 现实生活中,我们经常会遇到配色的问题,这个时候去百度一下RGB表。而RGB表只提供相对于的颜色的RGB值而没有可以验证的模块。 我们可以通过 jquery mobile去设计颜色的拾取器,得到我们想要的颜色值。同时可以验证RGB表的颜色值。 【二、项目准备】 框架:jquery mobile 软件:Dreamweaver 1、去官网 jQu...
时间:2020-08-18点击:505收藏
-
助力企业数字化转型 | 斑羚在线、环宇数通、乘云科技入选阿里云原生合作伙伴计划
近日,北京三家重量级伙伴“斑羚在线、环宇数通、乘云科技”喜获阿里云正式授牌认证。自从2019年加入“云原生合作计划”以来,在云原生技术方面,双方开展了深度合作,推进企业进行数字化转型,达成生态共赢。而在此之前,这三家企业与阿里云已经建立了深厚的合作基础,在“新基建”的战略背景下,基于阿里云丰富全面的云原生产品、成熟的云计算技术及平台支撑能力,斑羚在线、环宇数...
时间:2020-08-18点击:532收藏
点击排行
推荐阅读
最新文章
- Docker快速安装Oracle11G,搭建oracle11g学习环境
- 2048小游戏-低调大师作品
- SpringBoot2编写第一个Controller,响应你的http请求并返回结果
- SpringBoot2初体验,简单认识spring boot2并且搭建基础工程
- Docker使用Oracle官方镜像安装(12C,18C,19C)
- SpringBoot2整合MyBatis,连接MySql数据库做增删改查操作
- MySQL数据库在高并发下的优化方案
- Dcoker安装(在线仓库),最新的服务器搭配容器使用
- CentOS7编译安装Cmake3.16.3,解决mysql等软件编译问题
- SpringBoot2配置默认Tomcat设置,开启更多高级功能