笔记列表-低调大师优秀个人博客

文章列表

共 97898 篇

2020-05-25

解码Nginx如何快速实现HSTS跳转

什么是HSTSHSTS是国际互联网工程组织 IETF 正在推行一种新的Web安全协议，网站采用HSTS后，用户访问时无需手动在地址栏中输入 HTTPS，浏览器会自动采用 HTTPS 访问网站地址，从而保证用户始终访问到网站的加密链接，保护数据传输安全。浏览器版本支持Chromium和Google Chrome从4.0.211.0版本开始支持HSTS Fir...

651

阅读约4分钟

2020-05-25

直播预约 | 如何为云原生应用带来稳定高效的部署能力？

作者 | 酒祝阿里云技术专家、墨封阿里云开发工程师本次直播为第 3 期 SIG Cloud-Provider-Alibaba 网研会，我们邀请了阿里云技术专家酒祝和阿里云开发工程师墨封重点讲解《如何为云原生应用带来稳定高效的部署能力？》。点击链接预约直播：https://yq.aliyun.com/live/2898 随着近年来 Kubernet...

594

阅读约2分钟

2020-05-25

基于Openresty+CEPH实现海量数据管理系统

「持续更新中，欢迎关注...」 1. 需求：作为一家专注于三维高精度地图服务的公司，有海量（PB级）的原始数据、中间数据、成功数据，需要存储、管理、并定期归档。按项目管理数据，数据分类航飞数据、控制点数据、中间数据、成果数据、其他数据。数据来源包括无人机数据、载荷数据、地面站数据、人工打点数据等。不同渠道汇集而来的数据。采用类似百度网盘的形式，上传、下...

756

阅读约8分钟

2020-05-25

重磅！Apache Flink 1.11 功能前瞻抢先看！

整理 | 高赟、程鹤群Review | 王治江 Flink 1.11 版本即将正式宣告发布！为满足大家的好奇与期待，我们邀请 Flink 核心开发者对 1.11 版本的功能特性进行解读与分享。Flink 1.11 在 1.10 的基础上对许多方面进行了完善和改进，并致力于进一步提高 Flink 的可用性及性能。本文将详细介绍 1.11 版本的新功能、改进、...

652

阅读约34分钟

2020-05-25

Flink 1.10 SQL、HiveCatalog 与事件时间整合示例

Flink 1.10 与 1.9 相比又是个创新版本，在我们感兴趣的很多方面都有改进，特别是 Flink SQL。本文用根据埋点日志计算 PV、UV 的简单示例来体验 Flink 1.10 的两个重要新特性：一是 SQL DDL 对事件时间的支持；二是 Hive Metastore 作为 Flink 的元数据存储（即 HiveCatalog）。这两点将会...

664

阅读约19分钟

2020-05-25

OSS 数据湖实践 —— 使用EMR JindoFs Cache提升性能

通过使用cache缓存机制，减少数据分析处理过程中直读OSS的次数，不仅能够提高性能，更能减少与OSS的交互流量，减少数据分析成本与时间开销。前提条件已注册阿里云账号，详情请参见注册云账号。已开通E-MapReduce服务和OSS服务。已完成云账号的授权，详情请参见角色授权。已创建Haoop集群，且带有Hive组件，且配置OSS数据源。步骤一：设...

772

阅读约1分钟

2020-05-25

OSS数据湖实践——EMR + Hive + OSS案例

Hive是一种建立在Hadoop文件系统上的数据仓库架构，并对存储在HDFS中的数据进行分析和管理；本文通过一个简单的示例来展现如何结合OSS+EMR+Hive来分析OSS上的数据。前提条件 • 已注册阿里云账号，详情请参见注册云账号。• 已开通E-MapReduce服务和OSS服务。• 已完成云账号的授权，详情请参见角色授权。• 已创建Haoop集群，且...

1043

阅读约3分钟

2020-05-25

hive常见自定义函数

hive常见自定义函数先来讲一下hive自定义函数1.1 为什么需要自定义函数hive的内置函数满足不了所有的业务需求。hive提供很多的模块可以自定义功能，比如：自定义函数、serde、输入输出格式等。1.2 常见自定义函数有哪些.UDF：用户自定义函数，user defined function。一对一的输入输出。（最常用的）。.UDTF：用户自定义表生...

668

阅读约14分钟

2020-05-25

hive存储过程

hive存储过程，1、hive存储过程简介1.x版本的hive中没有提供类似存储过程的功能，使用Hive做数据开发时候，一般是将一段一段的HQL语句封装在Shell或者其他脚本中，然后以命令行的方式调用，完成一个业务或者一张报表的统计分析。好消息是，现在已经有了Hive存储过程的解决方案（HPL/SQL –Procedural SQL on hadoop），...

717

阅读约9分钟

2020-05-25

Ambari和ClouderaManager对比

Ambari和ClouderaManager对比，1 、什么是CDH，Ambari？ Apache Ambari是一种基于Web的工具，支持Apache Hadoop集群的供应、管理和监控。Ambari已支持大多数Hadoop组件，包括HDFS、MapReduce、Hive、Pig、 Hbase、Zookeper、Sqoop和Hcatalog等。 Apach...

774

阅读约6分钟

2020-05-25

OSS数据湖实践——EMR + Flink + OSS案例

本文介绍使用Flink大数据分析引擎，基于EMR，利用OSS云存储数据，实现一个分析案例。前提条件• 已注册阿里云账号，详情请参见注册云账号。• 已开通E-MapReduce服务和OSS服务。• 已完成云账号的授权，详情请参见角色授权。• 已创建Haoop集群，且带有spark组件。• 相关更多配置请参考OSS入门文档。步骤一：数据上传至oss hadoo...

1008

阅读约5分钟

2020-05-25

OSS数据湖实践——EMR + Spark + OSS案例

本文介绍大数据分析引擎spark 基于EMR集群，利用OSS云存储数据，实现一个简单的分析案例。前提条件 • 已注册阿里云账号，详情请参见注册云账号。• 已开通E-MapReduce服务和OSS服务。• 已完成云账号的授权，详情请参见角色授权。• 已创建Haoop集群，且带有spark组件，配置好相关的OSS数据源。步骤一：数据上传至oss hadoo...

790

阅读约5分钟

2020-05-25

OSS 数据湖实践 —— EMR+OSS入门

对象存储服务（Object Storage Service，OSS）是一种海量、安全、低成本、高可靠的云存储服务，适合存放任意类型的文件；E-MapReduce(EMR)构建于云服务器ECS上，基于开源的Apache Hadoop和Apache Spark，可以方便地使用Hadoop和Spark生态系统中的其他周边系统（例如，Apache Hive、Apac...

1253

阅读约6分钟

2020-05-25

手把手教你用Python给小姐姐美个颜

云栖号资讯：【点击查看更多行业资讯】在这里您可以找到不同行业的第一手的上云资讯，还在等什么，快来！ 01 图像的颜色空间彩色图像比灰度图像拥有更丰富的信息，它的每个像素通常是由红（R）、绿（G）、蓝（B）3个分量来表示的，每个分量介于0～255之间。图像中呈现的不同的颜色都是由R、G、B这3种颜色混合而成的。在OpenCV里面，彩色图像拥有3个颜色通道，...

645

阅读约14分钟

2020-05-25

码农幸福指数：哪种编程语言最让人感到幸福？

云栖号资讯：【点击查看更多行业资讯】在这里您可以找到不同行业的第一手的上云资讯，还在等什么，快来！刻板印象无处不在，在IT世界中也是如此。“ PHP是最糟糕的语言”或“ Python适合初学者”，这样的固有认知已然扎根在很多人的印象里。编程营2020即将开赛，我们将通过github和来自开发人员的调查数据找到真相，快来看看是哪个编程语言最终“C位出道”吧...

702

阅读约4分钟

2020-05-25

LeCun自曝使用C语言23年之久，2年前才上手Python，还曾短暂尝试Lua

云栖号资讯：【点击查看更多行业资讯】在这里您可以找到不同行业的第一手的上云资讯，还在等什么，快来！程序员圈子的流行风潮，过几年就怀旧风走一波。这不，最近Twitter上刮起了一阵编程语言使用历史的风潮。连图灵奖得主、CNN之父——Yann LeCun也参与进来了。他自曝使用C语言时间最长，达23年之久。随后，便“移情”于C++了。从2009年起，...

623

阅读约4分钟

2020-05-25

机器学习：物联网成功的诀窍？

云栖号资讯：【点击查看更多行业资讯】在这里您可以找到不同行业的第一手的上云资讯，还在等什么，快来！物联网（IoT）有着巨大的潜力，几乎没有哪项技术能与其相媲美，并且它几乎在每一个领域都释放出了新的机遇和创新。因此，全球企业正在安装比以往更多的传感器，以利用物联网的发展潜力。但如果没有适当的数据管理策略，这些传感器的实施可能会适得其反。企业可能会发现自己的...

681

阅读约6分钟

2020-05-25

2020年的顶级数据分析趋势

云栖号资讯：【点击查看更多行业资讯】在这里您可以找到不同行业的第一手的上云资讯，还在等什么，快来！除了人工智能技术得到广泛应用之外，在过去几年中，大数据也取得了更具意义的发展。调查表明，2020年全球大数据行业的市场规模为1,890亿美元。考虑到市场增长，可以预计到2022年将达到2470亿美元。迪斯尼公司董事长表示：“技术正在提升创造力，并改变了娱乐和...

595

阅读约7分钟

2020-05-25

我在阿里招前端，我该怎么帮你？

作者|沈砾捷(磐冲)出品|阿里巴巴新零售淘系技术部我是谁？为什么写这篇文章？好吧，我承认，我自己在招聘上可能是有点没找到方法。但是，看了那么多简历，经历了那么多次面试，我最大的感受却是惋惜。因为有好多同学，在电话那头我听出了努力，听出了能力，听出了激情，但是却没有听到亮点、和让我觉得，能够继续闯过下一关的能力。我面试过的同学，在结束的时候，我都会指出问...

617

阅读约2分钟

2020-05-25

常用的 7 款 MySQL 客户端工具，你值得拥有！

云栖号资讯：【点击查看更多行业资讯】在这里您可以找到不同行业的第一手的上云资讯，还在等什么，快来！ MySQL的管理维护工具非常多，除了系统自带的命令行管理工具之外，还有许多其他的图形化管理工具，这里我介绍几个经常使用的MySQL图形化管理工具，供大家参考。 1、phpMyAdmin http://www.phpmyadmin.net/ phpMyAdmin...

799

阅读约5分钟

资源下载

更多资源

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题，腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构，目前腾讯云软件源站支持公网访问和内网访问。

Nacos

Nacos /nɑ:kəʊs/ 是 Dynamic Naming and Configuration Service 的首字母简称，一个易于构建 AI Agent 应用的动态服务发现、配置管理和AI智能体管理平台。Nacos 致力于帮助您发现、配置和管理微服务及AI智能体应用。Nacos 提供了一组简单易用的特性集，帮助您快速实现动态服务发现、服务配置、服务元数据、流量管理。Nacos 帮助您更敏捷和容易地构建、交付和管理微服务平台。

Rocky Linux

Rocky Linux（中文名：洛基）是由Gregory Kurtzer于2020年12月发起的企业级Linux发行版，作为CentOS稳定版停止维护后与RHEL（Red Hat Enterprise Linux）完全兼容的开源替代方案，由社区拥有并管理，支持x86_64、aarch64等架构。其通过重新编译RHEL源代码提供长期稳定性，采用模块化包装和SELinux安全架构，默认包含GNOME桌面环境及XFS文件系统，支持十年生命周期更新。

WebStorm

WebStorm 是jetbrains公司旗下一款JavaScript 开发工具。目前已经被广大中国JS开发者誉为“Web前端开发神器”、“最强大的HTML5编辑器”、“最智能的JavaScript IDE”等。与IntelliJ IDEA同源，继承了IntelliJ IDEA强大的JS部分的功能。

文章列表

解码Nginx如何快速实现HSTS跳转

直播预约 | 如何为云原生应用带来稳定高效的部署能力？

基于Openresty+CEPH实现海量数据管理系统

重磅！Apache Flink 1.11 功能前瞻抢先看！

Flink 1.10 SQL、HiveCatalog 与事件时间整合示例

OSS 数据湖实践 —— 使用EMR JindoFs Cache提升性能

OSS数据湖实践——EMR + Hive + OSS案例

hive常见自定义函数

hive存储过程

Ambari和ClouderaManager对比

OSS数据湖实践——EMR + Flink + OSS案例

OSS数据湖实践——EMR + Spark + OSS案例

OSS 数据湖实践 —— EMR+OSS入门

手把手教你用Python给小姐姐美个颜

码农幸福指数：哪种编程语言最让人感到幸福？

LeCun自曝使用C语言23年之久，2年前才上手Python，还曾短暂尝试Lua

机器学习：物联网成功的诀窍？

2020年的顶级数据分析趋势

我在阿里招前端，我该怎么帮你？

常用的 7 款 MySQL 客户端工具，你值得拥有！

资源下载

腾讯云软件源

Nacos

Rocky Linux

WebStorm

欢迎您来访！