笔记列表-低调大师优秀个人博客

文章列表

共 97898 篇

2018-11-19

spring cloud互联网分布式微服务云平台规划分析--spring cloud定时调度平台

1.介绍鸿鹄云架构【定时调度平台】是一个完全由Java编写的开源任务调度框架，为企业在任务调度提供了简单却强大的机制。开发人员根据业务规则，使用调度平台简单配置，就可以让任务在特定时间特定阶段进行运行。特点如下： 1.强大的调度功能，例如支持丰富多样的调度方法，可以满足各种常规及特殊需求。 2.灵活的应用方式，例如支持任务和调度的多种组合方式，支持调度数据...

694

阅读约2分钟

2018-11-19

spring cloud互联网分布式微服务云平台规划分析--spring cloud服务监控中心

1.介绍鸿鹄云架构【服务监控中心】提供简洁的可视化WEB UI，来管理 Spring Cloud 微服务应用程序。 2.平台基础功能服务在线状态监控、Logging日志级别管理、JMX beans管理、Threads会话和线程管理、Trace应用请求跟踪应用运行参数信息更多资源欢迎球911708498 Java 系统属性、Java 环境变量属性、内存信...

757

阅读约2分钟

2018-11-19

spring cloud互联网分布式微服务云平台规划分析--spring cloud服务统一配置中心

1.介绍鸿鹄云架构【服务统一配置中心】为分布式系统中的外部配置提供服务器和客户端支持。使用commonservice-config，可以在所有环境中管理应用程序的外部属性。应用程序可通过从开发人员到测试和生产的部署流程，可以管理这些环境之间的配置，并确定应用程序具有迁移时需要运行的一切。服务器存储后端的默认实现使用git，因此它轻松支持标签版本的配置环境，以...

684

阅读约2分钟

2018-11-19

使用Kubernetes Ingress来实现类似Istio条件路由

微服务 Istio / SpringCloud日益被越来越多的客户关注，Istio提供了各种酷炫的流量控制功能，但Istio距离生产部署可用仍然还有差距。条件路由是否可以在已有的Kubernetes Ingress架构中实现，以最小的代价实现应用的微服务化迁移。答案是肯定的，通过对ingress自定义location/server块的定义，以及upsteam...

806

阅读约2分钟

2018-11-19

阿里云实时计算的前世“功”今生“能”

前言：不修内功，难成大器。为了将Apache Flink在阿里巴巴真正运行起来，阿里巴巴实时计算团队做了大量的优化，在阿里云上的产品正式命名为实时计算，以Flink SQL为主要API，致力于打造一款全球领先的实时计算引擎。正文：阿里云实时计算大可成稻草，小亦是利器在光明日报近期的文章中，回首互联网接入中国的二十多年，特别是最近五年，被互联网之光照耀的地方...

715

阅读约2分钟

2018-11-19

关于负载均衡的一切

什么是负载均衡？负载均衡（Load Balance）是分布式系统架构设计中必须考虑的因素之一，它通常是指，将请求/数据均匀分摊到多个操作单元上执行，负载均衡的关键在于均匀。常见的负载均衡方案有哪些？常见互联网分布式架构如上，分为： ● 客户端层 ● 反向代理层 ● 站点层 ● 服务层 ● 数据层可以看到，每一个下游都有多个上游调用，只需要做到，每一个...

697

阅读约6分钟

2018-11-19

记录KubeCon 2018，阿里云与容器技术极客们的亲密接触

2018年11月13日~15日，容器领域最大的峰会之一KubeCon+CloudNativeCon首次登陆中国，来自全球的顶级科技企业齐聚一堂进行了一场思想大碰撞，议题数量接近200个，比去年规模最大的北美峰会多出近30%，为国内外开发者奉献了一场前沿科技与创新领域的技术盛宴。阿里云作为大会钻石赞助商分享了在容器、无服务器计算以及云原生领域的趋势与实践。在...

724

阅读约2分钟

2018-11-19

扩展Spark Catalyst，打造自定义的Spark SQL引擎

Apache Spark是大数据处理领域最常用的计算引擎之一，被应用在各种各样的场景中，除了易用的API，稳定高效的处理引擎，可扩展性也是Spark能够得到广泛应用的一个重要原因。Spark中最常见的扩展就是基于DataSource API添加对新数据源的支持，除了Spark内置的HDFS，S3，Kafka等数据源，Parquet，Orc，Avro等数据类型...

1076

阅读约2分钟

2018-11-19

0028-如何在CDH未启用认证的情况下安装及使用Sentry

温馨提示：要看高清无码套图，请使用手机打开并单击图片放大查看。 1.文档编写目的 CDH平台中的安全，认证（Kerberos/LDAP）是第一步，授权（Sentry）是第二步。如果要启用授权，必须先启用认证。但在CDH平台中给出了一种测试模式，即不启用认证而只启用Sentry授权。但强烈不建议在生产系统中这样使用，因为如果没有用户认证，授权没有任何意义形同虚...

1048

阅读约49分钟

2018-11-19

0027-如何在CDH集群启用Kerberos

温馨提示：要看高清无码套图，请使用手机打开并单击图片放大查看。 1.文档编写目的本文档讲述如何在CDH集群启用及配置Kerberos，您将学习到以下知识： 1.如何安装及配置KDC服务 2.如何通过CDH启用Kerberos 3.如何登录Kerberos并访问Hadoop相关服务文档主要分为以下几步： 1.安装及配置KDC服务 2.CDH集群启用Kerb...

793

阅读约30分钟

2018-11-19

0026-Hive使用十六进制分隔符异常分析

温馨提示：要看高清无码套图，请使用手机打开并单击图片放大查看。 1.问题描述通过sqoop抽取Mysql表数据到hive表，发现hive表所有列显示为null Hive表的分隔符为“u001B”,sqoop指定的分隔符也是“u001B” 通过命令show create table test_hive_delimiter查看建表语句如下: 0: jdbc:h...

815

阅读约17分钟

2018-11-19

0025-CENTOS6.5安装CDH5.12.1(二)

温馨提示：要看高清无码套图，请使用手机打开并单击图片放大查看。 5.快速组件服务验证 5.1HDFS验证(mkdir+put+cat+get) mkdir操作： _[root@ip-172-31-6-148_~]# hadoop fs -mkdir -p /fayson/test [root@ip-172-31-6-148 ~]# hadoop fs -ls...

777

阅读约18分钟

2018-11-19

[译]介绍Spark2.4的用于处理复杂数据类型的新内置函数与高阶函数

[译]介绍Spark2.4的用于处理复杂数据类型的新内置函数与高阶函数本文翻译自databricks的介绍spark2.4新特性的blog，英文原文参考原文链接 Apache Spark2.4总共支持了29个用于处理复杂数据类型（比如，数组类型等）的新内置函数和高阶函数。在Spark2.4版本之前，有两种典型的方式处理复杂数据类型：将嵌套结构的数据转化...

832

阅读约2分钟

2018-11-19

0023-HOSTS配置问题导致集群异常故障分析

温馨提示：要看高清无码套图，请使用手机打开并单击图片放大查看。 1.问题现象 Hadoop集群HDFS、YARN、Hive等服务出现异常告警重启集群异常告警任然存在大量告警 Cluster 1 HDFS 可用空间抑制... NameNode 运行状况抑制... HDFS 金丝雀抑制... DataNode (ip-172-31-10-118) 日志文件 N...

723

阅读约7分钟

2018-11-19

分布式图数据库JanusGraph-简介

JanusGraph设计的目的是处理大图，单机无论是在存储和计算能力上都无法满足大图处理。大规模图实时计算和分析是JanusGraph最基本的优势。本节将讨论更多JanusGraph特有的优势以及它底层支持的存储方案。转自：JanusGraph中文翻译文档 1.1. JanusGraph 基本优势支持非常大的图。JanusGraph通过添加机器横向扩展集...

924

阅读约4分钟

2018-11-19

如何在Kubernetes里给PostgreSQL创建secret

创建一个initdb.sql文件，输入如下内容： -- This is a postgres initialization script for the postgres container. -- Will be executed during container initialization ($> psql postgres -f initdb....

751

阅读约2分钟

2018-11-19

如何使用Kubernetes的configmap通过环境变量注入到pod里

在Kubernetes官网里，有这样一篇文章，提到了Kubernetes里的一个最佳实践就是把应用代码同配置信息分开，一种方式就是使用Kubernetes 1.2里引入的configmap概念。 https://kubernetes.io/blog/2016/04/configuration-management-with-containers/ confi...

758

阅读约2分钟

2018-11-19

使用Gardener在Google Cloud Platform上创建Kubernetes集群

Gardener是一个开源项目，github地址： https://github.com/gardener/gardener/ 使用Gardener，我们可以在几分钟之内在GCP, AWS, Azure或者Openstack上轻松创建Kubernetes Cluster。点击新建按钮创建一个Cluster，这里Infrastructure我选择的是gcp：...

855

阅读约2分钟

2018-11-19

通过describe命令学习Kubernetes的pod属性详解

我们可以首先使用kubectl get pods命令得到pod列表，比如我们想研究pod nginx-storage-pod的明细：使用命令kubectl describe pod nginx-storage-pod > nginx-storage-pod.yaml, 将describe命令的输出重定向到一个yaml文件里。用vi打开这个yaml文件...

1336

阅读约2分钟

2018-11-19

使用describe命令进行Kubernetes pod错误排查

我有一个pod名叫another，用kubectl create创建后发现过了29分钟，状态还是处于ContainerCreating阶段。使用kubectl describe命令检查：从错误消息发现是因为这个pod attach volume失败： FailedAttachVolume 2m1s (x22 over 31m) attachdetach-...

841

阅读约5分钟

资源下载

更多资源

腾讯云软件源

为解决软件依赖安装时官方源访问速度慢的问题，腾讯云为一些软件搭建了缓存服务。您可以通过使用腾讯云软件源站来提升依赖包的安装速度。为了方便用户自由搭建服务架构，目前腾讯云软件源站支持公网访问和内网访问。

Nacos

Nacos /nɑ:kəʊs/ 是 Dynamic Naming and Configuration Service 的首字母简称，一个易于构建 AI Agent 应用的动态服务发现、配置管理和AI智能体管理平台。Nacos 致力于帮助您发现、配置和管理微服务及AI智能体应用。Nacos 提供了一组简单易用的特性集，帮助您快速实现动态服务发现、服务配置、服务元数据、流量管理。Nacos 帮助您更敏捷和容易地构建、交付和管理微服务平台。

Sublime Text

Sublime Text具有漂亮的用户界面和强大的功能，例如代码缩略图，Python的插件，代码段等。还可自定义键绑定，菜单和工具栏。Sublime Text 的主要功能包括：拼写检查，书签，完整的 Python API ， Goto 功能，即时项目切换，多选择，多窗口等等。Sublime Text 是一个跨平台的编辑器，同时支持Windows、Linux、Mac OS X等操作系统。

WebStorm

WebStorm 是jetbrains公司旗下一款JavaScript 开发工具。目前已经被广大中国JS开发者誉为“Web前端开发神器”、“最强大的HTML5编辑器”、“最智能的JavaScript IDE”等。与IntelliJ IDEA同源，继承了IntelliJ IDEA强大的JS部分的功能。

文章列表

spring cloud互联网分布式微服务云平台规划分析--spring cloud定时调度平台

spring cloud互联网分布式微服务云平台规划分析--spring cloud服务监控中心

spring cloud互联网分布式微服务云平台规划分析--spring cloud服务统一配置中心

使用Kubernetes Ingress来实现类似Istio条件路由

阿里云实时计算的前世“功”今生“能”

关于负载均衡的一切

记录KubeCon 2018，阿里云与容器技术极客们的亲密接触

扩展Spark Catalyst，打造自定义的Spark SQL引擎

0028-如何在CDH未启用认证的情况下安装及使用Sentry

0027-如何在CDH集群启用Kerberos

0026-Hive使用十六进制分隔符异常分析

0025-CENTOS6.5安装CDH5.12.1(二)

[译]介绍Spark2.4的用于处理复杂数据类型的新内置函数与高阶函数

0023-HOSTS配置问题导致集群异常故障分析

分布式图数据库JanusGraph-简介

如何在Kubernetes里给PostgreSQL创建secret

如何使用Kubernetes的configmap通过环境变量注入到pod里

使用Gardener在Google Cloud Platform上创建Kubernetes集群

通过describe命令学习Kubernetes的pod属性详解

使用describe命令进行Kubernetes pod错误排查

资源下载

腾讯云软件源

Nacos

Sublime Text

WebStorm

欢迎您来访！